Gospider:一款基于Go语言的快速Web爬虫

文章目录 功能介绍 工具安装 工具使用 样本命令 爬取单个网站: 爬取网站列表: 同时爬取20个站点,每个站点分配10个bot: 从第三方(Archive.org, CommonCrawl.org, VirusTotal.com, Alien…