1. 首页
  2. 编程语言
  3. C++ 
  4. 网络蜘蛛webspider开源系统

网络蜘蛛webspider开源系统

上传者: 2018-12-15 12:44:17上传 GZ文件 13.67KB 热度 46次
稳定的网络蜘蛛,可以并行抓取多个站点,BS架构控制系统,使用httpsqs 和淘宝的tair可以作为分布式爬虫基础,去重能力强,存储系统为mysql,可以用sphinx等做索引,原始版本
下载地址
用户评论
码姐姐匿名网友 2018-12-15 12:44:17

谢谢楼主的资源。

码姐姐匿名网友 2018-12-15 12:44:17

很有参考性。感谢楼主