1. 首页
  2. 移动开发
  3. 其他
  4. Python 基于scrapyscrapyredisscrapysplash编写的爬虫

Python 基于scrapyscrapyredisscrapysplash编写的爬虫

上传者: 2020-07-24 10:32:57上传 ZIP文件 26.39KB 热度 25次
本项目基于scrapy scrapy-redis scrapy-splash编写的爬取gushiwen.org上面诗词的爬虫,在爬取的过程中将需要解析的链接存入redis,将诗词数据持久化到mysql数据库
用户评论