1. 首页
  2. 编程语言
  3. Python
  4. 头条号爬虫demo

头条号爬虫demo

上传者: 2019-09-10 01:51:18上传 RAR文件 5.91KB 热度 30次
最近学习的scrapy爬虫框架,结合实际需要,做了一个爬取头条号中新闻的小示例。程序的pipeline中使用twisted的adbapi+cx_Oracle方式进行Oracle入库操作。如果需要运行此程序,请安装python的scrapy+cx_Oracle等库。另外,需要安装cx_Oracle对应版本的OracleClient或InstantClient(似乎支持11.2以上版本),两个x86或64版本也需要一致。
用户评论