Django结合使用Scrapy爬取数据入库的方法示例
在django项目根目录位置创建scrapy项目,django_12是django项目,ABCkg是scrapy爬虫项目,app1是django的子应用2.在Scrapy的settings.py中加入以下代码3.编写爬虫,下面代码以ABCkg为例,abckg.py4.scrapy中item.py 中引入django模型类5.pipelines.py中调用save()6.在django中models.py中一个模型类,字段对应爬取到的数据,选择适当的类型与长度7.通过命令启动爬虫:scrapy crawl 爬虫名称8.django进入admin后台即可看到爬取到的数据。
用户评论