Scrapy Test Scraping:此项目使用Scrapy从模拟抓取网站抓取数据 源码

使用Scrapy进行网页抓取 这是一个Scrapy项目,用于从抓取模拟图书数据 要求: ( pip3 install scrapy ) 提取数据 该项目提取书名,价格,等级和网址。 提取的数据类似于以下示例: { 'title': 'A Light in the Attic', 'price': '£51.77', 'rating': 'Three', 'link': 'https://books.toscrape.com/catalogue/a-light-in-the-attic_1000/index.html' } 跑蜘蛛 您可以使用scrapy crawl命令运行Spider,例如: $ scrapy crawl bookspider 如果要将抓取的数据保存到文件中,则可以传递-o选项: $ scrapy crawl bookspider