爬虫分享(一):单线程爬取妹子图

爬虫分享(一):单线程爬取妹子图 1. 解析网页 ​ url = ‘https://www.27bao.com/’ ​ 首先分析网页结构 ​ 通过分析网页源代码可以发现动图的真实地址全都在img标签下的src属性里,我们要做的工作就是提取这些动图的地址,直接上代码 import requests import time import os from lxml import etree #解析网页,获取动图的地址 def get_urls(): url = 'https://www.27bao.com/' headers = {'User-Agent': 'Mozilla