1. 首页
  2. 编程语言
  3. Python
  4. python3.6利用IP代理爬虫防止被屏蔽

python3.6利用IP代理爬虫防止被屏蔽

上传者: 2019-05-02 13:03:24上传 TXT文件 2.77KB 热度 34次
有时需要爬取一个目标网站过多数据的时候,python会在短时间内多次访问,如果目标网站有反扒措施,则IP地址有可能被禁止访问,造成程序失败,可以用IP池做IP代理,headers池伪装不同浏览器,从而更搞笑的爬取数据
下载地址
用户评论