python爬虫利器之requests库的用法(超全面的爬取网页案例)

requests库利用pip安装:基本请求1.get请求参数是字典，我们可以传递json类型的参数：返回了状态码，所以我们要想获取内容，需要将其转成text：2.post 请求参数也是字典，也可以传递json类型的参数：因为这里需要一个登录的网页，我这里就随便用了一个，没有登录，所以显示的结果是这样的，如果想要测试登录的效果，请找一个登录的页面去尝试一下。代理IP可以去：快代理去找，也可以去购买。