如何用Python爬取boss直聘职业信息

环境准备 Python 3.7 Mysql requests PyMySQL BeautifulSoup 获取数据 分析数据请求过程 首先我们打开boss直聘网查看正常的请求过程 打开万能的 F12,刷新,查看下当前网络发生了什么 通过上图能够看到请求参数中包含了职位,页数等信息。 构造模拟请求 import requests url = "https://www.zhipin.com/c101120100/?query=" + kw+"&page="+str(page)+"&ka=page-"+str(page) headers = { 'Host': 'www.zhipin.co