上传者: 38693173
|
上传时间: 2023-03-06 11:23:25
|
文件大小: 682KB
|
文件类型: PDF
环境准备
Python 3.7
Mysql
requests
PyMySQL
BeautifulSoup
获取数据
分析数据请求过程
首先我们打开boss直聘网查看正常的请求过程
打开万能的 F12,刷新,查看下当前网络发生了什么
通过上图能够看到请求参数中包含了职位,页数等信息。
构造模拟请求
import requests
url = "https://www.zhipin.com/c101120100/?query=" + kw+"&page="+str(page)+"&ka=page-"+str(page)
headers = {
'Host': 'www.zhipin.co