python爬虫课设,爬取51job网站岗位基本信息,大学开展python数据获取与预处理的小伙伴们,可以直接拿来用

上传者: m0_63007797 | 上传时间: 2023-02-02 16:45:36 | 文件大小: 3.63MB | 文件类型: RAR
该课题要求爬取目标网站:https://www.51job.com中,输入关键字后工作岗位的基本信息如岗位名字、岗位薪资、base地、福利、岗位要求、岗位需求公司、发布日期、公司所属行业、公司性质、招聘岗位简介、公司简介等,爬取过程中需要注意网页反爬机制。 (1)编写代码,模仿浏览器人为操作,通过关键字爬取人才网的职位信息; (2)将爬取到的网页信息进行信息预处理、清洗等。 (3)将处理完的数据存储在Mysql数据库中,数据库名为job,或者数据存储在名为job的Excel表格或名为job的记事本文件中。 (4)用数据可视化处理数据,生成岗位在地图上面的热力图、热门地区岗位薪资待遇柱状图、热门地区岗位招聘个数折线图以及以招聘地区出现次数的云图,从而反馈出岗位的热门地区以及薪资待遇。 (5)设计对抓取数据的备份还原机制,确保数据安全。

文件下载

资源详情

[{"title":"( 8 个子文件 3.63MB ) python爬虫课设,爬取51job网站岗位基本信息,大学开展python数据获取与预处理的小伙伴们,可以直接拿来用","children":[{"title":"python实训爬虫课设","children":[{"title":"程序","children":[{"title":"wordcloud.png <span style='color:#111;'> 387.43KB </span>","children":null,"spread":false},{"title":"job.csv <span style='color:#111;'> 33.17KB </span>","children":null,"spread":false},{"title":"dump.sql <span style='color:#111;'> 14.43KB </span>","children":null,"spread":false},{"title":"城市职位热力图.html <span style='color:#111;'> 3.48MB </span>","children":null,"spread":false},{"title":"mysql.py <span style='color:#111;'> 4.62KB </span>","children":null,"spread":false},{"title":"visual.py <span style='color:#111;'> 1.59KB </span>","children":null,"spread":false},{"title":"spider.py <span style='color:#111;'> 7.31KB </span>","children":null,"spread":false}],"spread":true},{"title":"实训报告","children":[{"title":"python实训报告.docx <span style='color:#111;'> 2.11MB </span>","children":null,"spread":false}],"spread":true}],"spread":true}],"spread":true}]

评论信息

免责申明

【只为小站】的资源来自网友分享,仅供学习研究,请务必在下载后24小时内给予删除,不得用于其他任何用途,否则后果自负。基于互联网的特殊性,【只为小站】 无法对用户传输的作品、信息、内容的权属或合法性、合规性、真实性、科学性、完整权、有效性等进行实质审查;无论 【只为小站】 经营者是否已进行审查,用户均应自行承担因其传输的作品、信息、内容而可能或已经产生的侵权或权属纠纷等法律责任。
本站所有资源不代表本站的观点或立场,基于网友分享,根据中国法律《信息网络传播权保护条例》第二十二条之规定,若资源存在侵权或相关问题请联系本站客服人员,zhiweidada#qq.com,请把#换成@,本站将给予最大的支持与配合,做到及时反馈和处理。关于更多版权及免责申明参见 版权及免责申明