上传者: 29828003
|
上传时间: 2024-11-06 14:06:35
|
文件大小: 6.41MB
|
文件类型: ZIP
随着信息技术与编程技术的发展,人们越来越依赖搜索引擎搜索想要的信息。一样的,大学生毕业在面临就业的时候,会通过特定的搜索引擎搜索相关工作岗位。因此,为了减少大学生查找工作岗位信息的时间,而能够花更多的时间用来提升自己的专业能力和对面来的规划,本文在Python和Scrapy环境的基础下,以Boss招聘网站的通信岗位为抓取目标,在学习了基础的爬虫知识后,用Scrapy框架进行了一个获取Boss通信岗位信息的网络爬虫。在获取到相关数据后,对这些数据进行处理,并对其内容进行了简单的可视化。同时为了更直观的,更方便的观看这些爬取的信息,采用了No Sql的图形数据库neo4j存储每个岗位的具体信息。并修改了网上的开源项目做了一个简单的关于通信岗位就业信息的问答机器人。