本文实例为爬取拉勾网上的python相关的职位信息, 这些信息在职位详情页上, 如职位名, 薪资, 公司名等等. 分析思路 分析查询结果页 在拉勾网搜索框中搜索’python’关键字, 在浏览器地址栏可以看到搜索结果页的url为: ‘https://www.lagou.com/jobs/list_python?labelWords=&fromSearch=true&suginput=’, 尝试将?后的参数删除, 发现访问结果相同. 打开Chrome网页调试工具(F12), 分析每条搜索结果(即每个职位)在html中所处的元素定位, 发现每条结果都在<ul class=”item_con_li

这个例子用python爬取拉勾网上的数据，并保存到excel中，注意header中的数据最好自己用浏览器得到，并替换一下。

通过python爬虫批量下载PDF文件，当前代码使用下载人教版学生教材举例； 其中涉及到批量下载、文件重命名、正则表达式等具体应用

最短路问题是网络理论解决的典型问题，可用来解决管路铺设、线路安装、厂区布局和设备更新等实际问题。基于Graph Theory Toolbox的最短路问题的实现(原创18页) ;文档最后附核心源代码,Python爬虫核心代码,山东省15各地级市经纬度;目录结构-见预览

利用Python爬虫实现百度网盘自动化添加资源-附件资源

Scrapy吸引人的地方在于它是一个框架，任何人都可以根据需求方便的修改，下面这篇文章主要给大家介绍了关于Python抓取框架Scrapy爬虫入门之页面提取的相关资料，文中通过示例代码介绍的非常详细，需要的朋友可以参考下。

python爬虫三个经典案例与selenium的使用文档

13天学会python网络爬虫资料

清洗后的数据：包括全国333地级市的十年气象数据，包括省份地区、年份、时间、天气状况、最高气温、最低气温 、风向(早)、风力(晚上)等，记录数据将近90W行，并附中国二级行政区域对照表 原始数据集：包含34个省级行政区所有二级行政区的数据按照城市为单位，比如陕西为例（西安、宝鸡、咸阳、铜川、渭南、延安、榆林、汉中、安康、商洛共十个地级市数据都有，每一个地级市有单独文件） 爬虫项目源码：源码为Python代码、使用idea运行，也可以使用VScode运行,采用requests-bs4模式爬取数据。Requests模块用于网页信息提取，get方法获取参数；BeautifulSoup用于网页解析，获取网页内容 分析结果PPT，分析过程采用Tableau软件，天气预测总结如下：总结结果是为了完成项目组任务。 1、全国温度最高的前十个省份的夏季温度持续保持在40℃以上，这正好贴切的反映出当前全球变暖的情况，为我们保护环境敲响了警钟。 2、内陆地区昼夜温差大于沿海地区，所以我们应该时刻关注天气情况，注意增减衣物。 3、风力最强的季节往往都是春季，这也是我国北方和西北地区沙尘暴频发的一个季节，在春季来临之前做好预防可以大幅度降低国家和人民的财产损失。 4、西安市最常出现的是多云和晴天，这也是西安气候干燥的原因，我们应该从日常做起，节约用水，使水资源可持续循环使用。

压缩包包含文件： 部分源码 WS00-网络爬虫课程内容导学.pdf WS01-Requests库入门.pdf WS02-网络爬虫的盗亦有道.pdf WS03-Requests库网络爬取实战，pdf WS04-Beautiful Soup库入门.pdf WS05-信息标记与提取方法.pdf WS06-实例1-中国大学排名爬虫.pdf WS07-Re（正则表达式）库入门.pdf WS08-实例2-淘宝商品信息定向爬虫，pdf WS09-实例3-股票数据定向爬虫.pdf WS10-Scrapy爬虫框架.pdf WS11-Scrapy爬虫基本使用.pdf WS12-实例4-股票数据定向Scrapy爬中.pdf