简单Python爬虫：获取URL链接；正则处理；保存TXT

可以直接下载整站的图片 代码中含注释 可批量下载

电影天堂里面的数据还是非常丰富的，这次的爬虫demo，是对电影天堂中的电影数据进行爬取，包括电影片名，导演，主演，演员等信息以及最后的迅雷下载地址。 经过4000部电影的爬取测试，我对代码多次进行优化，目前为止已没有什么bug，至少可以顺利对网站中的电影进行爬取。 详情可查看博客：https://blog.csdn.net/fengzhen8023/article/details/82875727

可爬取以下信息：岗位链接、 岗位名、 公司链接、 公司名、 薪资、薪资单位、 工作城市、 公司类型、 福利待遇、公司规模、 其他信息、 公司主营。 结果存储方式：excel/数据库

1.第一步的代码，是创建数据库以及相关的表，在第一次运行之后，就不需要运行了。 其实如果不需要根据运行的情况，在运行的时候创建表，我是觉得直接用可视化工具创建表示更加省功夫的。 2.期间还是发现很多问题的，mysql是模块名，所以自己的模块就不能有相同的模块名，否则会报一些奇怪的错误。 3.sql语句里面，表名、字段名是不需要单引号包着的，或者可以用`包着，这个就是键盘上面tab上一个，或者1左边那个符号，不知道叫什么。 毕业这么多年才知道，因为一直用Navicat来创建表的。或许这就是使用可视化工具的副作用吧。 4.好多地方可以优化的，不过就先不纠结了，现阶段看多几份代码可能更加有效果。

python爬虫爬取代理ip

因公司需求,需要根据公司名称爬取天眼查详细信息,先从工商局抓取需要的公司名称,然后根据名称抓取天眼查数据,2020年6月8号最新抓取天眼查python爬虫

爬取有道翻译API，自制翻译工具——Python爬虫。有道翻译提供即时免费的中文、英语、日语、韩语、法语、德语、俄语、西班牙语、葡萄牙语、越南语、印尼语、意大利语全文翻译、网页翻译、文档翻译服务。

实现抓取新闻页面所有新闻链接对应页面到本地

主要介绍了python爬虫 模拟登录人人网过程解析,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下