requests是python实现的简单易用的HTTP库，使用起来比urllib简洁很多 因为是第三方库，所以使用前需要cmd安装 pip install requests 安装完成后import一下，正常则说明可以开始使用了。 基本用法： requests.get()用于请求目标网站，类型是一个HTTPresponse类型 import requests response = requests.get('http://www.baidu.com')print(response.status_code) # 打印状态码print(response.url) # 打印请求urlprint(

实现百度搜索图片下载到指定文件夹，获取网页源代码，可以自己下载，改一下网页的accept，referer，Method 参数等就可以获取到如淘宝京东或其他网页的图片。

从淘管家-已铺货商品列表中导出商品id、导出1688和TB商品的规格匹配关系，存入数据库用作后续的数据分析和商品数据更新 使用步骤： 1.搭建python环境，配置好环境变量 2.配置数据库环境，根据本地数据库连接修改albb_item.py中的数据库初始化参数 3.下载自己浏览器版本的浏览器驱动（webdriver），并将解压后的驱动放在python根目录下 4.将淘管家首页链接补充到albb_item.py的url参数中 5.执行database/DDL中的3个脚本进行数据库建表和数据初始化 6.运行albb_item.py,控制台和数据库观察结果 报错提示： 1.如果浏览器窗口能打开但没有访问url，报错退出，检查浏览器驱动的版本是否正确 2.代码中有红色波浪线，检查依赖包是否都安装完 ps:由于版权审核原因，代码中url请自行填写

音乐播放器(Python实现)，主要技术为Python爬虫、多线程、tkinter等，更加详细的了解请看文章，Python GUI编程:音乐播放器(多线程、爬虫、进度条、文件)，文章链接为：https://blog.csdn.net/qq_45404396/article/details/128505281

适合有基础的人哈，自行导入编译工具运行，仅供参考学习哈

微信已经成为了我们日常生活中不可缺少的工具，一年一度的除夕我们也都想第一时间给共度了一年的朋友们发去新年祝福。但除夕除了要忙碌地准备年夜饭，更是难得的一家人团聚时光，如果朋友一多，微信发祝福就显得有心无力了。 一、这是一个微信群发助手，可以实现以下功能： 1.登录微信并导出微信好友列表 2.给微信好友批量发送个性化消息和图片 3.生成微信好友头像图片墙 二、安装说明： 1.本软件仅适用于Windows平台，MacOS暂时不适配。 2.点击下载软件压缩包：WeChatFriendTool_1.0.zip，并且进行解压。 3.将解压后的文件夹添加到白名单 4.本软件依赖于WeChat 3.3.0.115版本，因此需要在电脑中安装此版本微信，点击下载，解压并安装：WeChat 3.3.0.115 5.这样就完成系统配置了，双击WeChatFriendTool_1.0文件夹下的main.exe即可以运行程序了。 6.具体的安装和设置可见本人博客的文章：https://ferryxie.com/archives/4116

自己开发了一个python网页爬虫，很好用，模拟网页操作，简单便捷，爬取的内容可直接保存为为csv格式 自己开发了一个python网页爬虫，很好用，模拟网页操作，简单便捷，爬取的内容可直接保存为为csv格式

这是新浪微博爬虫，采用python+selenium实现。 免费资源，希望对你有所帮助，虽然是傻瓜式爬虫，但是至少能运行。同时rar中包括源码及爬取的示例。 参考我的文章： http://blog.csdn.net/eastmount/article/details/50720436 [python爬虫] Selenium爬取新浪微博内容及用户信息 http://blog.csdn.net/eastmount/article/details/51231852 [Python爬虫] Selenium爬取新浪微博客户端用户信息、热点话题及评论 (上) 主要爬取内容包括： 新浪微博手机端用户信息和微博信息。 用户信息：包括用户ID、用户名、微博数、粉丝数、关注数等。 微博信息：包括转发或原创、点赞数、转发数、评论数、发布时间、微博内容等。 安装过程： 1.先安装Python环境，作者是Python 2.7.8 2.再安装PIP或者easy_install 3.通过命令pip install selenium安装selenium，它是自动测试、爬虫的工具 4.然后修改代码中的用户名和密码

本文主要介绍了Python爬虫：通过关键字爬取百度图片的方法。具有很好的参考价值，下面跟着小编一起来看下吧

该课题要求爬取目标网站：https://www.51job.com中，输入关键字后工作岗位的基本信息如岗位名字、岗位薪资、base地、福利、岗位要求、岗位需求公司、发布日期、公司所属行业、公司性质、招聘岗位简介、公司简介等，爬取过程中需要注意网页反爬机制。 （1）编写代码，模仿浏览器人为操作，通过关键字爬取人才网的职位信息； （2）将爬取到的网页信息进行信息预处理、清洗等。 （3）将处理完的数据存储在Mysql数据库中，数据库名为job，或者数据存储在名为job的Excel表格或名为job的记事本文件中。 （4）用数据可视化处理数据，生成岗位在地图上面的热力图、热门地区岗位薪资待遇柱状图、热门地区岗位招聘个数折线图以及以招聘地区出现次数的云图，从而反馈出岗位的热门地区以及薪资待遇。 （5）设计对抓取数据的备份还原机制，确保数据安全。