这是新浪微博爬虫,采用python+selenium实现。 免费资源,希望对你有所帮助,虽然是傻瓜式爬虫,但是至少能运行。同时rar中包括源码及爬取的示例。 参考我的文章: http://blog.csdn.net/eastmount/article/details/50720436 [python爬虫] Selenium爬取新浪微博内容及用户信息 http://blog.csdn.net/eastmount/article/details/51231852 [Python爬虫] Selenium爬取新浪微博客户端用户信息、热点话题及评论 (上) 主要爬取内容包括: 新浪微博手机端用户信息和微博信息。 用户信息:包括用户ID、用户名、微博数、粉丝数、关注数等。 微博信息:包括转发或原创、点赞数、转发数、评论数、发布时间、微博内容等。 安装过程: 1.先安装Python环境,作者是Python 2.7.8 2.再安装PIP或者easy_install 3.通过命令pip install selenium安装selenium,它是自动测试、爬虫的工具 4.然后修改代码中的用户名和密码
2021-06-21 15:24:44 111KB 源码
1
Weibo Spider 本程序可以连续爬取一个或多个新浪微博用户(如、、)的数据,并将结果信息写入文件或数据库。写入信息几乎包括用户微博的所有数据,包括用户信息和微博信息两大类。因为内容太多,这里不再赘述,详细内容见。如果只需要用户信息,可以通过设置实现只爬取微博用户信息的功能。本程序需设置cookie来获取微博访问权限,后面会讲解。如果不想设置cookie,可以使用,二者功能类似。 爬取结果可写入文件和数据库,具体的写入文件类型如下: txt文件(默认) csv文件(默认) json文件(可选) MySQL数据库(可选) MongoDB数据库(可选) SQLite数据库(可选) 同时支持下载微博中的图片和视频,具体的可下载文件如下: 原创微博中的原始图片(可选) 转发微博中的原始图片(可选) 原创微博中的视频(可选) 转发微博中的视频(可选) 原创微博Live Photo中的视频(特有
2021-06-21 10:34:29 102KB python python3 help-wanted weibo
1
这是纯代码非GUI的博文:http://www.omegaxyz.com/2018/02/13/python_weibo/ GUI程序的功能: ①输入需要被爬取的微博的ID,点击运行选择保存的位置即可爬取。 ②进度可视化界面。 ③如果内置代理失效可以进行代理自定义设置。 ④可视化被爬取微博者的个人信息。
2021-05-31 15:44:56 10.35MB python 爬虫
1
通过个人微博/官方微博ID,获取一定时间段以内该用户所转发的所有内容并按一定格式存储到本地。
2021-05-24 12:14:29 6KB python 微博
1
这是新浪微博爬虫,采用python+selenium实现。 免费资源,希望对你有所帮助,虽然是傻瓜式爬虫,但是至少能运行。同时rar中包括源码及爬取的示例。 参考我的文章: http://blog.csdn.net/eastmount/article/details/50720436 [python爬虫] Selenium爬取新浪微博内容及用户信息 http://blog.csdn.net/eastmount/article/details/51231852 [Python爬虫] Selenium爬取新浪微博客户端用户信息、热点话题及评论 (上) 主要爬取内容包括: 新浪微博手机端用户信息
2021-05-22 11:52:44 110KB 源码
1
三个文件分别是:1.py ,2.py ,sql.py 1.py为获取人的数据,并通过人的帖子,再获取与该人的帖子互动的人的信息。 2.py为用户与其粉丝的信息。 sql.py为对MySQL数据库的连接
2021-05-09 11:39:08 8KB 微博爬虫
1
微博爬虫2.0,这是纯代码第一篇非GUI的博文:http://www.omegaxyz.com/2018/02/13/python_weibo/ 增加功能:微博文字情感预测 原始GUI程序的功能: ①输入需要被爬取的微博的ID,点击运行选择保存的位置即可爬取。 ②进度可视化界面。 ③如果内置代理失效可以进行代理自定义设置。 ④可视化被爬取微博者的个人信息。
2021-05-03 12:06:20 31.11MB python
1
提供新浪微博爬虫代码,爬取某个地点发布的微博,包含该地所有人发布的个人微博内容。
2021-04-22 19:27:36 5KB 爬虫 微博 搜索
1
这是新浪微博爬虫,采用python+selenium实现。 免费资源,希望对你有所帮助,虽然是傻瓜式爬虫,但是至少能运行。同时rar中包括源码及爬取的示例。 参考我的文章: http://blog.csdn.net/eastmount/article/details/50720436 [python爬虫] Selenium爬取新浪微博内容及用户信息 http://blog.csdn.net/eastmount/article/details/51231852 [Python爬虫] Selenium爬取新浪微博客户端用户信息、热点话题及评论 (上) 主要爬取内容包括: 新浪微博手机端用户信息和微博信息。 用户信息:包括用户ID、用户名、微博数、粉丝数、关注数等。 微博信息:包括转发或原创、点赞数、转发数、评论数、发布时间、微博内容等。 安装过程: 1.先安装Python环境,作者是Python 2.7.8 2.再安装PIP或者easy_install 3.通过命令pip install selenium安装selenium,它是自动测试、爬虫的工具 4.然后修改代码中的用户名和密码
2021-04-17 22:23:33 111KB 源码
1
这是新浪微博爬虫,采用python+selenium实现。 免费资源,希望对你有所帮助,虽然是傻瓜式爬虫,但是至少能运行。同时rar中包括源码及爬取的示例。 参考我的文章: http://blog.csdn.net/eastmount/article/details/50720436 [python爬虫] Selenium爬取新浪微博内容及用户信息 http://blog.csdn.net/eastmount/article/details/51231852 [Python爬虫] Selenium爬取新浪微博客户端用户信息、热点话题及评论 (上) 主要爬取内容包括: 新浪微博手机端用户信息
2021-04-13 21:55:59 110KB python 新浪爬虫 新浪微博 selenium
1