微博蜘蛛 本程序可以连续爬取一个或多个新浪微博用户（如，，）的数据，转换结果信息写入文件或数据库。写入信息几乎包括用户微博的所有数据，包括用户信息和微博信息两大类。因为内容太多，这里不再重复述，详细内容见。如果只需要用户信息，可以通过设置实现只爬取微博用户信息的功能。本程序需设置Cookie来获取微博访问权限，后面会讲解 。如果不想设置cookie，可以使用，同时功能类似。 爬取结果可写入文件和数据库，具体的写入文件类型如下： txt文件（默认） csv文件（默认） json文件（任选） MySQL数据库（任选） MongoDB数据库（任选） SQLite数据库（任选） 同时支持下

新手上手必会，非常简单，可直接运行。

使用Python编写的一个根据微博ID自动爬取评论的exe程序（非调用API，那个试了只能爬前50页），用户信息包括生日、地址、性别、粉丝数。压缩包内含使用说明书。懒得自己搞请下载exe，白嫖或者查看代码可以之后看我的另一篇帖子（还没写）

sina-weibo-crawler-master

##Weibo_Spider 微博爬虫 爬取内容：微博内容、账号、发表时间、点赞数、转发数、评论数 存储方式：将爬取内容存储到mongo数据库中 注意：只需要更改微博账号的ID 更新时间：2017.11.18 如有问题：联系 增加定时爬取 更新时间2018.1.30 环境 Python3.6+Mongo数据库 填写自己的微博账号名 整理自己爬取的微博账号的ID 直接运行main.py文件

本资源为新浪微博爬虫，目前支持针对用户爬取、针对超话爬取、针对地点爬取三种模式。 爬取的信息有：rid、用户名称、微博等级、微博内容、微博转发量、微博评论量、微博点赞、发布时间 发布设备、话题名称、@用户、搜索地点以及用户发过的照片等；详情使用请看文档里的ReadME说明。

简单好用，输入想要下载微博图片的对应用户的用户名，并不需要登录自己账号，并没有被封账号的危险。

利用账号密码模拟登录新浪微博，文件中用到了shiro的base64加密以及一些JSON包，使用前请先下载。

sina图片爬虫，依据一个博客id来查询所关注的相关博客的id，然后将这些所有的id来爬取相应的图片，需要修改相应页面（主要包括个人关注页面与个人图片展示页面）的cookies，具体可以见代码中说明

GUI地址：https://github.com/xyjigsaw/Weibo-Crawler-GUI 这是纯代码非GUI的博文：http://www.omegaxyz.com/2018/02/13/python_weibo/ GUI程序的功能： ①输入需要被爬取的微博的ID，点击运行选择保存的位置即可爬取。 ②进度可视化界面。 ③如果内置代理失效可以进行代理自定义设置。 ④可视化被爬取微博者的个人信息。