毕业设计大全源码
What
is
weixin_crawler?
weixin_crawler是一款使用Scrapy、Flask、Echarts、Elasticsearch等实现的微信公众号文章爬虫,自带分析报告和全文检索功能,几百万的文档都能瞬间搜索。weixin_crawler设计的初衷是尽可能多、尽可能快地爬取微信公众的历史发文
如果你想先看看这个项目是否有趣,这段不足3分钟的介绍视频一定是你需要的:
主要特点
使用Python3编写
爬虫框架为Scrapy并且实际用到了Scrapy的诸多特性,是深入学习Scrapy的不错开源项目
利用Flask、Flask-socketio、Vue实现了高可用性的UI界面。功能强大实用,是新媒体运营等岗位不错的数据助手
得益于Scrapy、MongoDB、Elasticsearch的使用,数据爬取、存储、索引均简单高效
支持微信公众号的全部历史发文爬取
支持微信公众号文章的阅读量、点赞量、赞赏量、评论量等数据的爬取
自带面向单个公众号的数据分析报告
利用Elasticsearch实现了全文检索,支持多种搜索和模式和排序模式,针对搜索结果提供了趋
2021-08-11 17:50:49
7.75MB
系统开源
1