使用Python对汽车数据进行爬取，并将爬取结果进行可视化大屏展示，展示的情况包括车辆信息、车辆图片、可视化图表、排行榜等，资源内有效果图，使用前请仔细查看说明文档

通过HBase、Hive、MySQL和Python的联合使用，对弹幕数据进行了基础的分析，文章适合大数据的初学者用于提升和进一步系统地认识。

FFmpeg分为3个版本：Static、 Shared、 Dev 前两个版本可以直接在命令行中使用。包含了三个exe:ffmpeg.exe，ffplay.exe，ffprobe.exe Static版本中的exe体积较大,那是因为相关的Dll都已经编译进exe里面去了。 Shared版本中exe的体积相对小很多,是因为它们运行的时候还需要到相关的dll中调用相应的功能 Dev版本用于开发,里面包含了库文件xxx.lib以及头文件xxx.h 也可按照博文自行编译：https://blog.csdn.net/u012793120/article/details/110719612

牛客网招聘网站数据集爬取，用于大数据基础课程设计项目的统计分析。主要是利用招聘数据在Hadoop生态中进行导入、导出、统计分析、数据可视化。

爬取58同城、赶集网、链家、安居客、我爱我家网站的房价交易数据，放假分析以及预测

中图网爬取的二手房数据——NoSQL综合项目数据集，对HBase、Redis、MongoDB、Neo4j等NoSQL数据库进行增删改查操作，并对MongoDB进行基本的统计分析。

贝克找房网站爬取的二手房数据信息，该数据用于Hadoop综合项目的数据分析。主要利用MapReduce、Hive对爬取的数据统计分析，并进行数据可视化。

本项目涉及一个有多个页面的电影网站，我们使用递归、深度优先、广度优先等方法爬取各个网页的数据，实现了爬取电影网站数据的爬虫程序。 此项目可用于期末大作业

使用scrapy创建爬虫程序、使用BeautifulSoup爬取数据、爬取关联网页数据、使用管道存储数据 本项目涉及一个包含多个网页的图书网站，我们使用scrapy爬取各个网页的数据，实现了爬取图书网站数据的爬虫程序。 scrapy是一个优秀的分布式爬取框架，它规定了一系列的程序规则，例如，使用items.py定义数据的格式，使用pipelines.py实现数据的存储，使用spider.py实现数据的爬取，使用settings.py规定各个模块之间的联系，对复杂的爬虫程序进行模块化管理。我们只需按规则填写各个模块即可，各个模块的协调工作由scrapy自动完成。而且scrapy支持使用XPath与CSS方法查找网页数据。使用scrapy可以高效地爬取大多数网站的数据。 但是实际上有些网站的数据是使用JavaScript管理的，一般的scrapy并不能执行JavaScript程序，在后面的项目中将介绍能执行JavaScript程序的爬虫程序技术。

【计算机课程设计】python 新闻爬取（数据爬取+可视化）,使用前请务必查看说明文档