大数据和云计算 - 作业 3
网站： :
团队：
朱莉安娜 Louback - jl4354
恩里克·斯皮拉·古伯特 - hs2807
Radu Michael Moldoveanu - rmm2231
注意：我们实施了分析以查看情绪如何随着时间的推移而演变以获得额外的分数。
内容
web_interface ：显示所有分析的 Web 应用程序
情绪分析：带有地图减少程序的文件夹，用于提取趋势和情绪时间序列
find_top_trends ：处理地图减少作业输出并准备可视化的Java程序
find_top_positive_and_negative_keywords ：处理地图减少作业输出并准备可视化的Java程序
merge_sentiment_timeseries ：处理地图减少作业输出并准备可视化的java程序
copy_tweet_data ：将推文原始数据传输到我
2024-07-15 11:14:24
88.95MB
1
OGG_BigData_Linux_x64_12.3.2.1.1.zip，ogg大数据同步oracle增量数据，linux版
2023-02-11 16:08:22
90.8MB
1
HCIP-Big+Data+Developer+V2.0+实验手册和培训文档.rar
2022-12-25 13:19:42
19.22MB
HCIE-Big+Data-Data+Mining+V2.0+培训文档.rar
2022-12-25 13:19:42
13.27MB
Bigdata-movie
本项目以电影数据为主题，以数据采集、处理、分析及数据可视化为项目流程，可实现百万级电影数据离线处理与计算。
项目详解：.
开发环境：IDEA+Pycharm+Python3+hadoop2.8+hive2.3.0+mysql5.7+sqoop+spark
1.数据采集(pachong.py)、预处理：
采集豆瓣电影top250电影信息，采集电影名称、电影简介、电影评分、其他信息、电影连接等字段，抓取电影票房总收入排名情况（取前20），删除冗余和空值字，利用Python的PyMysql库连接本地Mysql数据库并导入movies表，可以将数据保存到本地，从而进行数据可视化展示，也可将数据导入到大数据的Hive数仓工具中，用于大数据分析。
采集数据展示：
排序 影片名称 类型 总票房（万） 场均人次 上映日期
1 战狼2 动作 567928 38 2017/7/27
2022-11-05 15:29:48
7.13MB
1
HCIA-Big Data V3.5 培训文档.pdf
HCIA-Big Data V3.5 实验包.rar
HCIA-Big Data V3.5 实验手册.pdf
2022-10-14 14:04:05
64.86MB