为了有效的演示实验，更好的将理论与实验相结合，博主制作了本实验报告。本实验中分别有构建虚拟机网络。大数据环境安装以及大数据分析案例三部分实验，希望对大家有所帮助。
Hadoop简介：
Hadoop 是由 Apache 研发的开源分布式基础架构,它由 Hadoop 内核、MapReduce、 Hadoop 分布式文件系统(HDFS)及一些相关项目组成。其中,HDFS具有高容错性,负责大数据存储;MapReduce 则负责对 HDFS 中的大量数据进行复杂的分布式计算。Hadoop 作为分布式架构,采用“分而治之”的设计十思想:将大量数据分布式地存放于大量服务器上,采用分治的方式对大数据进行分析。 在这种思想的驱使下,Hadoop 实现了 MapReduce 的编程范式。其中,“Map”意为映射 其工作是将一个键值对分解为多个键值对;“Reduce”意为归约,其工作是将多组键值产对处理合并后产生新的键值对写入 HDFS。通过上述工作原理,MapReduce 实现了将大数据工作拆分为多个小规模数据任务在大量服务器上分布式处理。
2022-12-24 18:24:22
2.06MB
1
(完整word版)大数据技术原理与应用-林子雨版-课后习题答案.doc
2022-12-23 23:07:52
1.19MB
1
TSCTA 005-2021 工业大数据平台 数据治理 技术规范
TSCTA 005-2021 工业大数据平台 数据治理 技术规范
TSCTA 005-2021 工业大数据平台 数据治理 技术规范
TSCTA 005-2021 工业大数据平台 数据治理 技术规范
2022-12-22 21:24:12
1.77MB
1
自己写的代码实现研赛华为杯建模竞赛题，Python代码 有运行结果 原创 包括部分重要代码，包括各类数据预处理，建模，预测，数据分析等，获奖项目
2022-12-21 09:27:46
13.11MB
1
主要介绍了从0开始学习大数据之java spark编程入门与项目实践,结合具体入门项目分析了大数据java spark编程项目建立、调试、输出等相关步骤及操作技巧,需要的朋友可以参考下
2022-12-20 21:42:49
198KB
1