属于自己整理的一些关于大数据课程的习题集，其中包含hadoop、hive、hbase等的一些习题检测对自己的理解。属于大数据课程的一些习题集和答案，还包含一些概念性的习题。
2021-01-28 04:22:28
110KB
1
大数据综合实验环境搭建（3个集群、Zookeeper、Hive、HBase）
2021-01-28 04:19:55
1.16MB
1
Centos 7安装配置Hadoop生态圈CDH5版本 其中包括hadoop hbase hive spark 等组件安装
2019-12-21 22:18:46
8.14MB
1
目录
第一部分 Spark学习 ....................................................................................................................... 6
第1章 Spark介绍 ................................................................................................................... 7
1.1 Spark简介与发展 ...................................................................................................... 7
1.2 Spark特点 .................................................................................................................. 7
1.3 Spark与Hadoop集成 ................................................................................................ 7
1.4 Spark组件 .................................................................................................................. 8
第2章 Spark弹性分布数据集 ............................................................................................... 9
2.1 弹性分布式数据集 .................................................................................................... 9
2.2 MapReduce数据分享效率低..................................................................................... 9
2.3 MapReduce进行迭代操作 ........................................................................................ 9
2.4 MapReduce进行交互操作 ...................................................................................... 10
2.5 Spark RDD数据分享 ............................................................................................... 10
2.6 Spark RDD 迭代操作 .............................................................................................. 10
2.7 Spark RDD交互操作 ............................................................................................... 10
第3章 Spark安装 ................................................................................................................. 11
第4章 Spark CORE编程 ....................................................................................................... 13
4.1 Spark Shell ........................................................
2019-12-21 19:51:58
6.04MB
1
hive-hbase-handler-1.2.1.jar解决hive1.2.1,hbase不兼容情况！
2019-12-21 19:38:34
177KB
1
第三部分：大数据平台
任务一、大数据平台搭建
1.配置 master Node 的主机名为：master；slaver1 Node 的主机名为：slaver1。
将查询 2 个节点的主机名信息以文本形式提交到答题框。
2.修改 2 个节点的 hosts 文件， 使用 FQDN 的方式，配置 IP 地址与主机名之间的映射关系。查询 hosts 文件的信息，将操作命令和返回结果以文本形式提交到答题框。
3.配置2个节点使用Ambari和iaas中的centos7的yum源。其中Ambari yum 源在 XianDian-BigData-v2.2.iso 软件包中。
4.在 master 节点安装 ntp 时钟服务，使用文件/etc/ntp.conf 配置 ntp 服务；
在 slaver 节点安装 ntpdate 软件包，将 slaver1 节点时钟同步到 master 节点，将操作命令和返回结果以文本形式提交到答题框。
5.检查 2 个节点是否可以通过无密钥相互访问，如果未配置，则进行 SSH 无密码公钥认证配置，将操作命令和返回结果以文本形式提交到答题框。
6.安装 2 个节点的 JDK 环境，其中 jdk-8u77-linux-x64.tar.gz 在
XianDian-BigData-v2.2.iso 软件包中，使用命令查看 JAVA 版本信息，将操作命令和返回结果以文本形式提交到答题框。
2019-12-21 18:54:06
78KB
1