Hadoop hbase hive sqoop集群环境安装配置及使用文档

【实验一】Ubuntu/Centos通用的hadoop集群搭建实验（来自OUC） 具体内容和步骤： 1. 成功创建Linux的虚拟机操作系统(Ubuntu或Centos)作为namenode，并设置好虚拟网卡、使用net方式使虚拟机可以访问互联网。 2. 完成虚拟机vim、net等工具的安装(最小安装的需要)、Hadoop环境变量的配置和安装。 3. 完成对namenode的链接克隆生成两台datanode，并设置好datanode的IP地址，确保其可以访问互联网。 4. 实现三台虚拟机两两之间的ssh无密登录。 5. 成功启动集群，且可通过jps命令查看各个虚拟机上活跃的节点（与实验要求一致），并可以正常访问对应的web页面。 以上实验要求均完美实现，且对每一步操作做了详细的截图和文字记录，细致入微。

最完整hive搭建说明文档，完全傻瓜模式，下载后，仔细认真，一步步操作

通过centos7物理服务器安装kvm及通过kvm创建centos7虚拟机且进行相关配置。 用于搭建虚拟机集群，构建云原生k8s集群或大数据hadoop、spark集群等

内容概要：包含spark2.2的升级包以及原始的spark1.6的包，其他的组件都可以使用 适用人员：在校大学生、数据开发、大数据开发、数仓开发、数据架构师等

课程分享——Flink大数据集群资源监控项目实战课程，基于flink1.13版本，附PPT+软件+代码下载。 本课程为Flink大数据项目实战教程，以Flink项目实现为主线，重点讲解Flink项目相关的核心技术，包含Flink流式计算、InfluxDB时序数据库和Grafana数据可视化等。本课程理论与实战相结合，最终全流程实现对YARN集群资源的画像。学完本课程，零基础的学员能快速上手Flink进行项目开发，有大数据基础的学员也能快速掌握Flink核心技术并积累Flink实际项目经验。 课程特色 1.课程紧抓Flink核心技术，以项目实战为导向，快速掌握Flink实时计算框架。 2.课程从原理、依赖引入、代码开发、文件配置、项目启动与测试等进行完整流程讲解，不会跳讲和断讲。 3.课程中无论案例代码开发还是项目业务代码开发，每一行代码都会边实现边讲解。 4.课程中目前使用Flink1.13.5最新稳定版本

大数据集群规划 hadoop集群软件硬件规划，报告一个规模超上千个节点Hadoop集群的【硬件规划,软件规划, 网络规划,应用规划】设计,综合考虑了集群头节点的高可用设计, 元数据的备份恢复设计，读写流量分离,多租户,安全审计设计,集 群冗余设,结合应用场景，结构化(文本和数据表)和非结构化数据 (影像)的等不同并行处理方式,并探索深度学习和Hadoop分布式融 合等规划。

Cloudera收费之后，CDH和HDP都需要订阅才能下载，这里是网盘地址，欢迎大家下载。内容包括ambari-2.7.4.0-centos7.tar.gz，HDP-3.1.4.0-centos7-rpm.tar.gz，链接失效或者部署过程中遇到任何问题可以私信我，同时列举了几条之前项目环境部署过程中遇到过的问题及解决办法，有爱好大数据领域的同学也可以私信我交流，互相学习，共同进步。

大数据集群无法启动connect to host slave2 port 22: Network is unreachable

01_大数据项目的开发流程 02_大数据的应用领域（一） 03_大数据的应用领域（二） 04_大数据分析平台（一） 05_大数据分析平台（二） 06_数据量及集群规模的规划（一） 07_数据量及集群规模的规划（二） 08_企业常见数据分析需求（一） 09_企业常见数据分析需求（二）