sqoop常用命令文件

使用hyper-v虚拟机进行Hadoop集群环境搭建，和Linux基础加强，shell脚本

数据包括运行代码和数据类型，启动hive导入表和数据就可以运行结果

尚硅谷 hive 课程教学文档

JDBC连接hive,用JD连接hive。

Hive-JSON-Serde-1.3.8.zip

使用情况 数据量统计: 总数据量: ~1.7PB 系统总容量： ~2.4PB 每日新增数据量: ~15TB 6TB 未压缩原始日志 4TB 未压缩的多维数据（每天重新加载） 压缩率： ~5x (gzip, more with bzip) 使用情况统计: 3200 jobs/day with 800K tasks(map-reduce tasks)/day 55TB of compressed data scanned daily 15TB of compressed output data written to hdfs 80 MM compute minutes/day

基于Hadoop的hive数据仓库的配置详细指南，linux环境下

windows系统下eclipse集成hadoop,spark,hive开发环境

使用hive3.1.2和spark3.0.0配置hive on spark的时候，发现官方下载的hive3.1.2和spark3.0.0不兼容，hive3.1.2对应的版本是spark2.3.0，而spark3.0.0对应的hadoop版本是hadoop2.6或hadoop2.7。 所以，如果想要使用高版本的hive和hadoop，我们要重新编译hive，兼容spark3.0.0。除了兼容spark3.0.0外，还将hive3.1.2的guava的版本进行了提升，和hadoop3.x保持一致，以便兼容hadoop3.1.3。