基于CentOS7的Hadoop2.7.7集群部署+Hive1.2.2+Zookeeper3.4.14集群+hbase1.x+kylin2.5.0环境搭建，以及一个简单的kylin案例介绍
2021-05-28 17:29:04
2.4MB
1
一、问题发现与分析
问题：
用公司的大数据平台导数，已经开发上线一个多月的一批报表，突然有同事说有个报表数据不准。出在时间字段上。
分析:
1、先看了原数据MySQL字段类型为datetime,目标字段为string类型；
2、经发现所有时间的差距都是8小时，怀疑是因为时区转换的原因；
3、对比其他表，看看是大范围现象还是特殊情况，发现其他的同样情况字段的一样没有问题
二、解决办法
经过对比：sqoop在转换MySQL的datatime字段类型为hive的string时会出现问题：默认先转为对应时间戳，再转换为北京市区时间，就会使时间多8小时。
解决办法有两个：
1、在sql里将时间字段转换为
2021-05-26 16:04:59
35KB
1
springboot +hive+mysql 多数据源切换 个人写了一个demo 并测试通过 下载地址
2021-05-25 17:54:47
31B
1
测试数据--统计出掉线率最高的前10基站----统计出掉线率最高的前10基站测试数据
2021-05-23 22:10:02
54.74MB
1
清华大学出品的大数据实战课程PPT学习课件，非常适合大学生和职场人士学习，也适合老鸟复习回顾，完全可用于自学入门，很经典好用的PPT课件哦~
2021-05-23 22:05:46
3.98MB
清华大学出品的大数据实战课程PPT学习课件，非常适合大学生和职场人士学习，也适合老鸟复习回顾，完全可用于自学入门，很经典好用的PPT课件哦~
2021-05-23 22:05:38
2.51MB
清华大学出品的大数据实战课程PPT学习课件，非常适合大学生和职场人士学习，也适合老鸟复习回顾，完全可用于自学入门，很经典好用的PPT课件哦~
2021-05-23 22:05:36
2.86MB