hive-exec-1.2.1.spark2.jar spark2-shell 支持 hive2 hadoop3

apache-hive-2.3.7-bin 博客同款 防止下载不下来或者慢。https://blog.csdn.net/cs261244787/article/details/111374964

既可以连接没有kerberos的hive也可以连接有kerberos的hive

Hive2.3.4安装文档

hive JDBC jar包全家桶。由于项目使用，此jar包从国外下载费了好大劲，现分享给大家。 cdh6.3.2版本的

cdh-hive2.1.1版本orc文件读取数据报错替换包: Caused by: java.lang.ArrayIndexOutOfBoundsException: 7 at org.apache.orc.OrcFile$WriterVersion.from(OrcFile.java:145) at org.apache.orc.impl.OrcTail.getWriterVersion(OrcTail.java:74) at org.apache.orc.impl.ReaderImpl.(ReaderImpl.java:385) at org.apache.hadoop.hive.ql.io.orc.ReaderImpl.(ReaderImpl.java:62) at org.apache.hadoop.hive.ql.io.orc.OrcFile.createReader(OrcFile.java:89) at org.apache.hadoop.hive.ql.io.orc.VectorizedOrcInputFormat.getRecord

Hive JDBC连接示例 该项目展示了如何使用各种不同的方法连接到Hiveserver2。 所有类仅适用于Hiveserver2。 正在使用Cloudera JDBC驱动程序，可以从下载。 在撰写本文时，最新版本为v2.5.15 。 要求： 您需要下载驱动程序并将其复制到lib文件夹。 从下载zip，以获取正确的操作系统和体系结构。 解压缩并转到Cloudera_HiveJDBC41_xxx文件夹。 将所有罐子从那里复制到lib文件夹。 JDBC API v3.x支持JRE v4.0或v5.0 JDBC API v4.x支持JRE v6.0或更高版本 JDBC API v4.1.x支持JRE v7.0或更高版本 适用于Apache Hive的Cloudera JDBC驱动程序支持Hive 0.11、0.12、0.13、0.14、1.0和1.1。 有关更多信息，请参阅下载的z

问题 解决方案 在hadoop的配置文件core-site.xml增加如下配置： hadoop.proxyuser.hc.hosts * hadoop.proxyuser.hc.groups * 其中“hc”是连接beeline的用户。 启动测试 重启hdfs：先stop-all.sh，再start-all.sh，否则不会生效。 启动hiverserver2 查看是否启动：netstat -anp | grep 10000 3. 连接hiveserver2 作者：梁云亮

前言        本来将数据导入到hive，但是不知道什么原因太慢了，一小时200条数据，优化一波kettle，还是成效不大，因此改为借用hadoop file output 到hdfs，然后再load 到hive表里 一，正文 1.在转换里拖入big data/hadoop file output      新建hadoop cluster连接      从集群里下载core-site.xml，hdfs-site.xml，yarn-site.xml，mapred-site.xml      覆盖kettle的plugins\pentaho-big-data-plugin\hadoop-co

用于数据仓库搭建和MySQL安装对应的jar包，用于sqoop的安装