基于Hadoop／Hive的web日志分析系统的设计，为广大大数据爱好者提供更好的帮助，喜欢可以下载

3套面试题分享给大家

基于Hive的项目实战视频原始数据集，格式为 videoId string, uploader string, age int, category array, length int, views int, rate float, ratings int, comments int, relatedId array

HIVE函数大全，包括目前HIVE可用的所有函数，里面有详细说明。HIVE是基于Hadoop的一个数据仓库工具，用来进行数据提取、转化、加载，这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。

用法： $presto = new PrestoClient(); $data = $presto->querySql('select count(user_id) from xx.xx'); //库名.表名 var_dump($data);die();

windows下hive可执行文件，下载解压后替换hive安装目录 下的bin目录即可

本文利用搜狗搜索日志的500w条数据，对搜索日志进行了一系列的分析。主要分为两个阶段，第一阶段是数据准备、数据预处理和数据加载阶段，第二阶段为分析阶段。利用Hive等工具，完成30页的分析报告。

目录 第一部分 Spark学习 ....................................................................................................................... 6 第1章 Spark介绍 ................................................................................................................... 7 1.1 Spark简介与发展 ...................................................................................................... 7 1.2 Spark特点 .................................................................................................................. 7 1.3 Spark与Hadoop集成 ................................................................................................ 7 1.4 Spark组件 .................................................................................................................. 8 第2章 Spark弹性分布数据集 ............................................................................................... 9 2.1 弹性分布式数据集 .................................................................................................... 9 2.2 MapReduce数据分享效率低..................................................................................... 9 2.3 MapReduce进行迭代操作 ........................................................................................ 9 2.4 MapReduce进行交互操作 ...................................................................................... 10 2.5 Spark RDD数据分享 ............................................................................................... 10 2.6 Spark RDD 迭代操作 .............................................................................................. 10 2.7 Spark RDD交互操作 ............................................................................................... 10 第3章 Spark安装 ................................................................................................................. 11 第4章 Spark CORE编程 ....................................................................................................... 13 4.1 Spark Shell ........................................................

本JAR包用于把Mongo数据抽取到hive种对表字段的映射，如果没有这个包，是无法映射的

段海涛老师2017年最新12天hadoop视频，HDFS，MapReduce，zookeeper,hive,hbase,flume,案例，sqoop。资料齐全。