本文件内容适用于学习Hadoop时所需配置Hive的所有文件,包括以下内容: core-site.xml hdfs-site.xml mapred-site.xml yarn-site.xml mapred注意.txt pwd.txt 配置文件收集不易,有部分配置内容已单独复制出来! 希望大家点个收藏点个赞,谢谢大家!
2022-06-28 14:06:09 3KB hdfs hadoop 虚拟机
1
本文以在中移软件研发中心工作期间参与的大数据项目为背景,着重研究Hadoop相关系统的设计思想和基本框架,并设计和实现一个自动化、可扩展、可监控、可管理的应用于大规模Hadoop集群的部署管理系统,本文主要研究内容包含几个部分: 1.说明项目背景,分析项目的研究意义和应用前景。 2.研究Hadoop相关系统发展概况,说明现有的Hadoop集群部署管理技术,并对比分析它们的优缺点,为技术的选择和系统的设计提供依据。 3.深入分析Hadoop及其相关系统的设计思想和基本框架。重点研究 HDFS、MapReduce、HBase和Hive系统的核心算法和实现原理,分析它们运行的守护进程各自的职责和相互间协同工作模式,作为项目设计的理论基础。 4.深入研究项目所使用的技术。重点分析自动化配置和部署工具Puppet 的基本框架、运行机制和语法机制,为项目的设计和实现提供技术支持。 项目的分析、设计和实现。先对项目进行需求分析,分析大规模集群在硬件配置、操作系统、网络环境之间的异构性,分析Hadoop相关系统的服务、配置文件以及软件包之间的依赖关系。然后根据需求分析结果,对整个系统体系结构进行设计,
2022-06-28 14:06:08 2.87MB Hadoop 集群部署 MapReduce 部署管理系统
分享课程——大数据开发工程师2022,内附下载地址,这套视频教程是2022最新升级版,一共23周内容,囊括了大数据相关的所有知识点,比如:flink/hadoop/spark/hive/hbase/数据仓库等等,可以说学习大数据一“部”到位!,想学习大数据的朋友,抓紧时间下载吧
2022-06-28 14:06:06 204B 大数据 flink spark hadoop
1
hadoop 2.7.3 + Windows安装替换bin目录文件
2022-06-27 14:08:44 205.88MB hadoop
1
大数据系统学习笔记-0002 - Hadoop集群搭建 - 资源包 资源列表: hadoop-2.7.4.tar.gz jdk-8u301-linux-x64.tar.gz zookeeper-3.4.10.tar.gz
2022-06-26 20:05:23 425.62MB 博客配套资源
1
使用eclipse不能直接運行mapreduce的代碼,安裝此插件可運行mr框架的代碼
2022-06-26 19:42:58 1.19MB hadoop eclipse
1
本文档包括矩阵相乘的实现过程和完整的代码
2022-06-26 12:39:07 202KB Hadoop 矩阵相乘
1
1、搭建Hadoop伪分布式环境,通过HDFS 进行文件的上传和下载来测试环境是否搭建成功; 2、创建Java Maven项目,编写MapReduce代码实现对文本中字符(包含大小写字母、数字、各种符号)的统计,将项目打成jar包放入Hadoop伪分布式环境中运行,验证代码是否正确。
2022-06-25 14:00:49 19KB hadoop hdfs
1
Hadoop云计算实验报告.docx
2022-06-25 11:01:04 1.1MB 互联网
这是每个学习spark必备的jar包,是根据我的个人试验后所得,官网正版,在spark官网下载。 资源包里不仅有需要的jar包,并且给不会再官网上下载的新手官方网址,可以自由下载资源
2022-06-24 22:47:39 198.54MB 官方下载地址
1