从本地上传文件到HDFS上的代码!使用hadoop的API操作,使本地文件的代码上传到HDFS上!!!
2021-11-29 10:49:05 32.31MB docke hadoop hdfs
1
Prometheus Hadoop HDFS FSImage导出器 | 将Hadoop HDFS统计信息导出到包括 总数/每个用户/每个组/每个配置的目录路径/每个路径集 目录数 文件数 文件大小和大小分布(可选) 块数 文件复制(总体/每个用户摘要) 导出器使用解析FSImage。 这种方法的优点是 快速(2.6 GB FSImage〜50s) 不会给HDFS NameNode增加额外的负担(没有NameNode查询,您可以在第二个NameNode上运行它) 缺点是 没有实时更新,仅在NameNode写入FSImage时每6小时更新一次。 但是对于大多数情况(长期趋势,检测HDF
2021-11-17 14:28:13 132KB monitoring hadoop prometheus-exporter hdfs
1
hdfs ha设置文档
2021-11-01 18:13:29 1.61MB hadoop hdfs
1
手把手视频详细讲解项目开发全过程,需要的小伙伴自行百度网盘下载,链接见附件,永久有效。 这套视频课程一共包含十个章节,会将看着让人头大的大数据化繁为简,老师用生动的语言让大数据通俗易懂,更容易让大家接受和学习。 课程亮点: 1、知识体系完备,从小白到大神各阶段读者均能学有所获。 2、生动形象,化繁为简,讲解通俗易懂。 3、结合工作实践及分析应用,培养解决实际问题的能力。 4、每一块知识点, 都有配套案例, 学习不再迷茫。 适用人群: 1、对大数据Hadoop感兴趣的在校生及应届毕业生。 2、对目前职业有进一步提升要求,希望从事大数据行业高薪工作的在职人员。 3、对大数据行业感兴趣的相关人员。 课程介绍: 第一章 大数据基础和Zookeeper入门 第二章 Zookeeper操作和Hadoop环境搭建 第三章 HDFS操作 第四章 HDFS的JavaAPI操作和MapReduce入门 第五章 MapReduce的WordCount案例和分区 第六章 MapReduce的排序和序列化 第七章 MapReduce的运行机制和join操作 第八章 MapReduce的其他操作和yarn 第九章 数仓Hive基本操作 第十章 数仓Hive的其他操作和调优
2021-10-29 18:06:36 1KB hadoop hdfs mapreduce 大数据
HDFS异构存储,该方案能够智能的区分冷热数据,并按照配置的磁盘模式自动转移数据,做到冷热数据异构智能存储
2021-10-27 21:15:42 290KB hadoop hdfs 异构存储
1
hadoop之上传文件,文件夹到hdfs,从hdfs中下载文件,文件夹所依赖的jar包. 这几个jar包是必须的,我做过实例的了 没有问题.
2021-10-23 07:37:23 9.94MB hadoop hdfs
1
Hadoop配置文件,包括core-site.xml、hadoop-evn.sh、hdfs-site.xml、map-red.xml、yarn-site.xml等配置文件各个选项及对应的功能配置
2021-10-21 21:33:41 132KB hadoop hdfs
1
大数据技术之hadoop,详细讲解hdfs系统,理解分布式存储
2021-10-08 10:46:29 16.19MB hadoop 大数据 hdfs
1
这是牛批的doug cutting代码实现hadoop的那三篇论文,这三篇论文是google研究成果,竟然有人能根据论文实现这么复杂的机制,让我对学术论文有了新的看法!
2021-09-10 21:41:26 2.22MB Hadoop HDFS YARN
1
1、Hadoop 业界资讯......................................... - 1 - 2、Nutch + Hadoop 构建商用分布式搜索引擎的问题探究 ........... - 5 - 3、支持自定义爬虫的Nutch segment文件存储接口改写........... - 11 - 4、Nutch中mapreduce应用的几个特殊点 ...................... - 14 - 5、Java RMI + Lucene 构建分布式检索应用初探 ................ - 17 - 6、一对多的表关联在mapreduce中的应用(续) .................. - 26 - 7、InputSplit文件格式分析................................. - 32 - 8、短评:HDFS、MapReduce和HBase三者相辅相成、各有长处 ..... - 34 - 9、HDFS在web开发中的应用................................. - 35 - 10、Mapreduce中value集合的二次排序 ....................... - 38 - 11、Hive SQL手册翻译 ................................... - 47 - 12、Mahout Kmeans简介 .................................... - 57 -
2021-09-06 17:18:56 2.36MB Hadoop HDFS Hive Mahout