只为小站
首页
域名查询
文件下载
登录
首页
hdfs源码.zip
hdfs源码.zip
上传者:
m0_46190977
|
上传时间: 2022-05-18 18:02:16
|
文件大小: 157.14MB
|
文件类型: ZIP
hdfs
hadoop
源码
第1章 HDFS 1 1.1 HDFS概述 1 1.1.1 HDFS体系结构 1 1.1.2 HDFS基本概念 2 1.2 HDFS通信协议 4 1.2.1 Hadoop RPC接口 4 1.2.2 流式接口 20 1.3 HDFS主要流程 22 1.3.1 HDFS客户端读流程 22 1.3.2 HDFS客户端写流程 24 1.3.3 HDFS客户端追加写流程 25 1.3.4 Datanode启动、心跳以及执行名字节点指令流程 26 1.3.5 HA切换流程 27 第2章 Hadoop RPC 29 2.1 概述 29 2.1.1 RPC框架概述 29 2.1.2 Hadoop RPC框架概述 30 2.2 Hadoop RPC的使用 36 2.2.1 Hadoop RPC使用概述 36 2.2.2 定义RPC协议 40 2.2.3 客户端获取Proxy对象 45 2.2.4 服务器获取Server对象 54 2.3 Hadoop RPC实现 63 2.3.1 RPC类实现 63 2.3.2 Client类实现 64 2.3.3 Server类实现 76 第3章 Namenode(名字节点) 88 3.1 文件系统树 88 3.1.1 INode相关类 89 3.1.2 Feature相关类 102 3.1.3 FSEditLog类 117 3.1.4 FSImage类 138 3.1.5 FSDirectory类 158 3.2 数据块管理 162 3.2.1 Block、Replica、BlocksMap 162 3.2.2 数据块副本状态 167 3.2.3 BlockManager类(done) 177 3.3 数据节点管理 211 3.3.1 DatanodeDescriptor 212 3.3.2 DatanodeStorageInfo 214 3.3.3 DatanodeManager 217 3.4 租约管理 233 3.4.1 LeaseManager.Lease 233 3.4.2 LeaseManager 234 3.5 缓存管理 246 3.5.1 缓存概念 247 3.5.2 缓存管理命令 247 3.5.3 HDFS集中式缓存架构 247 3.5.4 CacheManager类实现 248 3.5.5 CacheReplicationMonitor 250 3.6 ClientProtocol实现 251 3.6.1 创建文件 251 3.6.2 追加写文件 254 3.6.3 创建新的数据块 257 3.6.4 放弃数据块 265 3.6.5 关闭文件 266 3.7 Namenode的启动和停止 268 3.7.1 安全模式 268 3.7.2 HDFS High Availability 276 3.7.3 名字节点的启动 301 3.7.4 名字节点的停止 306 第4章 Datanode(数据节点) 307 4.1 Datanode逻辑结构 307 4.1.1 HDFS 1.X架构 307 4.1.2 HDFS Federation 308 4.1.3 Datanode逻辑结构 310 4.2 Datanode存储 312 4.2.1 Datanode升级机制 312 4.2.2 Datanode磁盘存储结构 315 4.2.3 DataStorage实现 317 4.3 文件系统数据集 334 4.3.1 Datanode上数据块副本的状态 335 4.3.2 BlockPoolSlice实现 335 4.3.3 FsVolumeImpl实现 342 4.3.4 FsVolumeList实现 345 4.3.5 FsDatasetImpl实现 348 4.4 BlockPoolManager 375 4.4.1 BPServiceActor实现 376 4.4.2 BPOfferService实现 389 4.4.3 BlockPoolManager实现 396 4.5 流式接口 398 4.5.1 DataTransferProtocol定义 398 4.5.2 Sender和Receiver 399 4.5.3 DataXceiverServer 403 4.5.4 DataXceiver 406 4.5.5 读数据 408 4.5.6 写数据(done) 423 4.5.7 数据块替换、数据块拷贝和读数据块校验 437 4.5.8 短路读操作 437 4.6 数据块扫描器 437 4.6.1 DataBlockScanner实现 438 4.6.2 BlockPoolSliceScanner实现 439 4.7 DirectoryScanner 442 4.8 DataNode类的实现 443 4.8.1 DataNode的启动 444 4.8.2 DataNode的关闭 446 第5章 HDFS客户端 447 5.1 DFSClient实现 447 5.1.1 构造方法 448 5.1.2 关闭方法 449 5.1.3 文件系统管理与配置方法 450 5.1.4 HDFS文件与操作方法 451 5.1.5 HDFS文件读写方法 452 5.2 文件读操作与输入流 452 5.2.1 打开文件 452 5.2.2 读操作――DFSInputStream实现 461 5.3 文件短路读操作 481 5.3.1 短路读共享内存 482 5.3.2 DataTransferProtocol 484 5.3.3 DFSClient短路读操作流程 488 5.3.4 Datanode短路读操作流程 509 5.4 文件写操作与输出流 512 5.4.1 创建文件 512 5.4.2 写操作――DFSOutputStream实现 516 5.4.3 追加写操作 543 5.4.4 租约相关 546 5.4.5 关闭输出流 548 5.5 HDFS常用工具 549 5.5.1 FsShell实现 550 5.5.2 DFSAdmin实现 552
文件下载
立即下载
资源详情
[{"title":"( 1 个子文件 157.14MB ) hdfs源码.zip","children":[{"title":"hdfs源码.pdf <span style='color:#111;'> 168.08MB </span>","children":null,"spread":false}],"spread":true}]
评论信息
其他资源
Python+OpenCV实现行人检测(含配置说明)
基于opencv的blob分析代码
The Elements of Statistical Learning-Data Mining, Inference, and Prediction
c++面向对象程序设计语言重点难点复习题及答案-整理
zabbix-agent2-5.0.7-1.el7.x86_64.rpm
遗传算法解决非线性规划问题的Matlab程序
E4A打开esp8266LED灯源码
专业的用Excel做的Project甘特图Gantt+Chart+in+Excel
RS编码MATLAB实现完整版
Java web简单员工信息管理系统
hadoop2.7.3 在windows下需要的hadoop.dll winutils.exe等文件
pdflm16.dll文件——完美应对PowerDesigner证书过期
编译原理赋值语句的翻译程序
HET-ISMS-QP-02 信息安全适用性申明.pdf
51单片机学习资料(个人整理).zip
高瓴资本的最新持股曝光! 看看有没有你买_20210220_164740.txt
Windows 2000安装录像.mp4
ISO_16739-2013_DiskFiles
山东大学考研计算机2015回忆版.pdf
eclipse编写坦克游戏
C#左侧导航菜单
运用定时器函数制作计时器
完整ajaxfileupload.js
免责申明
【只为小站】的资源来自网友分享,仅供学习研究,请务必在下载后24小时内给予删除,不得用于其他任何用途,否则后果自负。基于互联网的特殊性,【只为小站】 无法对用户传输的作品、信息、内容的权属或合法性、合规性、真实性、科学性、完整权、有效性等进行实质审查;无论 【只为小站】 经营者是否已进行审查,用户均应自行承担因其传输的作品、信息、内容而可能或已经产生的侵权或权属纠纷等法律责任。
本站所有资源不代表本站的观点或立场,基于网友分享,根据中国法律《信息网络传播权保护条例》第二十二条之规定,若资源存在侵权或相关问题请联系本站客服人员,zhiweidada#qq.com,请把#换成@,本站将给予最大的支持与配合,做到及时反馈和处理。关于更多版权及免责申明参见 版权及免责申明
个人信息
点我去登录
购买积分
下载历史
恢复订单
相关资源标签
热门下载
多智能体的编队控制程序的补充(之前上传少了一个文件)
空间谱估计理论与算法------程序.rar
中国地面气象站观测数据2000-2021
VideoDownloadHelper去除120分钟时间限制-高级版.zip
vivado 破解 lisence(有效期到2037年) 下载
东南大学英语技术写作慕课所有答案
基于LSTM模型的股票预测模型_python
DBSCAN算法Matlab实现
2019综合测评仿真.zip
上帝之眼和拾荒者.rar
刚萨雷斯《数字图像处理》第四版答案.pdf
OLED显示温度和时间-STM32F103C8T6(完整程序工程+原理图+相关资料).zip
Monet智能交通场景应用
画程(版本6.0.0.127)setup个人版
Autojs 例子 源码 1600多个教程源码
最新下载
华为无线控制器AC6605-V200R010C00SPC700固件
MDFort:使用OpenMP和OpenACC在Fortran中进行分子动力学模拟
彩信模拟器 可用来模拟发送彩信
caffeCN bounding-box regression详细解释 pdf
system.new.dat.br相互转换system.new.dat工具
帮她嫁入豪门微信小游戏源码 Cocos Creator版本:v2.4.2.rar
2.45 GHz 0.18 μm CMOS高线性功率放大器设计
海康SCEServer抓屏服务器,版本V1.2.50安装在计算机端,通过海康的解码器,或者拼接处理器,实现PC信号解码上墙,可以实现电脑屏幕上墙
胡清华邻域粗糙集代码
Dokan安装包x86