SSM:大数据智能存储管理,全面的热冷数据优化解决方案

上传者: 42122306 | 上传时间: 2023-04-07 13:15:08 | 文件大小: 4.82MB | 文件类型: ZIP
HDFS智能存储管理 HDFS-SSM是整个的主要部分。 在大数据领域,近年来,由于各种工作负载和苛刻的性能要求,HDFS存储面临越来越大的压力。 可以使用最新的存储设备(Optane内存,Optane SSD,NVMe SSD等)来提高存储性能。 同时,HDFS提供了各种不错的方法,例如HDFS高速缓存,异构存储管理(HSM)和擦除编码(EC),但是对于用户来说,如何充分利用这些高性能存储设备和HDFS存储选件是一个巨大的挑战。动态环境。 为了克服挑战,我们在Apache Hadoop中引入了全面的端到端解决方案,也称为智能存储管理(SSM)。 收集HDFS操作数据和系统状态信息,并基于收集的指标,SSM可以自动对这些方法进行复杂的使用,以优化HDFS的存储效率。 高水平目标 1. HDFS-HSM和HDFS-Cache的增强 根据数据温度自动智能地调整存储策略和选项。 已发布。

文件下载

评论信息

免责申明

【只为小站】的资源来自网友分享,仅供学习研究,请务必在下载后24小时内给予删除,不得用于其他任何用途,否则后果自负。基于互联网的特殊性,【只为小站】 无法对用户传输的作品、信息、内容的权属或合法性、合规性、真实性、科学性、完整权、有效性等进行实质审查;无论 【只为小站】 经营者是否已进行审查,用户均应自行承担因其传输的作品、信息、内容而可能或已经产生的侵权或权属纠纷等法律责任。
本站所有资源不代表本站的观点或立场,基于网友分享,根据中国法律《信息网络传播权保护条例》第二十二条之规定,若资源存在侵权或相关问题请联系本站客服人员,zhiweidada#qq.com,请把#换成@,本站将给予最大的支持与配合,做到及时反馈和处理。关于更多版权及免责申明参见 版权及免责申明