什么是成本管理 大数据成本管理架构 快手存储管理策略(现状及问题、成本分析、成本控制) 快手存储管理实施方法 专项数据治理 自驱式数据管理 全周期成本管理 全范围成本管理
The Google File System中文版,google分布式文件系统中文翻译
2021-06-01 16:44:28 758KB GFS 中文译本 大数据存储
1
大数据存储系统的几个关键技术.pdf
2021-05-07 21:00:52 7.33MB 存储
1
流数据模型 系统,示例 抽样 过滤 数目统计 矩估计 窗口内计数 衰减窗口
2021-05-07 13:05:59 619KB 大数据处理 数据流挖掘
平安城市视频大数据存储平台解决方案
大数据时代存储解决方案
2021-04-07 10:15:50 10.87MB 大数据 存储 解决方案 云计算
1
针对Hadoop 分布式文件系统(Hadoop distributed file system,HDFS)进行小文件存储时NameNode 内存占用率高的问题,通过分析HDFS 基础架构,提出了基于元数据存储集群的SQL-DFS 文件系统. 通过在NameNode 中加入小文件处理模块实现了小文件元数据由NameNode 内存到元数据存储集群的迁移,借助关系数据库集群实现了小文件元数据的快速读写,并对小文件读取过程进行优化,减少了文件客户端对NameNode 的请求次数;通过将部分DataNode 文件块的校验工作交由元数据存储集群完成,进一步降低了NameNode 节点的负载压力. 最终通过搭建HDFS 和SQL-DFS 实验平台,对HDFS 和SQL-DFS 2 种架构进行了小文件读写的对比测试,实验结果表明:SQLDFS在文件平均耗时(file average cost,FAC)和内存占用率方面均明显优于原HDFS 架构,具有更好的小文件存储能力,可用于海量小文件的存储.
2021-03-16 12:12:34 1.46MB hadoop hdfs 大数据存储 海量小文件处理
1
大数据存储面对的9个问题和解决技术.zip 容量问题 延迟问题 安全问题 并发访问问题 成本问题 数据的积累问题 灵活性问题 应用感知 小用户的需求问题
2021-01-28 04:20:44 4KB 大数据
大数据技术原理与应用:概念、存储、处理、分析与应用 完整高清PDF
1
大数据存储技术和标准化
2019-12-21 21:12:36 210KB 大数据 存储
1