云计算环境下网络空间数据分布式存储方法研究.pdf
2021-07-17 09:04:23 1.09MB 云计算 行业数据 数据分析 参考文献
Hadoop3.2.2环境资源包,解压后配置环境变量可直接使用,尝试新版本纠删码存储等功能。
2021-05-13 21:00:39 376.58MB hadoop linux 大数据 分布式集群
1
zookeeper3.5.5资源下载
2021-04-19 19:00:40 11.82MB 大数据 分布式
1
巨杉数据库SequoiaDB v5.0 发布会直播回放
2021-03-24 21:08:59 276.57MB sequoiadb 数据库 大数据 分布式
1
hadoop安装包
2021-02-23 09:00:51 189.2MB 大数据 分布式存储
1
hadoop、分布式环境、完全分布式、大数据、搭建
1
针对空间科学大数据的快速检索需求,提出了分布式区域检索算法。算法主要包括四维空间科学数据的索引方法和分布式四维空间科学数据的索引架构两部分。在KTS存储结构下,通过基于立方体的Block-Grid三维网格剖分方法建立两级空间索引结构,包括分布式节点间的全局索引和分布式节点内的局部索引;在分布式系统架构下,确定了索引在分布式主从节点的分布策略以及数据在分布式环境下的容错机制。基于Hadoop基础架构设计了NSSC-Hadoop系统,通过多组试验数据测试算法效率,并与直接基于Hadoop无索引遍历数据方式相比较,数据检索效率提高了将近50倍,随着数据量的增大,算法优势会更加明显。
1