行业分类-物理装置-一种基于点对点分布式文件系统的内容共享方法及系统.zip
2021-08-07 18:05:21
648KB
SDFS
简单的分布式文件系统
操作
sdfs put "localSource" "remoteDestination"
sdfs get "remoteSource" "localDestination"
sdfs rm "remoteFile"
配置复制数量 ip:port 服务器列表
如何编译
$ make compile
如何执行
$ java -jar SDFS/target/SDFS-0.1-jar-with-dependencies.jar
per importare il progetto in eclipse installa il plugin m2e (maven to eclipse) e poi fai file->import maven project ( se non ricordo male )
2021-07-05 09:05:01
11KB
1
熟悉常用的HDFS操作
（1） 理解HDFS在Hadoop体系结构中的角色；
（2） 熟练使用HDFS操作常用的Shell命令；
（3） 熟悉HDFS操作常用的Java API。
2021-06-19 22:57:25
419KB
1
英文原版论文pdf
1. 2003年，Google发布Google File System论文，这是一个可扩展的分布式文件系统，用于大型的、分布式的、对大量数据进行访问的应用。它运行于廉价的普通硬件上，提供容错功能。从根本上说：文件被分割成很多块，使用冗余的方式储存于商用机器集群上。
2. 紧随其后的就是2004年公布的 MapReduce论文，论文描述了大数据的分布式计算方式，主要思想是将任务分解然后在多台处理能力较弱的计算节点中同时处理，然后将结果合并从而完成大数据处理。
3. 最后就是谷歌发布于2006年的Bigtable，其启发了无数的NoSQL数据库，比如：Cassandra、HBase等等。Cassandra架构中有一半是模仿Bigtable，包括了数据模型、SSTables以及提前写日志（另一半是模仿Amazon的Dynamo数据库，使用点对点集群模式）。
2021-05-31 09:39:11
589KB
1