Linux，eclipse
要求编程实现GetMerger功能，实现从云端（HDFS）中下载一个包含多个文件的路径（文件夹），将所有文件合并后保存到本地（GetMerge）。
2022-06-22 09:08:11
1.1MB
Linux，eclipse
要求改写实验4的GetMerge程序，实现将云端多个文件压缩到单个文件下载到本地。
1）采用Gzip压缩方法，本地文件为Merger.gz；
2）云端文件需要超过2个文件。
2022-06-22 09:08:10
573KB
Linux，eclipse
本实验要求学生通过SequenceFile实现对多个小文件的封装。
要求如下：
1）使用随机数生成以（整数，字符串）为（key，Value）的文本文件，文件的大小内容任意，文件数量不少于100个；
2）使用SequenceFile对以上文件进行封装，生成一个独立文件，压缩格式任意；
3）实现以下的三种方式的查询：
3.1）给出文件名，可以从序列文件整体读取文件并存储到指定的位置；
3.2）给出某个整数的key，可以读取所有该key的数据，并给出所在文件的名称（可以输出到控制台）；
3.3）给出文件名和整数的key，可以读取该文件中的对应key的数据（可以输出到控制台）。
2022-06-22 09:08:10
1.39MB
Linux，eclipse
本实验要求通过MapReduce程序实现数据统计，具体要求如下：
假设有一份简单的“个人通讯记录”的数据集，格式如下：
被叫号码,通话时间(秒)
13900000001,20
13900000008,126
……
1）编写一个MapReduce程序，统计拨打同一被叫号码的总时长。
2）找出平均通话时间最长的被叫号码。
2022-06-22 09:08:09
572KB
大数据与云计算技术分享 云计算数据中心网络技术全面剖析 共107页.pdf
2022-06-20 18:07:44
3.74MB
阿里云开放数据处理服务(Open Data Processing Service，简称ODPS) 是构建在飞
天系统上的大规模分布式数据处理服务。
ODPS以REST API的形式，支持用户提交 类SQL的查询语言，对海量数据进行处理。 在API之上，还提供SDK开发包和命令行工 具，Aliyun.com上还有一个Web演示界面。
2022-06-09 09:09:11
930KB