分布式数据库课程报告分布式网络爬虫设计与实现姓名学号主要工作涂浩新31717019代码实现，报告撰写赵松辉21717055代码实现，报告撰写2017年12月目

分布式存储HDFSppt

具有非齐次马尔可夫切换拓扑的分布式事件触发H∞滤波

数据仓库Hive伪分布式部署与应用

分布式模糊测试 这个项目是一个快速而又非常肮脏的尝试（在几个晚上完成），将我无法控制的许多机器的计算能力与强大的工具“ afl”结合在一起。 它由提供项目以进行模糊测试的服务器和运行在下载1个或多个项目（取决于CPU内核数量），下载队列并开始进行模糊测试的计算机上的客户端上运行。 新生成的测试用例被上载到队列以与其他客户端同步，并且崩溃和挂起（在重复数据删除之后）也被上载，因此可以对其进行手动分析。 客户还将定期检查项目是否被修改。 检测到更新后，它将升级并重新启动项目。 客户端本身尚未（尚未）自我更新。 服务器能够毫无问题地支持数十个客户端，但是如果队列很大，同步算法将成为瓶颈。 （当前）不缓存队列和其他文件夹的哈希值的计算。 警告：仅与（半）受信任的客户端一起使用，并且永远不要连接到不受信任的服务器。 客户端将从服务器下载并运行任意可执行代码，而没有任何事情可以阻止客户端向实际利用

Hadoop V3.3.3 分布式部署步骤，DFSIO和Tersort基准测试

试题内容及要求： 学校委托你建设新的职业指导数据统计分析系统，以便及时让学生了解当前就业趋势。经过一番调研，你发现各招聘网站的职位信息多样，即使同一个网站的职位信息往往也具有多变的数据结构。这种情况下，建立传统的关系数据库进行数据存储和分析统计颇为不便。于是你决定选择MongoDB搭建数据非关系型数据库，这样通过爬虫采集的招聘职位信息可以直接存储而不需要受限于表结构。 为了完成此项目，请完成以下任务：任务一：该系统拟选择MongoDB作为分析数据库，并采用分布式集群的架构以获得更好的数据安全、高可用性以及性能保障。下图为MongoDB分布式集群部署规划图，请根据该图搭建一个MongoDB分布式集群： 任务二：为了验证数据分布情况及进行统计分析程序开发，请创建一个MongoDB测试数据库，数据库名为你的姓名拼音首字母_学号，并请自行选择片键创建一个分片集合xx(你的姓名拼音首字母)，需满足数据均匀分布的要求。测试数据已经写入了附件的load_jobs.js脚本，请补完该脚本并将测试数据加载到jobs集合。请查看集合数据熟悉数据文档结构，并查看数据的分布状况。

Mercurial6.2.2.zip

jdk-8u321-linux-aarch64.tar.gz

1、下载镜像 docker pull selenium/hub docker pull selenium/node-firefox docker pull selenium/node-chrome 注意：selenium/node-firefox和selenium/node-chrome都是无界面的。 要想能看到实时运行界面，需要使用以下两个镜像之一。 docker pull selenium/standalone-chrome-debug docker pull selenium/standalone-firefox-debug 2、启动Hub节点的Docker docker