spark图计算 ConnectedComponent 连通图 '好友关系',顶点数据可以为字符串，封装的方法内部自动处理为long类型，代码有具体示例数据，并且能学习到并行化，持久化，广播等知识点，附有详细注释。计算结果为每个连接图的顶点数据,Tuple2的第二个元素标识为哪个连通图，同一连通图的各个 第一个元素 间为 '好友关系'
2021-06-28 12:05:52
6KB
1
windows版本 scala-2.12.14.zip & Linux版本 scala-2.12.11.tgz 压缩包.rar
2021-06-27 13:07:40
39.99MB
1
spark-3.1.2.tgz版本 & spark-3.1.2-bin-hadoop2.7.tgz版本
2021-06-27 13:07:39
237.64MB
1
本文来自csdn，本文简单介绍了Python+spark的配置运行及实例介绍，希望对您的学习有所启迪。0.1配置可参考：0.2有关spark说明：spark不兼容Python3.6安装注意版本可下载：anaconda4.21.1数据student.txt1.2代码1.3结果展示2.1函数解析2.1.1collect()RDD的特性在进行基本RDD“转换”运算时不会立即执行，结果不会显示在显示屏中，collect（）是一个“动作”运算，会立刻执行，显示结果。2.1
2021-06-25 19:51:57
58KB
1