搭建基于Spark技术的网络大数据分析平台,对信令进行分析和处理,提升了分析效率。通过现网实际数据验证,该平台具有高效和可扩展性强的特点,未来可适用范围较广。
2022-11-06 15:35:16
467KB
1
Apache Spark 是专为大规模数据处理而设计的快速通用的计算引擎。Spark是UC Berkeley AMP lab (加州大学伯克利分校的AMP实验室)所开源的类Hadoop MapReduce的通用并行框架，Spark，拥有Hadoop MapReduce所具有的优点；但不同于MapReduce的是——Job中间输出结果可以保存在内存中，从而不再需要读写HDFS，因此Spark能更好地适用于数据挖掘与机器学习等需要迭代的MapReduce的算法。
2022-07-08 14:09:14
23.88MB
1
大数据技术分享 Spark技术化研究介绍与应用案例分析 实践案例分享 共42页.pptx
2022-04-16 14:06:12
1.23MB
本教程基于Spark技术高仿驴妈妈旅游网实现的电商行为分析（视频+讲义+代码），涉及核心技术包括但不限于：基于CDH 5.x版本HADOOP生态组件，8台机器，Spark ,HBASE,HIVE,Spark,SparkSQL等
2021-09-15 09:52:56
60.65MB
1