电商用户行为分析大数据平台
项目介绍
1.基于Spark开发的平台
2.需要有spark基础
3.有很多高级知识和设计模式
4.电商用户行为分析大数据平台(项目名称)
5.访问行为,购物行为,广告点击行为,对这些行为进行分析,使用大数据技术来帮助公司提升业绩。
6.主要的功能模块有用户session分析,页面单跳转化率统计,热门商品离线统计,广告流量实时统计等4个业务模块。
7.所使用的知识点是spark core,spark SQL,spark streaming等三个技术框架。
8.主要是数据倾斜,线上故障,性能调优,troubleshooting等经验。
9.使用模拟数据,希望达到的效果。
10.需求分析,方案设计,数据设计,编码实现,测试以及性能调优等环节。
模块简介
1、用户访问session分析:该模块主要是对用户访问session进行统计分析,包括session的聚合指标计算
1