Spark大数据商业实战三部曲：内核解密|商业案例 1.22G

Real Time Recommendations using Spark Streaming

在整个毕业论文设计的过程中我学到了做任何事情所要有的态度和心态， 首先我明白了做学问要一丝不苟， 对于出现的任何问题和偏差都不要轻视， 要通过正确的途径去解决， 在做事情的过程中要有耐心和毅力， 不要一遇到困难就打退堂鼓， 只要坚持下去就可以找到思路去解决问题的。 在工作中要学会与人合作的态度， 认真听取别人的意见，这样做起事情来就可以事倍功半。

详细的介绍了当前机器学习流行的库——scikit-learn,对于从事机器学习的小伙伴很有用，包含分类、回归、聚类等流行的方法的实现。

基于Spark1.6，使用Spark SQL框架和sqlite数据库，把唐诗三百首，宋诗三百首和元明清诗精选导入数据库，可以按来源，体裁及作者，方便地查出诗句或试题中包含某个关键字的作品，还可以在选中作品后，进行五绝，七绝和五律，七律的自动集句的尝试。

Spring-Boot-Neo4j-Movies Spring-Boot集成Neo4j结合Spark的朴素贝叶斯分类器实现基于电影知识图谱的智能问答系统 博客地址： 项目博客地址： 升级Spark依赖，由原来的2.3升级到2.4，GitHub官方提醒> = 1.0.0，<= 2.3.2之间的版本容易受到攻击 spark2.4 == >scala2.11 and scala2.12 <!-- https://mvnrepository.com/artifact/org.apache.spark/spark-core --> org.apache.spark spark-core_2.12 2.4.0 <

Spark技术内幕深入解析Spark内核架构设计与实现原理.pdf

saprk2.2.0 连接 mongo相关jar包，有三个jar：mongo-java-driver、mongo-spark-connector_2.11-2.2.0、scala-library-2.11.8

mongodb spark连接器，适用版本spark2.1.X ,Scala2.11.X, java 6 or later,mongodb 2.6 or later，请根据上面的版本选择，不然会报各种错误

项目一Spark离线处理 本项目来源于企业级电商网站的大数据统计分析平台，该平台以?Spark 框架为核心，对电商网站的日志进行离线和实时分析。? 该大数据分析平台对电商网站的各种用户行为（访问行为、购物行为、广告点击行为等）进行分析，根据平台统计出来的数据，辅助公司中的?PM（产品经理）、数据分析师以及管理人员分析现有产品的情况，并根据用户行为分析结果持续改进产品的设计，以及调整公司的战略和业务。最终达到用大数据技术来帮助提升公司的业绩、营业额以及市场占有率的目标。?本项目使用了?Spark 技术生态栈中最常用的三个技术框架，Spark Core、Spark SQL 和?Spark Streaming，进行离线计算和实时计算业务模块的开发。实现了包括用户访问?session 分析、页面单跳转化率统计、热门商品离线统计、广告流量实时统计?4 个业务模块。通过合理的将实际业务模块进行技术整合与改造，该项目几乎完全涵盖了?Spark Core、Spark SQL 和?Spark Streaming 这三个技术框架中大部分的功能点、知识点，学员对于?Spark 技术框架的理解将会在本项目中得