Spark 项目流 org.apache.spark/spark-streaming_2.11/2.1.1/spark-streaming_2.11-2.1.1.jar

使用spark集成flume，由于flume默认只支持pull消息的方式，不过它可以自定义消息拉取方式，现要使用poll方式，可以使用spark-streaming-flume-sink_2.11-2.1.0.jar包下的org.apache.spark.streaming.flume.sink.SparkSink

spark streaming 大型电商 项目实战，包括架构，遇到的问题及解决方案

echo "auth=no" >> /etc/qpid/qpidd.conf systemctl start qpidd qpid-config add queue default —— sbt "run-main com.redhat.summitdemo.scanner.ScannerSimulator" sbt "run-main com.redhat.summitdemo.scanner.ScannerDataProcessor" —— sbt assembly spark-submit --jars target/scala-2.10/spark-streaming-jms-assembly-0.0.1.jar example.py

国际标准的正式文档

活动板 StreamDeck 替代/扩展：D

彩色，超清晰的pdf，这是一本非常好的流式计算的书，对于当今最流行的流式计算相关的技术理论进行了讲解，谷歌大牛的书，是非常受用的，Flink等计算引擎都是基于此理论

pyspark里连接kafka数据源所需的jar文件，放到python所在的site-package下属于pyspark的jars目录下

Calamaio是一个视频流服务器，可以通过Internet连接实时观看视频流，可以流JPEG或MJPEG，它也可以与多路复用卡一起使用，就像某些基于conexant融合878a的卡一样。