实验五 Spark Streaming编程初级实践
1 实验目的
(1)实现文件流输入
(2)实现RDD队列流输入
(3)实现套接字流输入到mysql
(4)实现kafka和Flume的安装以及将结果写入MySQL
2 实验平台
操作系统:Ubuntu16.04
数据库:MySQL
Spark:2.4.0
Kafka:2.11
Flume:1.7.0
3 实验要求
1.文件流输入
2.RDD队列流输入
3.套接字流输入
4.kafka和Flume将结果写入MySQL
4 实验内容和步骤(操作结果要附图)
一、文件流输入
二、RDD队列流输入
三、套接字流
四、kafka和Flume将结果写入MySQL
5 实验总结
1