只为小站
首页
域名查询
文件下载
登录
nc64-1.11.exe
用于sparksteaming的操作,在win10下cmd中运行,然后可以监听端口啥的
2021-05-02 18:00:05
43KB
spark
idea
sparkStreaming
win10
1
大数据爱慕课项目.zip
本项从flume日志采集到Kafka,通过
SparkStreaming
进行实时处理,将清洗后得数据传到HBase进行存储,通过SpringBoot和Echarts进行实时可视展示
2021-03-22 15:04:37
327KB
SparkStreaming
大数据项目
可视化
1
一个手动管理spark streaming集成kafka时的偏移量到zookeeper中的小项目
一个手动管理spark streaming集成kafka时的偏移量到zookeeper中的小项目
2021-02-28 19:07:20
7KB
sparkstreaming
1
spark流数据处理:
SparkStreaming
的使用
SparkStreaming
是Spark核心API的扩展,用于可伸缩、高吞吐量、可容错地处理在线流数据。Spark Streaming可以从很多数据源获取数据,比如:Kafka、Flume、Twitter、ZeroMQ、Kinesis或TCP连接等,并可以用很多高层算子(map/reduce/join/window等)来方便地处理这些数据。最后处理过的数据还可以推送到文件系统、数据库和在线监控页面等。实际上,你也可以在数据流上使用Spark的机器学习和图计算算法。
SparkStreaming
内部工作机制概图如下所示。Spark
2021-01-30 05:07:05
303KB
spark流数据处理:SparkStreaming的使用
1
stom与
sparkStreaming
对比
讲述Storm与
sparkStreaming
分别用法与区别,在操作流程等。
2021-01-28 04:33:27
93KB
学习
1
SparkDemo.rar
本例子包括spark count,sparksql,
sparkstreaming
的样例,本例子包括spark count,sparksql,
sparkstreaming
的样例,
2021-01-28 04:18:09
15KB
sparksql
sparkstreaming
sparkcount
大数据
1
spark-streaming-kafka-0-8_2.11-2.4.0.jar
spark-streaming-kafka-0-8_2.11-2.4.0.jar
2021-01-28 04:16:59
296KB
sparkstreaming
kafka
1
SparkStreaming
流式日志过滤与分析
记得自己要引入环境 (1)利用
SparkStreaming
从文件目录读入日志信息,日志内容包含: ”日志级别、函数名、日志内容“ 三个字段,字段之间以空格拆分。请看数据源的文件。 (2)对读入都日志信息流进行指定筛选出日志级别为error或warn的,并输出到外部MySQL中。 需要用到的函数 (1)输入采用textFileStream()算子 (2)输出采用foreachRDD()算子 (3)将RDD转为DataFrame (4)DataFrame注册为临时表,使用SQL过滤 (5)将过滤后的数据保存到MySQL
2019-12-21 20:45:17
938KB
SparkStreaming
spark
mysql
toDF
1
flume+kafka+
sparkstreaming
通过flume监控文件,让kafka消费flume数据,再将
sparkstreaming
连接kafka作为消费者进行数据处理,文档整理实现
2019-12-21 19:28:50
3.33MB
flume
kafka
sparkstreami
文档整理
1
个人信息
点我去登录
购买积分
下载历史
恢复订单
热门下载
全国道路网SHP数据.zip
OLED显示温度和时间-STM32F103C8T6(完整程序工程+原理图+相关资料).zip
基于OpenCV的车牌号码识别的Python代码(可直接运行)
MAC OS.X.10.8.iso 镜像文件
vivado 破解 lisence(有效期到2037年) 下载
elsevier 爱思唯尔 系列期刊的word模板,template,单栏,双栏
基于MQ2烟雾传感器的STM32F103程序
ChinaMeteorologicalDataHandler.R
基于hadoop商品推荐系统课程设计
RX560 bios合集(请务必注意显存品牌和大小以及是否需要6pin!)含刷新工具.zip
机械臂碰撞检测 八组逆解碰撞检测 机械臂避障路径规划
鲸鱼优化算法 WOA matlab源代码(详细注释)
Android大作业——网上购物APP(一定是你想要的)
上帝之眼和拾荒者.rar
工程伦理_李正风,丛杭青,王前_北京:清华大学出版社 , 2016.08_P329.pdf
最新下载
关于javaweb课程设计之通讯管理系统
javaweb版的个人通信录系统
中文短信数据集-带标签
pycuda-2021.1+cuda102-cp38-cp38-win_amd64.whl
Access开发通用界面百变加强版
Inspect-x64.zip
FreeGame.lua
RouterOS 6.44.2 L5 2G vmxnet3
CISPR 25 2021
Android秒表安卓APP开发源代码
其他资源
informix client sdk.4.10 for windows 64
快速PRI信号分选
大学操作系统作业
微信小程序50个案例
C++俄罗斯方块源码完整功能版
AudioRecordDemo
海思g711a格式音频生成工具
软件测试黑盒测试实验报告
PCL-1.8.0-AllInOne-msvc2013-win64.exe
USB识别 HID识别 MFC代码
论坛系统(ssh框架)
人脸识别数据集-facerecognition
最简洁C语言程序aha-c
电脑中的端口被占用.jpg
repair.docx
SRPC架构介绍 - Sogou基于Workflow的自研RPC框架 - 知.pdf
NetBackup备份Windows群集共享盘.pdf
Jcreator pro 3.5
交通标志识别,
ROOT安装说明书
C#与三菱PLC以太网通信
弱网测试模拟工具
NXP LPC1768 Rtthread/裸机+lwip WEB服务器搭建