大数据是收集、整理、处理大容量数据集,并从中获得见解所需的非传统战略和技术的总称。虽然处理数据所需的计算能力或存储容量早已超过一台计算机的上限,但这种计算类型的普遍性、规模,以及价值在最近几年才经历了大规模扩展。在之前的文章中,我们曾经介绍过有关大数据系统的常规概念、处理过程,以及各种专门术语,本文将介绍大数据系统一个最基本的组件:处理框架。处理框架负责对系统中的数据进行计算,例如处理从非易失存储中读取的数据,或处理刚刚摄入到系统中的数据。数据的计算则是指从大量单一数据点中提取信息和见解的过程。下文将介绍这些框架:仅批处理框架:
1
只兼容mysql
2022-09-01 14:06:15 33.95MB flink cdc mysql
1
封装 ClickHouse 工具类和方法 相关依赖 ru.yandex.clickhouse clickhouse-jdbc 0.3.0 com.fasterxml.jackson.core jackson-databind com.fasterxml.jackson.core jackson-core
2022-08-31 09:06:27 2KB flink
1
阿里分享的Flink + Iceberg + 对象存储,构建数据湖方案
2022-08-26 14:05:56 1.59MB 大数据 阿里巴巴 flink
1
图文并茂+源码方式剖析Flink框信核心执行流程,包括图结构、调度执行、核心抽象、数据流转、窗口模型等
2022-08-25 19:05:40 6.86MB Flink
1
test
2022-08-22 14:05:16 26.09MB flink
1
flink入门人员,学生,学习总结参考文档。
2022-08-16 18:06:05 614KB 实时大数据 flink 计算框架
1
flink入门人员,学生,学习总结参考文档。
2022-08-16 18:06:03 585KB 大数据 flink 计算框架
1
flink学习demo代码库
2022-08-12 15:28:05 25.11MB java 大数据 flink
1
在csdn上找了几个支持clickhouse的jar包都不能用,有的甚至jar包里都没有添加clickhouse,一气之下自己编译了一个,亲测可用,记得也要导入 clickhouse jdbc依赖
2022-08-10 14:05:33 244KB flink flinksql clickhouse flink连接clickhous
1