BAT等各大互联网巨头企业关于Flink实际应用及优化案例

HBase作为Google发表BigTable论文的开源实现版本，是一种分布式列式存储的数据库，构建在HDFS之上的NoSQL数据库，非常适合大规模实时查询，因此HBase在实时计算领域使用非常广泛。可以实时写HBase，也可以利用buckload一把把离线Job生成HFileLoad到HBase表中。而当下FlinkSQL的火热程度不用多说，FlinkSQL也为HBase提供了connector，因此HBase与FlinkSQL的结合非常有必要实践实践。当然，本文假设用户有一定的HBase知识基础，不会详细去介绍HBase的架构和原理，本文着重介绍HBase和Flink在实际场景中的结合使用

Flink 2019峰会 阿里大牛的技术， 在线教程有github:**，第6个文档 简明扼要的讲解Flink的SQL api及 源码分析和运行原理。值得收藏

flinkSQL clickhouse连接器

flink1.12.1 sql演示 个人练习flink的演示。 代码里自带数据生成，附带合适的数据演示。 pom.xml包含了flink绝大部分的依赖，maven下载会比较久。 目前项目内容包含了 环境 Windows 10 ltsc 的Mysql8.0.23 Idea社区版2020.3 海地SQL 环境建设教程： ://www.cnblogs.com/abramgyb/p/14587901.html 流集 使用streamset api编写flink程序 FlinkSQL flink sql api编程程序，实现ETL功能，包含读写Mysql，kafka 源Mysql MysqlCDC 下沉Mysql 使用说明 克隆仓库：git clone 使用idea打开项目 maven下载相关依赖 依赖下载完成后运行demo测试

编译好了，安全可用

MicroBatch和MiniBatch都是微批处理，只是微批的触发机制略有不同。原理同样是缓存一定的数据后再触发处理，以减少对State的访问，从而提升吞吐并减少数据的输出量。MiniBatch主要依靠在每个Task上注册的Timer线程来触发微批，需要消耗一定的线程调度性能。MicroBatch是MiniBatch的升级版，主要基于事件消息来触发微批，事件消息会按您指定的时间间隔在源头插入。MicroBatch在元素序列化效率、反压表现、吞吐和延迟性能上都要优于MiniBatch。微批处理通过增加延迟换取高吞吐，如果您有超低延迟的要求，不建议开启微批处理。通常对于聚合的场景，微批处理可以显

Flink_SQL开发指南中文版

kaggle Home_credit 信贷风控 train训练字段的Flink sql 预处理

FlinkSQL在音乐的产品化实践-TSY，云计算大佬的干货分享。 Flink SQL 是 Flink 实时计算为简化计算模型，降低用户使用实时计算门槛而设计的一套符合标准 SQL 语义的开发语言。