基于对flink的学习,和对flink源码的简单梳理,从flink on yarn的角度,介绍flink从启动,到提交yarn任务,以及完成整个过程涉及到的进程交互和内存管理等底层逻辑。该资源一共分为4个部分:1、yarn提交流程,2、组件通信,3、任务调度,4、内存管理 适合人群:具备一定编程基础和大数据基础知识,工作1-3年的大数据研发和运维人员 能学到什么:①flink on yarn模式之下的启动和运行原理,通过简单梳理底层逻辑加深对flink的掌握;②从底层机理的角度剖析flink是如何处理我们的需求的,从而帮助我们更好的解决运维问题。 阅读建议:此资源基于flink的源码追踪并简单分析,学习参考的时候建议下载相应版本的flink源码,并搭建虚拟机安装部署测试flink,在运行过程中结合源码和笔记学习效果更佳。有经验的开发人员可以编译并debug flink的源码,这样可以更加直观深入地研究flink的运行原理。有利于开发应用和解决问题
2022-05-17 19:09:07 4.12MB big data 源码软件 flink
hadoop-env.sh
2022-05-17 19:08:59 4KB hadoop 大数据 big data
1
yeast_data:酵母RNA-seq数据分析
2022-05-17 15:39:16 631KB JupyterNotebook
1
蓝色背景大数据可视化看板通用模板,含html、css及全部素材,各行业通用。
2022-05-17 11:04:01 4.25MB big data 大数据 html5
1
联通政务大数据产品手册.pdf
2022-05-17 10:00:57 5.47MB 政务 big data 文档资料
黄红梅、张良均《python数据分析与应用》第三章实训1代码。
2022-05-17 09:39:37 46KB python Data
1
Redis大数据平台测试方案.pdf
2022-05-17 09:01:31 401KB redis big data 文档资料
信息安全技术网络安全等级保护大数据基本要求.pdf
2022-05-17 09:01:20 59KB web安全 big data 文档资料
杭州中高端人才及杭漂大数据报告.pdf
2022-05-17 09:01:07 6.41MB big data 文档资料 大数据