手把手视频详细讲解项目开发全过程,需要的小伙伴自行百度网盘下载,链接见附件,永久有效。
课程简介
从零开始讲解大数据业务及数据采集和迁移需求,以案例驱动的方式讲解基于Flume构建高容错高可靠的分布式数据采集平台。
课程亮点
1,知识体系完备,从小白到大神各阶段读者均能学有所获。
2,生动形象,化繁为简,讲解通俗易懂。
3,结合工作实践及分析应用,培养解决实际问题的能力。
4,每一块知识点, 都有配套案例, 学习不再迷茫。
适用人群
1、对大数据感兴趣的在校生及应届毕业生。
2、对目前职业有进一步提升要求,希望从事大数据行业高薪工作的在职人员。
3、对大数据行业感兴趣的相关人员。
课程内容
第一章:企业级需求
1.大数据迁移及采集问题概述
2.分布式解决方案Flume
3.Flume运行原理及架构详解
第二章:Flume一站式快速部署方案
1.Flume企业级版本选型
2.Flume部署环境选型
3.Flume快速部署方案
第三章:Flume企业级全场景业务案例
1.单日志动态监控采集方案
2.分时日志实时监控采集
3.多数据源动态采集方案
4.内存式高性能缓存方案
5.实时采集存储HDFS
6.多目标存储架构
7.Flume多层采集架构
第四章:一招解决Flume数据容错
1.Flume高级组件:SinkProcess
2.Flume故障转移
3.Flume负载均衡
第五章:半小时搞定Flume最难组件
1.拦截器功能及应用场景
2.Timestamp Interceptor
3.Host Interceptor
4.Static Interceptor
5.RegexFilter Interceptor
6.拦截器开发实战
第六章:Flume面试核心要点全讲解
1.Source功能及原理
2.Channel功能及原理
3.Sink功能及原理
4.Source开发实战
5.Sink开发实战