更新时间:2020-09-11 来源:黑马程序员 浏览量:
课程简介
从零开始讲解大数据调度系统构成,集成大数据计算任务构建大数据工作流,基于Oozie构建实现企业级自动化任务开发
课程亮点
1,知识体系完备,从小白到大神各阶段读者均能学有所获。
2,生动形象,化繁为简,讲解通俗易懂。
3,结合工作实践及分析应用,培养解决实际问题的能力。
4,每一块知识点, 都有配套案例, 学习不再迷茫。
适用人群
1、对大数据感兴趣的在校生及应届毕业生。
2、对目前职业有进一步提升要求,希望从事大数据行业高薪工作的在职人员。
3、对大数据行业感兴趣的相关人员。
课程内容
第一章:工作流任务调度系统
1.大数据调度系统概论
2.企业级工作流
3.工作流依赖调度
4.工作流定时调度
第二章:企业级任务流调度系统Oozie
1.Oozie的应用场景
2.Oozie的功能及模块
3.Oozie的与MR的关系
4.Oozie的工作流实现原理
5.Oozie中的特殊概念Action
6.Hadoop的集成配置
7.Oozie的部署配置
第三章:Oozie调度开发实战
1.Shell脚本工作流调度开发实战
2.Hive Job工作流调度开发实战
3.MapReduce工作流调度开发实战
4.复杂工作流调度实战
5.分支与合并逻辑控制组件
第四章:Oozie定时依赖调度
1.基于时间的任务流调度
2.Coordinator时区配置
3.Coordinator任务实战开发
第五章:Oozie可视化开发
1.集成Hue配置
2.基于Hue构建Oozie工作流开发实战
第六章:Oozie监控任务管理
1.Oozie任务的查看
2.Oozie任务的提交
3.Oozie任务的关闭
猜你喜欢