更新時間:2020年09月11日16時23分 來源:傳智播客 瀏覽次數:
課程簡介
從零開始講解大數據調度系統構成,集成大數據計算任務構建大數據工作流,基于Oozie構建實現企業(yè)級自動化任務開發(fā)
課程亮點
1,知識體系完備,從小白到大神各階段讀者均能學有所獲。
2,生動形象,化繁為簡,講解通俗易懂。
3,結合工作實踐及分析應用,培養(yǎng)解決實際問題的能力。
4,每一塊知識點, 都有配套案例, 學習不再迷茫。
適用人群
1、對大數據感興趣的在校生及應屆畢業(yè)生。
2、對目前職業(yè)有進一步提升要求,希望從事大數據行業(yè)高薪工作的在職人員。
3、對大數據行業(yè)感興趣的相關人員。
課程內容
第一章:工作流任務調度系統
1.大數據調度系統概論
2.企業(yè)級工作流
3.工作流依賴調度
4.工作流定時調度
第二章:企業(yè)級任務流調度系統Oozie
1.Oozie的應用場景
2.Oozie的功能及模塊
3.Oozie的與MR的關系
4.Oozie的工作流實現原理
5.Oozie中的特殊概念Action
6.Hadoop的集成配置
7.Oozie的部署配置
第三章:Oozie調度開發(fā)實戰(zhàn)
1.Shell腳本工作流調度開發(fā)實戰(zhàn)
2.Hive Job工作流調度開發(fā)實戰(zhàn)
3.MapReduce工作流調度開發(fā)實戰(zhàn)
4.復雜工作流調度實戰(zhàn)
5.分支與合并邏輯控制組件
第四章:Oozie定時依賴調度
1.基于時間的任務流調度
2.Coordinator時區(qū)配置
3.Coordinator任務實戰(zhàn)開發(fā)
第五章:Oozie可視化開發(fā)
1.集成Hue配置
2.基于Hue構建Oozie工作流開發(fā)實戰(zhàn)
第六章:Oozie監(jiān)控任務管理
1.Oozie任務的查看
2.Oozie任務的提交
3.Oozie任務的關閉
猜你喜歡