更新時間:2020-09-11 來源:黑馬程序員 瀏覽量:
課程簡介
從零開始講解大數(shù)據(jù)調(diào)度系統(tǒng)構(gòu)成,集成大數(shù)據(jù)計(jì)算任務(wù)構(gòu)建大數(shù)據(jù)工作流,基于Oozie構(gòu)建實(shí)現(xiàn)企業(yè)級自動化任務(wù)開發(fā)
課程亮點(diǎn)
1,知識體系完備,從小白到大神各階段讀者均能學(xué)有所獲。
2,生動形象,化繁為簡,講解通俗易懂。
3,結(jié)合工作實(shí)踐及分析應(yīng)用,培養(yǎng)解決實(shí)際問題的能力。
4,每一塊知識點(diǎn), 都有配套案例, 學(xué)習(xí)不再迷茫。
適用人群
1、對大數(shù)據(jù)感興趣的在校生及應(yīng)屆畢業(yè)生。
2、對目前職業(yè)有進(jìn)一步提升要求,希望從事大數(shù)據(jù)行業(yè)高薪工作的在職人員。
3、對大數(shù)據(jù)行業(yè)感興趣的相關(guān)人員。
課程內(nèi)容
第一章:工作流任務(wù)調(diào)度系統(tǒng)
1.大數(shù)據(jù)調(diào)度系統(tǒng)概論
2.企業(yè)級工作流
3.工作流依賴調(diào)度
4.工作流定時調(diào)度
第二章:企業(yè)級任務(wù)流調(diào)度系統(tǒng)Oozie
1.Oozie的應(yīng)用場景
2.Oozie的功能及模塊
3.Oozie的與MR的關(guān)系
4.Oozie的工作流實(shí)現(xiàn)原理
5.Oozie中的特殊概念A(yù)ction
6.Hadoop的集成配置
7.Oozie的部署配置
第三章:Oozie調(diào)度開發(fā)實(shí)戰(zhàn)
1.Shell腳本工作流調(diào)度開發(fā)實(shí)戰(zhàn)
2.Hive Job工作流調(diào)度開發(fā)實(shí)戰(zhàn)
3.MapReduce工作流調(diào)度開發(fā)實(shí)戰(zhàn)
4.復(fù)雜工作流調(diào)度實(shí)戰(zhàn)
5.分支與合并邏輯控制組件
第四章:Oozie定時依賴調(diào)度
1.基于時間的任務(wù)流調(diào)度
2.Coordinator時區(qū)配置
3.Coordinator任務(wù)實(shí)戰(zhàn)開發(fā)
第五章:Oozie可視化開發(fā)
1.集成Hue配置
2.基于Hue構(gòu)建Oozie工作流開發(fā)實(shí)戰(zhàn)
第六章:Oozie監(jiān)控任務(wù)管理
1.Oozie任務(wù)的查看
2.Oozie任務(wù)的提交
3.Oozie任務(wù)的關(guān)閉
猜你喜歡
大數(shù)據(jù)教程:從零搭建新冠疫情防控指揮作戰(zhàn)平臺
大數(shù)據(jù)平臺數(shù)據(jù)遷移實(shí)戰(zhàn)方案|視頻教程【黑馬程序員】
2020-09-11數(shù)據(jù)湖架構(gòu)開發(fā)視頻教程【黑馬程序員】
2020-09-11大數(shù)據(jù)教程:從零搭建新冠疫情防控指揮作戰(zhàn)平臺
2020-09-11虛擬機(jī)安裝教程:同一臺電腦上構(gòu)建多個Linux虛擬機(jī)環(huán)境
2020-07-17大數(shù)據(jù)在金融行業(yè)的應(yīng)用
2020-07-16大數(shù)據(jù)在醫(yī)療行業(yè)的應(yīng)用
2020-07-16