IT小白向大數(shù)據(jù)領域邁進
掌握實用技能
增長經(jīng)驗
搭建完善的項目
接觸廣泛技術面
學習前沿技術
突破職業(yè)瓶頸
掌握核心技能
Linux、Hadoop
Java、Hive
Flume、Kafka
等基礎框架
熟練使用Doris
充分掌握Doris概念與構建流程
熟練應用數(shù)倉建模理論
熟練掌握Doris與其他大數(shù)據(jù)框架的集成
采用當前大廠非常流行的Doris框架，實現(xiàn)統(tǒng)一數(shù)倉架構；
多方參考大廠數(shù)倉分層體系，合理數(shù)據(jù)分層，降低數(shù)據(jù)耦合度，提高數(shù)據(jù)分析效率，降低數(shù)據(jù)計算成本。
采用SeaTunnel監(jiān)控業(yè)務數(shù)據(jù)變動情況，做到實時準確的采集變動數(shù)據(jù)。
采用SeaTunnel采集用戶行為日志數(shù)據(jù)，實時同步到Doris；
ODS層、DWD層、DIM層、DWS層和ADS層之間采用Doris+ DolphinScheduler框架10分鐘調度一次處理，真正做到統(tǒng)一數(shù)倉。
采用FineBI對結果數(shù)據(jù)進行多圖表、儀表盤可視化展示；
分析總結項目搭建過程中遇到的問題，增加開發(fā)經(jīng)驗，提升實戰(zhàn)問題解決能力。
