金融審批項目

包含數(shù)十個Shell腳本，涉及若干業(yè)務(wù)數(shù)據(jù)原始表格及幾十張金融審批大數(shù)據(jù)表格和幾十個金融審批統(tǒng)計指標(biāo)。

根據(jù)完整的數(shù)倉建模體系，提出實踐性強的數(shù)倉搭建理論過程，進(jìn)行建模流程分析。

參考多方大廠的數(shù)倉分層體系，合理數(shù)倉分層，降低數(shù)據(jù)的耦合度，提高數(shù)據(jù)分析效率，同時降低數(shù)據(jù)計算成本。

采用實戰(zhàn)式數(shù)據(jù)模擬策略，模擬生成金融審批行業(yè)的原始業(yè)務(wù)員數(shù)據(jù)，針對真實數(shù)據(jù)執(zhí)行數(shù)據(jù)采集工作。

采用流行數(shù)據(jù)采集框架DataX采集業(yè)務(wù)數(shù)據(jù)，提供詳細(xì)配置文件及腳本解讀，掌握更多腳本編寫技巧。

采用Maxwell監(jiān)控業(yè)務(wù)數(shù)據(jù)變動情況，做到更實時更準(zhǔn)確的變動數(shù)據(jù)采集。

進(jìn)行真實數(shù)據(jù)ETL實操，掌握如何對原始數(shù)據(jù)進(jìn)行清洗、脫敏、數(shù)據(jù)分類和整合。