保險項目

該項目涉及數(shù)十個Shell腳本、若干業(yè)務(wù)數(shù)據(jù)表格和數(shù)十張保險大數(shù)據(jù)表格，以及幾十個保險業(yè)務(wù)統(tǒng)計指標(biāo)。

基于數(shù)倉建模理論，該項目執(zhí)行完整的數(shù)倉搭建過程，包括數(shù)據(jù)調(diào)研、明確數(shù)據(jù)域、構(gòu)建業(yè)務(wù)總線矩陣、設(shè)計維度模型、明確統(tǒng)計指標(biāo)、設(shè)計匯總模型以及分層構(gòu)建數(shù)倉。

數(shù)倉分層合理化，降低了數(shù)據(jù)之間的耦合度，提高了數(shù)據(jù)分析效率，同時也降低了數(shù)據(jù)計算成本。

該項目采用實戰(zhàn)式數(shù)據(jù)模擬策略，模擬生成全面的原始數(shù)據(jù)，并進(jìn)行了真實數(shù)據(jù)采集工作。

采用了流行數(shù)據(jù)采集框架DataX采集業(yè)務(wù)數(shù)據(jù)，并提供詳細(xì)的配置文件和腳本解讀，以幫助掌握更多的腳本編寫技巧。

該項目使用Maxwell監(jiān)控業(yè)務(wù)數(shù)據(jù)變動情況，實現(xiàn)了更實時、更準(zhǔn)確的數(shù)據(jù)采集，靈活使用Maxwell框架，全面掌握使用技巧。