Flink實(shí)時(shí)數(shù)倉5.0

課程介紹

在當(dāng)今電商行業(yè)競爭激烈的環(huán)境下，數(shù)據(jù)實(shí)時(shí)處理與分析成為企業(yè)取得成功的關(guān)鍵因素之一。實(shí)時(shí)處理領(lǐng)域，F(xiàn)link被普遍認(rèn)為是下一代大數(shù)據(jù)流計(jì)算引擎，本項(xiàng)目基于Flink實(shí)現(xiàn)電商實(shí)時(shí)數(shù)倉，利用Flink強(qiáng)大的功能，實(shí)時(shí)采集、處理和存儲電商業(yè)務(wù)中的海量數(shù)據(jù)，并為企業(yè)提供了全面、深入的數(shù)據(jù)分析能力。

教程通過思路分析、畫圖演示、代碼開發(fā)等多維方式，對數(shù)倉的構(gòu)架過程及整體實(shí)現(xiàn)進(jìn)行了詳細(xì)的講解。相較于實(shí)時(shí)數(shù)倉項(xiàng)目4.0，升級了項(xiàng)目架構(gòu)設(shè)計(jì)和各個(gè)軟件的版本，并采用GitFlow任務(wù)流的形式對整體項(xiàng)目進(jìn)行版本控制，使用StreamPark對項(xiàng)目進(jìn)行部署和監(jiān)控。

項(xiàng)目采用的軟件及版本：Flink 1.17.1、Hadoop 3.3.4、Flume 1.10.1、Zookeeper 3.7.1、Kafka 3.6.1、Maxwell 1.29.2、Redis 6.0.8、HBase 2.4.11、Doris 2.1.0、StreamPark 2.1.4、FlinkCDC 2.4.2、MySQL 8.0.31等。