基于阿里云搭建數(shù)據(jù)倉(cāng)庫（離線）

課程介紹

一、項(xiàng)目簡(jiǎn)介
該項(xiàng)目由阿里云大學(xué)和尚硅谷聯(lián)合打造。
本項(xiàng)目教程以國(guó)內(nèi)電商巨頭實(shí)際業(yè)務(wù)應(yīng)用場(chǎng)景為依托，同時(shí)以阿里云ECS服務(wù)器為技術(shù)支持，緊跟大數(shù)據(jù)主流場(chǎng)景，對(duì)接企業(yè)實(shí)際需求，對(duì)電商數(shù)倉(cāng)的常見實(shí)戰(zhàn)指標(biāo)進(jìn)行了詳盡講解，讓你迅速成長(zhǎng)，獲取更前沿的技術(shù)經(jīng)驗(yàn)。

二、項(xiàng)目架構(gòu)
版本框架：Flume、DateHub、DataWorks、MaxCompute、MySql以及QuickBI等；
Flume：大數(shù)據(jù)領(lǐng)域被廣泛運(yùn)用的日志采集框架；
DateHub：類似于傳統(tǒng)大數(shù)據(jù)解決方案中Kafka的角色，提供了一個(gè)數(shù)據(jù)隊(duì)列功能。對(duì)于離線計(jì)算，DataHub除了供了一個(gè)緩沖的隊(duì)列作用。同時(shí)由于DataHub提供了各種與其他阿里云上下游產(chǎn)品的對(duì)接功能，所以DataHub又扮演了一個(gè)數(shù)據(jù)的分發(fā)樞紐工作；
據(jù)上傳和下載通道，提供SQL及MapReduce等多種計(jì)算分析服務(wù)，同時(shí)還提供完善的安全解決方案；
DataWorks：是基于MaxCompute計(jì)算引擎，從工作室、車間到工具集都齊備的一站式大數(shù)據(jù)工廠，它能幫助你快速完成數(shù)據(jù)集成、開發(fā)、治理、服務(wù)、質(zhì)量、安全等全套數(shù)據(jù)研發(fā)工作；
QuickBI & DataV：專為云上用戶量身打造的新一代智能BI服務(wù)平臺(tái)。

三、項(xiàng)目場(chǎng)景
數(shù)倉(cāng)項(xiàng)目廣泛應(yīng)用于大數(shù)據(jù)領(lǐng)域，該項(xiàng)目技術(shù)可以高度適配電商、金融、醫(yī)療、在線教育、傳媒、電信、交通等各領(lǐng)域；

四、項(xiàng)目特色
本課程結(jié)合國(guó)內(nèi)多家企業(yè)實(shí)際項(xiàng)目經(jīng)驗(yàn)。從集群規(guī)模的確定到框架版本選型以及服務(wù)器選型，手把手教你從零開始搭建基于阿里云服務(wù)器的大數(shù)據(jù)集群。采用阿里云ECS服務(wù)器作為數(shù)據(jù)平臺(tái)，搭建高可用的、高可靠的Flume數(shù)據(jù)采集通道，運(yùn)用阿里云DateHub構(gòu)建中間緩沖隊(duì)列并擔(dān)任數(shù)據(jù)分發(fā)樞紐將數(shù)據(jù)推送至阿里自主研發(fā)的DataWorks對(duì)數(shù)據(jù)進(jìn)行分層處理，采用MaxCompute作為處理海量數(shù)據(jù)的方案，將計(jì)算結(jié)果保存至MySQL并結(jié)合阿里的QuickBI工作做最終數(shù)據(jù)展示。