本套教程由尚矽谷大數據研究院與騰訊雲官方聯合推出，依託國內電商巨頭的真實業務場景，基於各大網際網路企業對於騰訊雲EMR架構體系的需求，將整個電商的實時數據倉庫體系搭建在騰訊雲架構上。
教程全方面完成了整個實時數據倉庫架構的海量數據採集、存儲、計算以及可視化展示，整個業務流程全部搭建在騰訊雲伺服器上，並全部採用騰訊雲EMR的服務組件，將各騰訊雲EMR服務組件進行充分聯動。
項目文檔按照出書標準編寫，詳細講解一行一行手敲代碼，內容全面且細緻，教程附贈全套視頻、文檔、代碼、資料。通過本套教程的學習，你可以全方位掌握騰訊雲的大數據服務組件使用和調優！
教程目錄
001.騰訊雲EMR實時數倉教程簡介
002.需求及架構-簡介
003.需求及架構-課程目標
004.需求及架構-數據倉庫概念
005.需求及架構-項目需求
006.需求及架構-技術選型
007.需求及架構-數據流程設計
008.需求及架構-框架的版本選型
009.需求及架構-伺服器選型
010.需求及架構-集群規模及集群規劃
011.需求及架構-電商業務簡介
012.需求及架構-EMR的購買與啟動
013.需求及架構-EMR集群簡單說明
014.需求及架構-使用XShell連接服務
015.需求及架構-修改主機映射&配置無密登錄
016.需求及架構-電商業務數據說明
017.需求及架構-上傳資料包
018.需求及架構-MySQL的安裝與啟動
019.需求及架構-MySQL修改密碼&遠程訪問
020.需求及架構-生成業務數據
021.需求及架構-Kafka安裝
022.需求及架構-Kafka配置環境變量&群起
023.需求及架構-同步策略&開啟MySQL Binlog
024.需求及架構-Flink安裝
025.需求及架構-項目構建
026.需求及架構-FlinkCDC代碼講解&本地測試
027.需求及架構-FlinkCDC代碼遠程測試
028.實時數倉搭建-課程介紹
029.實時數倉搭建-分層框架-ODS&DIM層
030.實時數倉搭建-DWD&DWS&ADS層
031.實時數倉搭建-架構分析
032.實時數倉搭建-準備工作
033.實時數倉搭建-具體工作
034.實時數倉搭建-HBase部署
035.實時數倉搭建-HBase啟動&測試
036.實時數倉搭建-IDEA代碼環境說明
037.實時數倉搭建-Phoenix部署
038.實時數倉搭建-Phoenix啟動
039.實時數倉搭建-Redis部署
040.實時數倉搭建-Redis啟動&測試
041.實時數倉搭建-ClickHouse安裝&啟動&測試
042.實時數倉搭建-課程說明
043.實時數倉搭建-DIM層-思路分析 1
044.實時數倉搭建-DIM層-思路分析 2
045.實時數倉搭建-DIM層-思路分析 3
046.實時數倉搭建-DIM層-思路整理
047.實時數倉搭建-DIM層-消費&過濾&轉換數據
048.實時數倉搭建-DIM層-配置信息表
049.實時數倉搭建-DIM層-讀取配置信息&處理成廣播流
050.實時數倉搭建-DIM層-處理連接流-思路分析
051.實時數倉搭建-DIM層-處理連接流-廣播流-解析數據
052.實時數倉搭建-DIM層-處理連接流-廣播流-校驗並建表
053.實時數倉搭建-DIM層-處理連接流-廣播流-寫入狀態
054.實時數倉搭建-DIM層-處理連接流-主流-讀取狀態&過濾數據
055.實時數倉搭建-DIM層-處理連接流-主流-補充欄位並寫出數據
056.實時數倉搭建-DIM層-將數據寫出到Phoenix-編碼
057.實時數倉搭建-DIM層-將數據寫出到Phoenix-測試
058.實時數倉搭建-DIM層-將數據寫出到Phoenix-打包上傳集群
059.實時數倉搭建-DWD層-用戶域用戶註冊代碼講解
060.實時數倉搭建-DWD層-前置知識-WindowJOIN-說明
061.實時數倉搭建-DWD層-前置知識-IntervalJOIN-說明
062.實時數倉搭建-DWD層-前置知識-IntervalJOIN-編碼
063.實時數倉搭建-DWD層-前置知識-IntervalJOIN-測試
064.實時數倉搭建-DWD層-交易域加購事實表
065.實時數倉搭建-DWD層-工具域領券事實表
066.實時數倉搭建-DWD層-互動域評價事實表
067.實時數倉搭建-DWD層-交易域訂單事實表
068.實時數倉搭建-DWS層-整體介紹
069.實時數倉搭建-DWS層-用戶域用戶註冊基礎代碼
070.實時數倉搭建-DWS層-ClickHouse工具類 1
071.實時數倉搭建-DWS層-ClickHouse工具類 2
072.實時數倉搭建-DWS層-ClickHouse工具類 3
073.實時數倉搭建-DWS層-交易域加購需求基礎代碼
074.實時數倉搭建-DWS層-交易域SKU粒度下單需求前置說明
075.實時數倉搭建-DWS層-交易域-SKU粒度下單需求-需求分析 1
076.實時數倉搭建-DWS層-交易域-SKU粒度下單需求-需求分析 2
077.實時數倉搭建-DWS層-交易域-SKU粒度下單需求-思路整理
078.實時數倉搭建-DWS層-交易域-SKU粒度下單需求-JavaBean封裝
079.實時數倉搭建-DWS層-交易域-SKU粒度下單需求-讀取&轉換&過濾&分組數據
080.實時數倉搭建-DWS層-交易域-SKU粒度下單需求-left join重複數據去重
081.實時數倉搭建-DWS層-交易域-SKU粒度下單需求-分組&開窗&聚合
082.實時數倉搭建-DWS層-交易域-SKU粒度下單需求-中間測試
083.實時數倉搭建-DWS層-交易域-SKU粒度下單需求-關聯維表說明
084.實時數倉搭建-DWS層-交易域-SKU粒度下單需求-JDBCUtil封裝 1
085.實時數倉搭建-DWS層-交易域-SKU粒度下單需求-JDBCUtil封裝 2
086.實時數倉搭建-DWS層-交易域-SKU粒度下單需求-JDBCUtil測試&再封裝
087.實時數倉搭建-DWS層-交易域-SKU粒度下單需求-關聯維表-優化的必要性
088.實時數倉搭建-DWS層-交易域-SKU粒度下單需求-關聯維表-旁路緩存-說明
089.實時數倉搭建-DWS層-交易域-SKU粒度下單需求-關聯維表-旁路緩存-讀寫編碼
090.實時數倉搭建-DWS層-交易域-SKU粒度下單需求-關聯維表-旁路緩存-讀寫測試
091.實時數倉搭建-DWS層-交易域-SKU粒度下單需求-關聯維表-旁路緩存-刪除緩存數據
092.實時數倉搭建-DWS層-交易域-SKU粒度下單需求-關聯維表-旁路緩存-刪除緩存數據 測試
093.實時數倉搭建-DWS層-交易域-SKU粒度下單需求-關聯維表-異步IO-說明
094.實時數倉搭建-DWS層-交易域-SKU粒度下單需求-關聯維表-異步IO-API說明
095.實時數倉搭建-DWS層-交易域-SKU粒度下單需求-關聯維表-異步IO-線程池工具類
096.實時數倉搭建-DWS層-交易域-SKU粒度下單需求-關聯維表-異步IO-異步函數 1
097.實時數倉搭建-DWS層-交易域-SKU粒度下單需求-關聯維表-異步IO-異步函數 2
098.實時數倉搭建-DWS層-交易域-SKU粒度下單需求-關聯維表-異步IO-異步函數 3
099.實時數倉搭建-DWS層-交易域-SKU粒度下單需求-關聯維表-異步IO-異步函數 4
100.實時數倉搭建-DWS層-交易域-SKU粒度下單需求-完整測試
101.實時數倉搭建-DWS層-交易域-SKU粒度下單需求-關聯維表-測試準備工作
102.實時數倉搭建-DWS層-交易域-SKU粒度下單需求-關聯維表-測試完成
103.實時數倉搭建-DWS層-交易域-SKU粒度下單需求-關聯其他維表&寫出數據
104.實時數倉搭建-可視化展示-課程介紹
105.實時數倉搭建-可視化展示-任務介紹
106.實時數倉搭建-可視化展示-Sugar基本介紹
107.實時數倉搭建-可視化展示-Web項目基本說明
108.實時數倉搭建-可視化展示-構建SpringBoot Web模塊
109.實時數倉搭建-可視化展示-初體驗SpringBoot Web模塊
110.實時數倉搭建-可視化展示-再體驗SpringBoot Web模塊
111.實時數倉搭建-可視化展示-GMV需求-Mapper完成
112.實時數倉搭建-可視化展示-GMV需求-Service完成
113.實時數倉搭建-可視化展示-GMV需求-Controllrt完成
114.實時數倉搭建-可視化展示-GMV需求-接口測試完成
115.實時數倉搭建-可視化展示-GMV需求-對接Sugar測試完成。