雲計算平台電信經營分析係統中海量數據處理研究(PDF 69頁)

圖 2-1 雲計算的分類 .. 5
圖2-2 雲計算的體係結構 .... 7
圖2-3 雲計算的四層架構示意圖 .... 8
圖2-4 自動化部署示意圖 ... 10
圖3-1 移動BASS 的兩級架構示意圖 17
圖3-2 移動BASS 的技術架構 18
圖3-3 ETL 處理過程示意圖 .. 19
圖3-4 省級移動BASS 的總體功能結構 .... 20
圖3-5 典型的雲計算平台架構圖 ... 23
圖3-6 GFS 的架構示意圖 .... 24
圖3-7 HDFS 的架構示意圖 ... 25
圖3-8 BigTable 的存儲結構圖 ..... 26
圖3-9 Map/Reduce 的工作模式 ..... 28
圖3-10 CB-BASS 的總體結構示意圖 . 29
圖3-11 CB-BASS 的雲計算平台架構示意圖 . 29
圖3-12 移動BASS 功能部署示意圖 . 31
圖4-1 移動BASS 的源數據分類 .... 34
圖4-2 現有的日清單ETL 彙總處理流程圖 . 36
圖4-3 CB-BASS 中改進的海量數據ETL 處理算法示意圖 .. 37
圖4-4 優化後的日清單ETL 彙總處理流程圖 ..... 38
圖4-5 AGB-ETL 算法的處理流程 .... 41
圖5-1 CB-BASS 測試平台的部署設計 43
圖5-2 CB-BASS 測試平台基礎類的設計 .... 44
圖5-3 場景一的測試結果 ... 50
圖5-4 場景二中相同優先級的示例數據的任務分組執行時間 ... 53
圖5-5 場景二中不同優先級的示例數據的任務分組執行時間 ... 53
圖5-6 場景二中相同優先級的示例數據的調度算法執行時間 ... 54
圖5-7 場景二中不同優先級的示例數據的調度算法執行時間 ... 55
表5-1 場景一中對應3 個目標表的一批測試數據示例 .... 46
表5-2 場景二中任務分組數為3 的一批相同優先級的測試數據示例 ... 48
表5-3 場景二中任務分組數為3 的一批不同優先級的測試數據示例 .... 49
表5-4 場景一中對應3 個目標表的一批測試數據示例的測試結果 ..... 51
表5-5 場景二中相同優先級的示例數據的任務分組結果 . 51
表5-6 場景二中不同優先級的示例數據的任務分組結果 . 52
..............................