移動省級經營分析係統數據質量管理係統業務技術規範(DOC 65頁)
目 錄
1. 範圍 1
2. 引用標準 1
3. 術語和定義 1
4. 符號和縮略語 2
5. 概述 2
6. 總體說明 2
6.1 數據質量管理概述 2
6.2 主要內容 3
6.3 係統建設目標 3
6.4 實施建議 4
7. 數據質量管理需求 4
7.1 數據質量問題 4
7.1.1 信息問題域 5
7.1.2 技術問題域 6
7.1.3 流程問題域 7
7.1.4 管理問題域 8
7.2 係統功能需求 8
7.2.1 元數據管理 9
7.2.2 數據質量監控 9
7.2.3 項目管理支撐 9
8. 係統架構 9
8.1 係統體係 9
8.2 源係統層 10
8.2.1 經營分析係統數據處理流程 10
8.2.2 數據質量監控點 10
8.3 存儲層 11
8.3.1 元數據存儲 11
8.3.1.1 業務元數據 11
8.3.1.1.1 業務術語 11
8.3.1.1.2 業務描述 11
8.3.1.1.3 業務指標 11
8.3.1.1.4 業務規則 12
8.3.1.2 技術元數據 12
8.3.1.2.1 數據源接口 12
8.3.1.2.2 ETL過程 12
8.3.1.2.3 數據倉庫和數據集市存儲 13
8.3.1.2.4 分析應用 13
8.3.1.2.5 運行環境信息 14
8.3.1.2.6 質量管理過程 14
8.3.1.3 管理元數據 15
8.3.2 運行狀態信息存儲 16
8.3.3 質量管理知識存儲 16
8.4 功能層 16
8.4.1 元數據管理 16
8.4.1.1 元數據維護 17
8.4.1.2 元數據導入/導出 17
8.4.1.3 同步檢查 18
8.4.1.4 實體查詢 19
8.4.1.5 過程查詢 19
8.4.1.6 影響分析 19
8.4.1.7 血統分析 20
8.4.1.8 實體關聯度分析 20
8.4.1.9 實體差異分析 20
8.4.1.10 版本管理 20
8.4.1.11 變更通知 21
8.4.2 質量監控支撐功能 21
8.4.3 知識庫管理 21
8.4.3.1.1 知識積累和維護 21
8.4.3.1.2 知識使用 21
8.4.4 係統管理 21
8.5 應用層 21
8.5.1 數據質量監控 21
8.5.2 信息地圖 22
8.5.3 需求變更影響評估 22
8.5.4 數據集市支撐 24
8.5.5 項目管理支撐 24
8.5.5.1 工作分配管理 24
8.5.5.2 係統使用狀況分析 24
8.5.5.3 項目需求管理 24
8.5.5.4 項目組織架構管理 25
9. 數據質量監控模塊 25
9.1 概述 25
9.2 數據質量監控模塊的目標 25
9.3 數據質量監控模塊功能要求 25
9.3.1 數據質量監控流程 25
9.3.2 采集 26
9.3.2.1 指導原則 26
9.3.2.2 信息采集 26
9.3.3 檢查 27
9.3.3.1 數據質量檢查基本功能 27
9.3.3.1.1 數據稽核 27
9.3.3.1.2 處理過程檢查 30
9.3.3.2 數據質量檢查點的部署方式 30
9.3.4 報告 31
9.3.4.1 檢查結果報告基本過程 31
9.3.4.1.1 報告定義 31
9.3.4.1.2 報告生成 31
9.3.4.1.3 報告提示 31
9.3.4.2 檢查結果報告的內容 31
9.3.4.3 告警管理 32
9.3.4.3.1 告警界麵 32
9.3.4.3.2 告警形式 32
9.3.4.3.3 告警升級 33
9.3.4.3.4 告警恢複 33
9.3.5 處理 33
9.3.5.1 問題處理的階段劃分 33
9.3.5.2 問題隔離階段 33
9.3.5.3 問題處理階段 34
9.3.6 總結 34
9.3.6.1 總結的類型 34
9.3.6.2 問題總結 34
9.3.6.3 階段性總結 34
9.4 數據質量監控模塊技術實現 35
9.4.1 技術實現架構 35
9.4.2 數據質量檢查代理 36
9.4.2.1 目錄掃描模塊 36
9.4.2.2 檢查規則讀取模塊 36
9.4.2.3 數據質量檢查模塊 36
9.4.2.4 檢查結果生成模塊 36
9.4.2.5 代理活動采集模塊 36
9.4.2.6 通信模塊 37
9.4.3 數據質量監控服務器 37
9.4.3.1 用戶管理模塊 37
9.4.3.2 檢查規則處理模塊 37
9.4.3.3 代理配置處理模塊 37
9.4.3.4 代理活動監控模塊 38
9.4.3.5 檢查結果處理模塊 38
9.4.3.6 數據庫接口模塊 38
9.4.3.7 通信模塊 39
9.4.4 數據質量檢查客戶端 39
9.4.4.1 檢查規則查看 39
9.4.4.2 檢查規則配置 39
9.4.4.3 代理配置 39
9.4.4.4 代理活動監控 39
9.4.4.5 檢查結果查看 40
9.4.4.6 用戶管理 40
9.4.4.7 通信模塊 40
9.5 實施要求 40
9.6 場景描述 41
10. 數據質量管理流程 44
10.1 概述 44
10.2 管理機製 44
10.2.1 組織機構職責 44
10.2.1.1 角色與職責 44
10.2.1.1.1 項目負責人 44
10.2.1.1.2 項目經理 44
10.2.1.1.3 數據質量管理員 45
10.2.1.1.4 業務係統接口員 45
10.2.1.1.5 文檔的設立和維護 45
10.2.2 相關外部組織 46
10.3 質量控製流程 46
10.3.1 需求變更控製流程 47
10.3.1.1 流程進入條件 47
10.3.1.2 流程產生文檔 48
10.3.2 數據質量問題處理流程 48
10.3.2.1 流程進入條件 49
10.3.2.2 流程產生文檔 49
10.3.3 指標口徑及業務規則問題處理流程 50
10.3.3.1 流程進入條件 51
10.3.3.2 流程產生文檔 51
10.3.4 元數據變更維護流程 52
10.3.4.1 流程進入條件 52
10.3.4.2 流程產生文檔 52
10.3.5 錯誤數據維護流程 53
10.3.5.1 流程進入條件 53
10.3.5.2 流程產生文檔 54
10.4 質量檢查 54
10.4.1 管理流程檢查 54
10.4.1.1 組織結構檢查 54
10.4.1.2 管理流程及相關標準的檢查 55
10.4.1.3 質量管理流程執行情況檢查 55
10.4.2 元數據質量檢查 55
10.4.2.1 及時性檢查 55
10.4.2.2 完整性檢查 56
10.4.2.3 準確性檢查 56
11. 係統管理 56
11.1 概述 56
11.2 係統安全管理 57
11.3 係統版本管理 57
12. 編製曆史 57
..............................