《數(shù)據(jù)管理與追溯》

《數(shù)據(jù)管理與追溯》
-段方
某世界 100 強企業(yè)大數(shù)據(jù)總設(shè)計師
教授 北京大學(xué)博士后
1 數(shù)據(jù)管理的概念與特點
1.1 背景
1.1.1 數(shù)據(jù)管理的必要性
1.1.2 數(shù)據(jù)管理的重要性
1.1.3 DAMA 介紹
1.2 從數(shù)據(jù)質(zhì)量到數(shù)據(jù)治理
1.2.1 數(shù)據(jù)質(zhì)量的引出
1.2.2 數(shù)據(jù)治理的擴展
1.3 數(shù)據(jù)管理的概念和特點
1.3.1 概念
1.3.2 特點
1.4 數(shù)據(jù)管理中管理與技術(shù)的關(guān)系
1.4.1 “三分技術(shù)、七分管理”
1.4.2 組織架構(gòu)要求
1.4.3 堅持管理先導(dǎo)
1.4.4 涉及到的技術(shù)內(nèi)容
1.5 數(shù)據(jù)模型標準是基礎(chǔ)
1.5.1 第三范式
1.5.2 數(shù)據(jù)模型建模方法
1.5.3 建模工具舉例
1.6 數(shù)據(jù)管理的平衡
1.6.1 治理的成本
1.6.2 “度”的平衡
1.7 數(shù)據(jù)管理的趨勢
1.7.1 數(shù)據(jù)的自動化治理
1.7.2 數(shù)據(jù)治理的“無人駕駛”
1.8 【例】數(shù)據(jù)治理的功能演示
2 數(shù)據(jù)管理基本內(nèi)容
2.1 數(shù)據(jù)架構(gòu)管理
2.1.1 企業(yè)數(shù)據(jù)模型
2.1.2 價值鏈分析
2.1.3 相關(guān)數(shù)據(jù)架構(gòu)
2.2 數(shù)據(jù)開發(fā)
2.2.1 分析
2.2.2 數(shù)據(jù)建模
2.2.3 數(shù)據(jù)庫設(shè)計
2.2.4 實施
2.3 數(shù)據(jù)操作管理
2.3.1 獲取
2.3.2 恢復(fù)
2.3.3 調(diào)優(yōu)
2.3.4 保留
2.3.5 清除
2.4 數(shù)據(jù)安全管理
2.4.1 標準
2.4.2 分級
2.4.3 管理
2.4.4 授權(quán)
2.4.5 審計
2.5 參考數(shù)據(jù)和主數(shù)據(jù)管理
2.5.1 外部規(guī)范
2.5.2 內(nèi)部規(guī)范
2.5.3 客戶數(shù)據(jù)
2.5.4 產(chǎn)品數(shù)據(jù)
2.5.5 維度管理
2.6 文檔和內(nèi)容管理
2.6.1 獲取和存儲
2.6.2 備份和恢復(fù)
2.6.3 內(nèi)容管理
2.6.4 檢索
2.6.5 保留
2.7 元數(shù)據(jù)管理
2.7.1 架構(gòu)
2.7.2 整合
2.7.3 控制
2.7.4 交付
2.8 數(shù)據(jù)質(zhì)量管理
2.8.1 規(guī)范
2.8.2 分析
2.8.3 度量
2.8.4 改進
2.9 數(shù)據(jù)治理應(yīng)用舉例
2.9.1 數(shù)據(jù)字典
2.9.2 血緣分析
2.9.3 影響分析
2.9.4 關(guān)鍵影響因素分析
2.9.5 自助查詢小助手
2.9.6 元數(shù)據(jù)之家
2.10 【例】數(shù)據(jù)治理的案例分享
3 數(shù)據(jù)質(zhì)量概念與應(yīng)用
3.1 概念及特點
3.1.1 數(shù)據(jù)質(zhì)量管理要求
3.1.2 特點
3.1.3 范圍
3.2 數(shù)據(jù)質(zhì)量與元數(shù)據(jù)關(guān)系
3.2.1 元數(shù)據(jù)是基礎(chǔ)
3.2.2 數(shù)據(jù)質(zhì)量是應(yīng)用
3.3 數(shù)據(jù)質(zhì)量管理功能
3.3.1 數(shù)據(jù)獲取
3.3.2 監(jiān)控規(guī)則存儲
3.3.3 質(zhì)量評估
3.3.4 質(zhì)量稽核
3.3.5 告警處理
3.3.6 監(jiān)控知識庫
3.4 數(shù)據(jù)質(zhì)量產(chǎn)品設(shè)計原則
3.4.1 提升易用性
3.4.2 及時發(fā)現(xiàn)問題
3.4.3 分段管控原則
3.4.4 閉環(huán)處理原則
3.5 數(shù)據(jù)質(zhì)量產(chǎn)品
3.5.1 數(shù)據(jù)健康度
3.5.2 接口監(jiān)控助手
3.5.3 規(guī)則庫
3.5.4 產(chǎn)品設(shè)計及描述
3.6 數(shù)據(jù)質(zhì)量運維要求
3.6.1 運維的內(nèi)容
3.6.2 運維的范圍
3.6.3 運維的要求
3.7 【例】某大數(shù)據(jù)系統(tǒng)數(shù)據(jù)質(zhì)量舉例
4 數(shù)據(jù)資產(chǎn)管理
4.1 概念和特點
4.1.1 背景
4.1.2 定義
4.1.3 特點
4.1.4 范圍
4.2 屬性和分類
4.2.1 屬性
4.2.2 分類
4.2.3 分類編碼原則
4.3 管理體系
4.3.1 管理的組織機構(gòu)
4.3.2 資產(chǎn)規(guī)劃
4.3.3 資產(chǎn)開發(fā)獲取
4.3.4 資產(chǎn)注冊
4.3.5 資產(chǎn)運維
4.3.6 資產(chǎn)注銷
4.4 應(yīng)用管理
4.4.1 資產(chǎn)可視化
4.4.2 資產(chǎn)健康度評估
4.4.3 資產(chǎn)價值評估
4.4.4 資產(chǎn)開放運營
4.5 【例】某大數(shù)據(jù)系統(tǒng)數(shù)據(jù)資產(chǎn)管理案例
5 數(shù)據(jù)追溯
5.1 概念和定義
5.1.1 基礎(chǔ)概念
5.1.2 不同的定義
5.1.3 數(shù)據(jù)溯源的基本方法
5.2 數(shù)據(jù)溯源模型
5.2.1 基本概念
5.2.2 流溯源信息模型
5.2.3 時間-值中心溯源模型
5.2.4 四維溯源模型
5.2.5 Provenir 數(shù)據(jù)溯源模型等
5.3 數(shù)據(jù)溯源的方法
5.3.1 基本介紹
5.3.2 標注法
5.3.3 反向查詢法
5.4 【例】數(shù)據(jù)溯源應(yīng)用舉例
6 數(shù)據(jù)溯源與區(qū)塊鏈
6.1 區(qū)塊鏈的基本概念
6.2 從商品溯源說起
6.3 數(shù)據(jù)溯源基于區(qū)塊鏈的不可抵賴特性
6.4 數(shù)據(jù)處理過程的區(qū)塊鏈實現(xiàn)
6.5 數(shù)據(jù)溯源的區(qū)塊鏈實現(xiàn)方法
6.6 【例】基于區(qū)塊鏈的產(chǎn)品溯源到數(shù)據(jù)溯源
7 總結(jié)

段方老師的其它課程