無論是小數據時代還是大數據時代,數據治理都是個非常重要的工作,數據質量問題是個非常普遍的問題。對於傳統企業來說,核心業務還是流程驅動的,需要而且有條件把數據做准確,這就需要在數據管理上面下功夫。
介紹一個歐盟的數據管理知識體系,DAMA-DMBOK,由DAMA國際發布,DAMA是數據管理學會的簡稱,也可以直接叫大媽^_^。這個組織成立於1988年,在數據管理方面有極為深厚的知識沉淀和豐富的經驗,出版了DAMA 數據管理字典(第一版)DAMA Dictionary of DataManagement ( 1st ed, )和 DAMA-DMBOK(數據管理的知識體系和指南,最新版本是3.02),資料可以免費下載,有中英文多個版本。中國電子學會下面有個對口單位DAMA中國,翻譯了知識管理體系和指南中文版。DAMA國際的網址:http://www.dama.org/i4a/pages/index.cfm?pageid=1。DAMA中國的網址是:http://www.dama.org.cn/drupal620/zh-hans/node。
簡要介紹一下DAMA-DMBOK的內容,詳細可下載電子資料閱讀。
《DAMA-DMBOK 職能框架》定義了 10 個主要的數據管理職能,並通過 7 個環境元素對每個職能進行描述。如下的矩陣以圖示方式給出此框架。
一、數據管理的十大組成職能:
數據治理:在數據管理和使用層面之上進行規划、監督和控制。
數據架構管理:定義數據資產管理藍圖。
數據開發:數據的分析、設計、實施、測試、部署、維護等工作。
數據操作管理:提供從數據獲取到清除的技術支持。
數據安全管理:確保隱私、保密性和適當的訪問權限等。
數據質量管理:定義、監測和提高數據質量。DAMA 國際版權所有 9
參考數據和主數據管理:管理數據的黃金版本和副本。
數據倉庫和商務智能管理:實現報告和分析。
文件和內容管理:管理數據庫以外的數據
元數據管理:元數據的整合、控制以及提供元數據。
每個職能在一般意義上的涉及范圍。
數據治理:數據資產管理的權威性和控制性活動(規划、監視和強制執行)。數據治理是對數據管理的高層計划與控制。
數據架構管理:定義企業的數據需求,並設計藍圖以便滿足這一需求。該職能包括在所有企業架構環境中,開發和維護企業數據架構,同時也開發和維護企業數據架構與應用系統解決方案、企業架構實施項目之間的關聯。
數據開發:為滿足企業的數據需求、設計、實施、與維護解決方案。也就是系統開發生命周期(SDLC)中以數據為主的活動,包括數據建模、數據需求分析、設計、實施和維護數據庫中數據相關的解決方案。
數據操作管理:對於結構化的數據資產在整個數據生命周期(從數據的產生、 獲取到存檔和清除)進行的規划、控制與支持。
數據安全管理:規划、開發和執行安全政策與措施,提供適當的身份以確認、授權、訪問與審計。
參考數據和主數據管理:規划、實施和控制活動,以確保特定環境下的數值的“黃金版本”。
數據倉庫和商務智能管理:規划、實施與控制過程,給知識工作者們在報告,查詢和分析過程中提供數據和技術支持。
二、七個環境因素
包括一系列基本元素(目標和原則,活動,交付結果,角色和職責),此外還包括一些低結構化的支持元素(實踐和規程,技術,組織和文化)。
基本的環境元素有:
目標和原則 –每個職能的方向性業務目標以及職能履行中的基本指導原則;
活動 –每個職能都被進一步分解成更低層次的活動,一些活動組合在一起構成子職能,活動能被進一步分解成任務或步驟;
交付結果 –被作為每個職能的中間結果或最終結果建立起來的輸出信息、物理數據庫和文檔。其中的一些被認為是基本的,有一些一般情況只作推薦,另外一些是根據具體環境可選的;
角色和責任 –在執行一個職能和對功能進行監督過程中所涉及的業務角色和 IT角色,以及在該職能中每個角色所涉及的具體責任。很多角色可能會參與多個職能;
支持性環境元素包括:
實踐和方法–用於執行這些過程和生成交付結果的常見和流行的方法和具體技術,也可能包括常見的約定、推薦的最佳實踐方法和簡要介紹的候選方法;
技術 –各種支撐技術(主要是軟件工具)、標准和協議、產品選擇標准和常見
學習曲線。與 DAMA 的方針一致,這里不會提及具體的供應商和產品。
組織和文化 –這些問題包括:
- 管理度量標准–規模、精力、時間、代價、質量、有效性、生產率、成功和商業價值的度量標准
- 關鍵成功因素
- 匯報體系
- 合同策略
- 預算和資源分配
- 團隊和小組動力
- 權威和授權
- 共同價值和理念
- 期望和態度
- 個人風格和喜好差異
- 文化習俗、禮儀和象征標志
- 企業傳統
- 變革管理建議
三、總結
數據管理共有 10 項職能和 102 項活動,如果某一項職能具有超過 12 項活動時,會將活動分組,形成兩個或多個子職能。共有 3 項職能擁有共 8 項子職能(2 個,4 個和 2 個)。DAMA-DMBOK給出了一個數據管理的流程框架,細節可以閱讀電子資料。此外,歐洲每年召開一個數據治理會議,會議網址是:http://www.irmuk.co.uk/dg2014/。主辦方是IRM UK,這個組織除了組織數據治理會議外,還主辦企業架構、業務分析、主數據管理等等很多會議。