一、權(quán)威書籍介紹

《穿越數(shù)據(jù)的迷宮》

本書分12章重點(diǎn)闡述了數(shù)據(jù)管理的重要性，數(shù)據(jù)管理的挑戰(zhàn)，DAMA的數(shù)據(jù)管理原則，數(shù)據(jù)倫理，數(shù)據(jù)治理，數(shù)據(jù)生命周期管理的規(guī)劃和設(shè)計，數(shù)據(jù)賦能和數(shù)據(jù)維護(hù)，使用和增強(qiáng)數(shù)據(jù)，數(shù)據(jù)保護(hù)、隱私、安全和風(fēng)險管理，元數(shù)據(jù)管理，數(shù)據(jù)質(zhì)量管理，以及現(xiàn)在應(yīng)該怎么辦，能夠幫助企業(yè)管理層在了解和執(zhí)行數(shù)據(jù)管理的過程中不致迷失在技術(shù)術(shù)語的迷宮之中。

本書可供非數(shù)據(jù)專業(yè)人士、企業(yè)管理者、數(shù)據(jù)行業(yè)研究者等讀者學(xué)習(xí)和參考。

《DMBOK2》

數(shù)據(jù)管理領(lǐng)域的PMBOK，由DAMA進(jìn)行編撰。

DAMA（國際數(shù)據(jù)管理協(xié)會）成立于1980年，是一個由技術(shù)和業(yè)務(wù)專業(yè)人員組成的國際性數(shù)據(jù)管理專業(yè)協(xié)會，作為一個非營利的機(jī)構(gòu)，獨(dú)立于任何廠商，旨在世界范圍內(nèi)推廣并促進(jìn)數(shù)據(jù)管理領(lǐng)域的概念和最佳實(shí)踐，為數(shù)字經(jīng)濟(jì)打下理論和實(shí)踐基礎(chǔ)。

全球會員2萬人，在世界共有52個分會。DAMA China （國際數(shù)據(jù)管理協(xié)會中國分會）

職能：年會（EDW）-知識體系-認(rèn)證考試（CDMP、CDGA、CDGP等）

DAMA框架

車輪圖

描述知識管理領(lǐng)域10大子領(lǐng)域

六邊形圖

描述人、技術(shù)、過程之間的關(guān)系

知識領(lǐng)域語境關(guān)系圖?

SIPOC（供給者、輸入、活動、交付成果和消費(fèi)者）?

二、數(shù)據(jù)管理概念介紹

數(shù)據(jù)管理與數(shù)據(jù)治理

數(shù)據(jù)管理>數(shù)據(jù)治理

數(shù)據(jù)治理的目的是確保根據(jù)數(shù)據(jù)管理制度和最佳實(shí)踐正確地管理數(shù)據(jù)

為什么做數(shù)據(jù)治理？

數(shù)據(jù)治理是數(shù)據(jù)由原始數(shù)據(jù)到數(shù)據(jù)資源到數(shù)據(jù)資產(chǎn)到數(shù)據(jù)產(chǎn)品實(shí)現(xiàn)數(shù)據(jù)價值變現(xiàn)的過程。

不要為了治理而治理。圍繞業(yè)務(wù)，圍繞監(jiān)管/法律規(guī)定進(jìn)行治理。目標(biāo)是使組織能夠?qū)?shù)據(jù)作為資產(chǎn)進(jìn)行管理，并從中獲取價值。

監(jiān)管驅(qū)動的數(shù)據(jù)治理——EAST5.0?

? ? ? 2022年1月30日，銀保監(jiān)會正式發(fā)布《中國銀保監(jiān)會銀行業(yè)金融機(jī)構(gòu)監(jiān)管數(shù)據(jù)標(biāo)準(zhǔn)化規(guī)范（2021版）》，標(biāo)志EAST系統(tǒng)從4.0邁入5.0階段。根據(jù)新規(guī)要求，銀保監(jiān)會對商業(yè)銀行數(shù)據(jù)標(biāo)準(zhǔn)化數(shù)據(jù)報送的采集范圍、報送要求以及數(shù)據(jù)質(zhì)量等各方面再次升級，進(jìn)一步完善了數(shù)據(jù)采集與報送的完備性、完成性和規(guī)范性。

什么是數(shù)據(jù)治理

當(dāng)前企業(yè)數(shù)據(jù)面臨很多的問題：沒有統(tǒng)一的數(shù)據(jù)標(biāo)準(zhǔn)，各業(yè)務(wù)系統(tǒng)間數(shù)據(jù)無法充分共享，關(guān)鍵核心數(shù)據(jù)無法識別及跨系統(tǒng)無法拉通等。為有效管理企業(yè)數(shù)據(jù)資產(chǎn)，實(shí)現(xiàn)數(shù)據(jù)價值的最大化，急需建立一個完善的數(shù)據(jù)治理框架體系，為企業(yè)數(shù)字化轉(zhuǎn)型打下堅實(shí)的數(shù)據(jù)基礎(chǔ)。

總的來說，數(shù)據(jù)治理是人、工具及制度的一些列集合。

數(shù)據(jù)管理角色（人）

數(shù)據(jù)治理功能全景（工具）

數(shù)據(jù)相關(guān)的制度及規(guī)范（制度）

三、數(shù)據(jù)安全管理

數(shù)據(jù)安全管理是指通過規(guī)范和加強(qiáng)對企業(yè)或個人數(shù)據(jù)的管理和保護(hù)，確保數(shù)據(jù)的機(jī)密性、完整性和可用性，從而保護(hù)數(shù)據(jù)的安全性和可靠性。

1、數(shù)據(jù)安全管理的法律法規(guī)要求：

在法律法規(guī)方面，各國政府對數(shù)據(jù)保護(hù)制定了相關(guān)的法律法規(guī)，例如《中華人民共和國網(wǎng)絡(luò)安全法》、《個人信息保護(hù)法》等，這些法規(guī)規(guī)定了數(shù)據(jù)安全的管理要求和責(zé)任，以及數(shù)據(jù)泄露和違規(guī)行為的處罰。以下是本文整理的一些數(shù)據(jù)安全相關(guān)的法律法規(guī)及標(biāo)準(zhǔn)系列的整理：

2、DSMM-信息安全技術(shù) 數(shù)據(jù)安全能力成熟度模型

數(shù)據(jù)安全成熟度模型DSMM（Data Security Maturity Model）是一種基于流程和方法的模型，用于評估和改進(jìn)組織在數(shù)據(jù)安全方面的能力。DSMM模型的優(yōu)點(diǎn)是能夠幫助組織全面評估和改進(jìn)其數(shù)據(jù)安全能力，同時也能夠提供實(shí)際可行的解決方案，使組織能夠逐步提高其數(shù)據(jù)安全成熟度。

維度包括安全能力維度、安全過程維度、能力成熟度等級維度。

同時，按照數(shù)據(jù)的生命周期劃分未7大過程域。

3、數(shù)據(jù)安全分級分類管理

在數(shù)據(jù)安全管理中，需要進(jìn)行數(shù)據(jù)安全分級分類管理。這是根據(jù)數(shù)據(jù)的重要性、敏感程度、安全風(fēng)險等因素，對數(shù)據(jù)進(jìn)行分類和評估，然后制定相應(yīng)的保護(hù)措施和管理策略。例如，將數(shù)據(jù)分為核心數(shù)據(jù)、關(guān)鍵數(shù)據(jù)和一般數(shù)據(jù)，針對不同類別的數(shù)據(jù)制定不同的安全管理策略和技術(shù)措施。同時，數(shù)據(jù)分類和管理也可以幫助企業(yè)或個人更好地了解數(shù)據(jù)的價值和安全風(fēng)險，從而采取相應(yīng)的風(fēng)險控制和防范措施。

數(shù)據(jù)安全策略：敏感字段加密、訪問權(quán)限控制......

元數(shù)據(jù)管理

元數(shù)據(jù)是描述數(shù)據(jù)的數(shù)據(jù)，數(shù)據(jù)治理的開始。讓你更了解你的數(shù)據(jù)，從而分析你的數(shù)據(jù)。

最簡單的元數(shù)據(jù)管理模式——數(shù)據(jù)字典。

主數(shù)據(jù)管理（MDM）

定義：主數(shù)據(jù)是指滿足跨部門業(yè)務(wù)協(xié)同需要的、反映核心業(yè)務(wù)實(shí)體狀態(tài)屬性的企業(yè)（組織機(jī)構(gòu)）基礎(chǔ)信息。

主數(shù)據(jù)：客戶信息、組織機(jī)構(gòu)信息、地址坐標(biāo)、產(chǎn)品及服務(wù)數(shù)據(jù)、合同總賬數(shù)據(jù)....

參考數(shù)據(jù)：參考數(shù)據(jù)是指可用于描述或分類其他數(shù)據(jù)（碼表、映射表......）

主數(shù)據(jù)管理的案例：五證合一

如何識別及維護(hù)是重點(diǎn)！一個主數(shù)據(jù)管理系統(tǒng)，達(dá)成主數(shù)據(jù)的識別及維護(hù)。

數(shù)據(jù)質(zhì)量管理——資產(chǎn)價值的核心

2023年10月某小區(qū)用電戶戶電費(fèi)為1000度；小明的身高為33米；小紅的電話號碼為18922098765111。以上數(shù)據(jù)從主觀常識上判斷就可以判斷數(shù)據(jù)不準(zhǔn)確。

判斷數(shù)據(jù)質(zhì)量可以從準(zhǔn)確性、完備性、及時性、重復(fù)性、一致性及合規(guī)性上進(jìn)行考量。

數(shù)據(jù)質(zhì)量的要求是治理的動力之一也是數(shù)據(jù)資產(chǎn)化路上的絆腳石。因?yàn)閿?shù)據(jù)質(zhì)量問題發(fā)生的原因五花八門，很難從根本上進(jìn)行治理。

如何進(jìn)行質(zhì)量管理，主流的做法是建立一站式數(shù)據(jù)質(zhì)量管理中心DQC，建立完善、清晰的數(shù)據(jù)標(biāo)準(zhǔn)，從數(shù)據(jù)各環(huán)節(jié)進(jìn)行全面的質(zhì)量管控。但是數(shù)據(jù)質(zhì)量管理是需要成本的，非所有數(shù)據(jù)均需要進(jìn)行質(zhì)量監(jiān)控，要從對業(yè)務(wù)最重要的數(shù)據(jù)開始。

數(shù)據(jù)治理從何處入手？

數(shù)據(jù)管理成熟度評估——DCMM

數(shù)據(jù)管理成熟度評估模型（DCMM）是一種針對組織內(nèi)部數(shù)據(jù)管理流程進(jìn)行評估的框架。該框架分為5個等級，每個等級代表了數(shù)據(jù)管理成熟度的不同程度。組織應(yīng)該根據(jù)自身情況和需求，靈活運(yùn)用DCMM的框架，以提高數(shù)據(jù)管理的效率和質(zhì)量。

截止2023年9月，貫標(biāo)企業(yè)總數(shù)量為1305家，其中甲方公司的數(shù)量占據(jù)了65%，而乙方公司數(shù)量占比35%。值得注意的是，71%企業(yè)的等級為2級受管理級，僅有7家企業(yè)等級達(dá)到了最高級別的優(yōu)化級。這些優(yōu)化級的企業(yè)全部都是甲方公司，主要分布于北京市及廣東省。

數(shù)據(jù)治理如何實(shí)施

數(shù)據(jù)治理實(shí)施方法論按照數(shù)據(jù)治理成熟度評估->評估現(xiàn)狀、確定目標(biāo)、分析差距->計劃制定、計劃執(zhí)行->持續(xù)監(jiān)測度量演進(jìn)的關(guān)鍵實(shí)施方法形成數(shù)據(jù)治理實(shí)施閉環(huán)流程。

數(shù)據(jù)是資產(chǎn)

數(shù)據(jù)是一種資產(chǎn)，在數(shù)據(jù)要素化的大背景下是毋庸置疑的。如何進(jìn)行資產(chǎn)評估呢，DAMA從替換成本、市場價值、發(fā)現(xiàn)上級、售賣數(shù)據(jù)及風(fēng)險成本等幾個方面進(jìn)行描述。

?數(shù)據(jù)資產(chǎn)價值評估體系樣例：

四、數(shù)據(jù)治理體系及落地

阿里巴巴OneData數(shù)據(jù)體系

OneData數(shù)據(jù)中臺解決方案基于大數(shù)據(jù)存儲和計算平臺為載體，以O(shè)neModel統(tǒng)一數(shù)據(jù)構(gòu)建及管理方法論為主干，OneID核心商業(yè)要素資產(chǎn)化為核心，實(shí)現(xiàn)全域鏈接、標(biāo)簽萃取、立體畫像，以數(shù)據(jù)資產(chǎn)管理為皮，數(shù)據(jù)應(yīng)用服務(wù)為枝葉的松耦性整體解決方案。其數(shù)據(jù)服務(wù)理念根植于心，強(qiáng)調(diào)業(yè)務(wù)模式，在推進(jìn)數(shù)字化轉(zhuǎn)型中實(shí)現(xiàn)價值。

Dataphin是阿里巴巴集團(tuán)OneData數(shù)據(jù)治理方法論內(nèi)部實(shí)踐的云化輸出，一站式提供數(shù)據(jù)采、建、管、用全生命周期的大數(shù)據(jù)能力，以助力企業(yè)顯著提升數(shù)據(jù)治理水平，構(gòu)建質(zhì)量可靠、消費(fèi)便捷、生產(chǎn)安全經(jīng)濟(jì)的企業(yè)級數(shù)據(jù)中臺。Dataphin兼容多種計算平臺，并開放可拓展的能力，以適應(yīng)不同行業(yè)客戶的平臺技術(shù)架構(gòu)和特定訴求。

華為DAYU數(shù)據(jù)治理體系

DAYU數(shù)據(jù)治理方法論是華為數(shù)據(jù)管理方法論的精華總結(jié)，參考了業(yè)界數(shù)據(jù)治理最佳實(shí)踐，并結(jié)合華為數(shù)字化轉(zhuǎn)型成功經(jīng)驗(yàn)優(yōu)化而成。

數(shù)據(jù)治理中心 DataArts Studio：一站式數(shù)據(jù)全生命周期管理工具平臺，庫倉湖智全流程治理，助力數(shù)據(jù)價值釋放

案例：廣東省數(shù)據(jù)資源一網(wǎng)共享平臺

開放廣東：https://gddata.gd.gov.cn/index

某數(shù)據(jù)治理產(chǎn)品demo功能演示

https://wise.esensoft.com/

五、數(shù)據(jù)治理典型問題

只有大數(shù)據(jù)才需要治理嗎？

大數(shù)據(jù)時代的來臨將數(shù)據(jù)治理問題及挑戰(zhàn)推到了風(fēng)口浪尖。不以數(shù)據(jù)的大小，按照數(shù)據(jù)對業(yè)務(wù)的重要程度進(jìn)行治理。

數(shù)據(jù)安全與我無關(guān)？

樹立數(shù)據(jù)安全意識，數(shù)據(jù)安全與每個人息息相關(guān)。實(shí)行‘雙罰制’，將不僅處罰企業(yè)，還要處罰企業(yè)責(zé)任人。

“雙罰制”是指對于企業(yè)的行政違法行為，同時給予企業(yè)及相關(guān)責(zé)任人員行政處罰的法律責(zé)任制度。我國的幾部與數(shù)據(jù)相關(guān)的法律均規(guī)定了“雙罰制”，“雙罰制”為我國的企業(yè)合規(guī)管理體系建設(shè)留下了很大空間。例如《數(shù)據(jù)安全法》第四十五條規(guī)定，對于不履行數(shù)據(jù)安全保護(hù)義務(wù)的單位，由有關(guān)主管部門責(zé)令改正，根據(jù)不同情節(jié)給予警告、罰款、責(zé)令暫停相關(guān)業(yè)務(wù)、停業(yè)整頓、吊銷相關(guān)業(yè)務(wù)許可證或者吊銷營業(yè)執(zhí)照，對直接負(fù)責(zé)的主管人員和其他直接責(zé)任人員處以罰款。《個人信息保護(hù)法》的罰則規(guī)定了“責(zé)令暫?；蛘呓K止提供服務(wù)”、“并處五千萬元以下或者上一年度營業(yè)額百分之五以下罰款”、“吊銷相關(guān)業(yè)務(wù)許可或者吊銷營業(yè)執(zhí)照”等嚴(yán)厲的處罰措施。企業(yè)在個人信息處理方面違法行為，導(dǎo)致的高額罰款或吊銷營業(yè)資格等行政處罰危及企業(yè)的正常經(jīng)營，建立起一套合規(guī)管理體系對企業(yè)變得更有實(shí)際意義。

中臺=數(shù)據(jù)治理？

數(shù)據(jù)中臺是數(shù)據(jù)管理/治理的工具之一。3分技術(shù)7分管理及運(yùn)營

狹義的數(shù)據(jù)中臺指在企業(yè)內(nèi)部通過對數(shù)據(jù)半成品、算法、模型、工具等能力的積累，支撐業(yè)務(wù)應(yīng)用，為前臺提供數(shù)據(jù)能力的企業(yè)級數(shù)據(jù)中樞平臺。狹義數(shù)據(jù)中臺聚焦在數(shù)據(jù)服務(wù)的生產(chǎn)和提供，并不包括數(shù)據(jù)本身的生產(chǎn)、加工、傳輸?shù)然A(chǔ)性工作。

廣義的數(shù)據(jù)中臺是企業(yè)數(shù)據(jù)價值實(shí)現(xiàn)的能力框架，包括數(shù)據(jù)存儲匯聚、數(shù)據(jù)開發(fā)、數(shù)據(jù)管理、數(shù)據(jù)服務(wù)、數(shù)據(jù)資產(chǎn)運(yùn)營等能力。通常通過企業(yè)統(tǒng)一的一站式數(shù)據(jù)加工生產(chǎn)利用邏輯平臺的形式具象化，是企業(yè)級數(shù)據(jù)價值生產(chǎn)的中樞平臺。

數(shù)據(jù)治理完成后可以一勞永逸？

一些列項(xiàng)目集合，演進(jìn)而非革命

數(shù)據(jù)治理是數(shù)據(jù)/技術(shù)部門的事？

自上而下，全局視角，統(tǒng)籌協(xié)作。

大數(shù)據(jù)未來發(fā)展趨勢

應(yīng)用：資產(chǎn)化、要素化，交易流通加快

技術(shù)：一體化數(shù)據(jù)管理平臺（研發(fā)、治理、運(yùn)營）、DataOps、低代碼化、聯(lián)邦學(xué)習(xí)、隱私計算......

其他大數(shù)據(jù)相關(guān)書籍推薦

《華為數(shù)據(jù)之道》

《一本書講透數(shù)據(jù)治理：戰(zhàn)略、方法、工具與實(shí)踐》

《阿里巴巴大數(shù)據(jù)之路》

《數(shù)據(jù)倉庫工具箱(第3版)——維度建模權(quán)威指南》