總有人問:“數(shù)據治理到底是治什么?”
數(shù)據治理不是一句空話,不是創(chuàng)造什么新法子,而是幫你把數(shù)據真正用起來。而它真正“治理”的方式,是一整套機制、流程、平臺和能力的協(xié)同組合。
今天,我們就以“數(shù)據質量”為切入點,來看數(shù)據治理的一些核心問題——數(shù)據治理到底在做什么?它為什么重要?它與中臺之間又是什么關系?
數(shù)據治理是什么?
數(shù)據治理(Data Governance)是組織中涉及數(shù)據使用的一整套管理行為。是一個全面的管理過程,它涵蓋了數(shù)據的整個生命周期,從數(shù)據的創(chuàng)建、存儲、使用、共享、歸檔到銷毀。由組織數(shù)據治理部門發(fā)起并推行,關于如何制定和實施針對整個組織內部數(shù)據的商業(yè)應用和技術管理的一系列政策和流程。
不同視角下的數(shù)據治理
從管理者視角,數(shù)據治理與組織戰(zhàn)略相關、指導組織數(shù)字化轉型的策略。
從業(yè)務人員視角,希望數(shù)據治理能夠將組織的數(shù)據開放出來,知道有哪些數(shù)據、是怎么定義的、有什么作用,能夠獲取有質量保障的數(shù)據。
簡單來說,數(shù)據治理,是把組織里一切數(shù)據個體,治得有規(guī)矩、有系統(tǒng)、能分類、可跟蹤、可處理、能有效流動。其目的是降低數(shù)據風險、建立數(shù)據使用內部規(guī)則、實施合規(guī)要求、改善內部和外部溝通、增加數(shù)據價值、降低成本等。
從數(shù)據創(chuàng)建采集,到數(shù)據使用分享,幾乎每一段環(huán)節(jié)都有問題需要被“治理”一把,如果不解決這些問題,組織數(shù)據化成熟將遙遙無期。
數(shù)據治理要做的,就是用規(guī)則+流程+所有權責連接,將數(shù)據的生產、維護、分類、轉換、使用全鏈路打通。把“工作用到的數(shù)據”部署好、標識好、維護好、有系統(tǒng)地管起來,讓數(shù)據有資產屬性,有受益能力,有可轉換價值。
數(shù)據治理關鍵——治好質量
絕大多數(shù)組織在推進治理時,往往先從質量入手。一方面是因為質量問題最易暴露、最容易被感知,另一方面,也是因為數(shù)據質量直接影響業(yè)務信任與系統(tǒng)穩(wěn)定。
具有以下特點:
● 數(shù)據質量問題最直觀,業(yè)務感知強
● 質量評估有明確結果指標,利于量化與改進
● 后續(xù)主數(shù)據管理、資產目錄建設、指標口徑統(tǒng)一等,均依賴可信數(shù)據作為基礎
因此,質量治理往往被視為組織構建數(shù)據治理能力體系的“第一步臺階”。
數(shù)據質量治理的基本流程:
發(fā)現(xiàn)數(shù)據質量問題 > 定義數(shù)據質量規(guī)則 > 質量控制 > 質量評估 > 質量優(yōu)化
質量問題:列出了數(shù)據可能存在的問題,如完整性、唯一性、準確性、一致性、及時性、真實性和相關性等
質量規(guī)則:定義了數(shù)據質量的規(guī)則和權重分配。這些規(guī)則用于評估數(shù)據的質量。比如針對字段設計質量規(guī)則(如手機號長度、日期格式、數(shù)值范圍等)
質量控制前置:在數(shù)據進入平臺之前進行質量控制,包括數(shù)據錄入、數(shù)據導入和集成接入。不符合規(guī)則的數(shù)據不會被允許進入平臺。
質量評估:對已有數(shù)據進行質量評估,生成評估報告。評估過程中會識別出臟數(shù)據(即不符合質量要求的數(shù)據)并進行詳細記錄。
數(shù)據清洗:對識別出的臟數(shù)據進行自動清洗,以提高數(shù)據質量。針對復雜問題,觸發(fā)預警,推送人工復核流程。
低分/異常預警:對質量評分低或異常的數(shù)據發(fā)出預警,以便及時處理。
質量情況統(tǒng)計:對數(shù)據質量情況進行統(tǒng)計分析,以便更好地理解和改進數(shù)據質量。
數(shù)據質量的8個衡量標準
在衡量數(shù)據質量時,常見的標準主要包括以下八個維度:
首先是準確性和精確性。準確性指數(shù)據采集值或觀測值與真實值之間的接近程度,也可以理解為誤差大??;而精確性則強調對同一對象重復采集或觀測時,結果是否一致,波動越小說明精確性越好。
其次是真實性,即數(shù)據是否如實反映了客觀業(yè)務事實,是否存在人為造假、篡改或補填的現(xiàn)象,這是衡量數(shù)據可信度的基礎。
及時性與即時性。及時性強調數(shù)據是否能在業(yè)務所需時間節(jié)點前準備好,例如月末財務數(shù)據能否在月初用于對賬。而即時性則更偏向技術層面,關注的是數(shù)據從采集到傳輸、落地的響應速度,是否能第一時間流轉到下游系統(tǒng)。
完整性表示應采集數(shù)據與實際采集數(shù)據之間的匹配程度,缺字段、多空值都會降低完整性;全面性則進一步關注采集內容是否覆蓋了業(yè)務所需的所有維度和字段,是判斷數(shù)據是否“采全”的標準。
最后是關聯(lián)性,它衡量數(shù)據項之間是否具有關聯(lián)邏輯。例如員工的工資數(shù)據是否能與人力資源系統(tǒng)中的員工檔案一一對應,是否具備可追溯的主鍵或映射關系。
數(shù)據治理不僅僅是修復“臟數(shù)據”,更不是一次性的質量清洗項目。它是一整套數(shù)據能力體系的構建過程,質量只是其中的基本點。
數(shù)據治理的價值
數(shù)據治理不是“為了治理而治理”,它的本質是通過制度化、流程化、平臺化的手段,提升數(shù)據資產的使用效率、服務能力與戰(zhàn)略價值。 從實際業(yè)務效果來看,數(shù)據治理通常能夠為組織帶來以下六個價值:
1、降低業(yè)務運營成本
自動化,減低人力成本:一致性的數(shù)據環(huán)境讓系統(tǒng)應用集成、數(shù)據清理變得更加自動化,減少過程中的人工成本;
標準化,減少溝通成本:標準化的數(shù)據定義讓業(yè)務部門之間的溝通保持順暢,降低由于數(shù)據不標準、定義不明確引發(fā)的各種溝通成本。
2、提升業(yè)務處理效率
有效的數(shù)據治理可以提高組織的運營效率。高質量的數(shù)據環(huán)境和高效的數(shù)據服務讓組織員工可以方便、及時地查詢到所需的數(shù)據,然后即可展開自己的工作,而無須在部門與部門之間進行協(xié)調、匯報等。
3、改善數(shù)據質量
高質量的數(shù)據有利于提升應用集成的效率和質量,提高數(shù)據分析的可信度。
4、控制數(shù)據風險
5、增強數(shù)據安全
有效的數(shù)據治理可以更好地保證數(shù)據的安全防護、敏感數(shù)據保護和數(shù)據的合規(guī)使用。通過數(shù)據梳理識別敏感數(shù)據,再通過實施相應的數(shù)據安全處理技術,例如數(shù)據加密/解密、數(shù)據脫敏/脫密、數(shù)據安全傳輸、數(shù)據訪問控制、數(shù)據分級授權等手段,實現(xiàn)數(shù)據的安全防護和使用合規(guī)。
6、賦能管理決策
有效的數(shù)據治理有利于提升數(shù)據分析和預測的準確性,從而改善決策水平。良好的決策是基于經驗和事實的,不可靠的數(shù)據就意味著不可靠的決策。
數(shù)據中臺VS數(shù)據治理
雖然我們已經從價值維度理解了數(shù)據治理對組織的作用,但治理最終要落地,離不開平臺能力的支撐。比如在實際建設中,“中臺”和“治理”經常同時出現(xiàn)。我們可以從“相同點”“不同點”和“協(xié)同關系”三個角度來理解它們的本質差異與配合方式:
1、相同點:企業(yè)級的數(shù)據體系
無論是數(shù)據治理,還是數(shù)據中臺,本質上都是為了讓數(shù)據真正“用得上、用得好”。它們共同具備的特征包括:覆蓋面廣,涉及數(shù)據倉庫、數(shù)據集成、數(shù)據安全、ETL等多個環(huán)節(jié),都強調全局視角,是企業(yè)級別的能力體系,不是哪個部門的單兵作戰(zhàn)都需要制度、技術與平臺的協(xié)同建設。
2、不同點:價值不同
數(shù)據中臺并不僅僅是數(shù)據治理工作的放大升級版,而是數(shù)據治理工作的深化,它強化了數(shù)據治理的深度和廣度,并拓展了數(shù)據治理不涉及的數(shù)據應用領域。應該說,數(shù)據中臺真正實現(xiàn)了組織內部數(shù)據的閉環(huán)。
從價值層面來看,數(shù)據中臺的價值在于業(yè)務數(shù)據化、數(shù)據資產化、資產服務化和服務業(yè)務化。而數(shù)據治理則是實現(xiàn)數(shù)據資產化的重要步驟。
3、協(xié)同關系
數(shù)據治理不是數(shù)據平臺的附件,而是數(shù)據中臺建設的一個重要組成部分。數(shù)據治理,在消除數(shù)據孤島、提高數(shù)據質量、保障數(shù)據安全等方面,支撐中臺數(shù)據的可見、可用、可運營。
即便很多人認為中臺戰(zhàn)略已經“過時”,但如果組織已經構建起自己的服務共享平臺和數(shù)據資產庫,能夠支撐業(yè)務系統(tǒng)快速復用與靈活組合,那么它依然是一個具備實際價值的數(shù)據中臺。
中臺思想本身沒有錯,關鍵點還是在于業(yè)務如何變革,業(yè)務和IT如何協(xié)同去推動中臺規(guī)劃和建設。所以,即使沒有完善的數(shù)據中臺,數(shù)據治理依然可以獨立發(fā)揮作用。
說到底,數(shù)據治理的目的不是建平臺,而是讓數(shù)據真正“能用、敢用、好用”。這是一項組織級的系統(tǒng)性工作,需要管理層統(tǒng)一指揮、各部門協(xié)同參與、從具體業(yè)務場景出發(fā)持續(xù)推進,才能真正實現(xiàn)數(shù)據能力的落地與釋放。
特別聲明:智慧醫(yī)療網轉載其他網站內容,出于傳遞更多信息而非盈利之目的,同時并不代表贊成其觀點或證實其描述,內容僅供參考。版權歸原作者所有,若有侵權,請聯(lián)系我們刪除。
凡來源注明智慧醫(yī)療網的內容為智慧醫(yī)療網原創(chuàng),轉載需獲授權。
智慧醫(yī)療網 ? 2022 版權所有 ICP備案號:滬ICP備17004559號-5