總有人問:“數(shù)據(jù)治理到底是治什么?”
數(shù)據(jù)治理不是一句空話,不是創(chuàng)造什么新法子,而是幫你把數(shù)據(jù)真正用起來。而它真正“治理”的方式,是一整套機(jī)制、流程、平臺和能力的協(xié)同組合。
今天,我們就以“數(shù)據(jù)質(zhì)量”為切入點(diǎn),來看數(shù)據(jù)治理的一些核心問題——數(shù)據(jù)治理到底在做什么?它為什么重要?它與中臺之間又是什么關(guān)系?
數(shù)據(jù)治理是什么?
數(shù)據(jù)治理(Data Governance)是組織中涉及數(shù)據(jù)使用的一整套管理行為。是一個(gè)全面的管理過程,它涵蓋了數(shù)據(jù)的整個(gè)生命周期,從數(shù)據(jù)的創(chuàng)建、存儲、使用、共享、歸檔到銷毀。由組織數(shù)據(jù)治理部門發(fā)起并推行,關(guān)于如何制定和實(shí)施針對整個(gè)組織內(nèi)部數(shù)據(jù)的商業(yè)應(yīng)用和技術(shù)管理的一系列政策和流程。
不同視角下的數(shù)據(jù)治理
從管理者視角,數(shù)據(jù)治理與組織戰(zhàn)略相關(guān)、指導(dǎo)組織數(shù)字化轉(zhuǎn)型的策略。
從業(yè)務(wù)人員視角,希望數(shù)據(jù)治理能夠?qū)?/span>組織的數(shù)據(jù)開放出來,知道有哪些數(shù)據(jù)、是怎么定義的、有什么作用,能夠獲取有質(zhì)量保障的數(shù)據(jù)。
簡單來說,數(shù)據(jù)治理,是把組織里一切數(shù)據(jù)個(gè)體,治得有規(guī)矩、有系統(tǒng)、能分類、可跟蹤、可處理、能有效流動。其目的是降低數(shù)據(jù)風(fēng)險(xiǎn)、建立數(shù)據(jù)使用內(nèi)部規(guī)則、實(shí)施合規(guī)要求、改善內(nèi)部和外部溝通、增加數(shù)據(jù)價(jià)值、降低成本等。
從數(shù)據(jù)創(chuàng)建采集,到數(shù)據(jù)使用分享,幾乎每一段環(huán)節(jié)都有問題需要被“治理”一把,如果不解決這些問題,組織數(shù)據(jù)化成熟將遙遙無期。
數(shù)據(jù)治理要做的,就是用規(guī)則+流程+所有權(quán)責(zé)連接,將數(shù)據(jù)的生產(chǎn)、維護(hù)、分類、轉(zhuǎn)換、使用全鏈路打通。把“工作用到的數(shù)據(jù)”部署好、標(biāo)識好、維護(hù)好、有系統(tǒng)地管起來,讓數(shù)據(jù)有資產(chǎn)屬性,有受益能力,有可轉(zhuǎn)換價(jià)值。
數(shù)據(jù)治理關(guān)鍵——治好質(zhì)量
絕大多數(shù)組織在推進(jìn)治理時(shí),往往先從質(zhì)量入手。一方面是因?yàn)橘|(zhì)量問題最易暴露、最容易被感知,另一方面,也是因?yàn)閿?shù)據(jù)質(zhì)量直接影響業(yè)務(wù)信任與系統(tǒng)穩(wěn)定。
具有以下特點(diǎn):
● 數(shù)據(jù)質(zhì)量問題最直觀,業(yè)務(wù)感知強(qiáng)
● 質(zhì)量評估有明確結(jié)果指標(biāo),利于量化與改進(jìn)
● 后續(xù)主數(shù)據(jù)管理、資產(chǎn)目錄建設(shè)、指標(biāo)口徑統(tǒng)一等,均依賴可信數(shù)據(jù)作為基礎(chǔ)
因此,質(zhì)量治理往往被視為組織構(gòu)建數(shù)據(jù)治理能力體系的“第一步臺階”。
數(shù)據(jù)質(zhì)量治理的基本流程:
發(fā)現(xiàn)數(shù)據(jù)質(zhì)量問題 > 定義數(shù)據(jù)質(zhì)量規(guī)則 > 質(zhì)量控制 > 質(zhì)量評估 > 質(zhì)量優(yōu)化
質(zhì)量問題:列出了數(shù)據(jù)可能存在的問題,如完整性、唯一性、準(zhǔn)確性、一致性、及時(shí)性、真實(shí)性和相關(guān)性等
質(zhì)量規(guī)則:定義了數(shù)據(jù)質(zhì)量的規(guī)則和權(quán)重分配。這些規(guī)則用于評估數(shù)據(jù)的質(zhì)量。比如針對字段設(shè)計(jì)質(zhì)量規(guī)則(如手機(jī)號長度、日期格式、數(shù)值范圍等)
質(zhì)量控制前置:在數(shù)據(jù)進(jìn)入平臺之前進(jìn)行質(zhì)量控制,包括數(shù)據(jù)錄入、數(shù)據(jù)導(dǎo)入和集成接入。不符合規(guī)則的數(shù)據(jù)不會被允許進(jìn)入平臺。
質(zhì)量評估:對已有數(shù)據(jù)進(jìn)行質(zhì)量評估,生成評估報(bào)告。評估過程中會識別出臟數(shù)據(jù)(即不符合質(zhì)量要求的數(shù)據(jù))并進(jìn)行詳細(xì)記錄。
數(shù)據(jù)清洗:對識別出的臟數(shù)據(jù)進(jìn)行自動清洗,以提高數(shù)據(jù)質(zhì)量。針對復(fù)雜問題,觸發(fā)預(yù)警,推送人工復(fù)核流程。
低分/異常預(yù)警:對質(zhì)量評分低或異常的數(shù)據(jù)發(fā)出預(yù)警,以便及時(shí)處理。
質(zhì)量情況統(tǒng)計(jì):對數(shù)據(jù)質(zhì)量情況進(jìn)行統(tǒng)計(jì)分析,以便更好地理解和改進(jìn)數(shù)據(jù)質(zhì)量。
數(shù)據(jù)質(zhì)量的8個(gè)衡量標(biāo)準(zhǔn)
在衡量數(shù)據(jù)質(zhì)量時(shí),常見的標(biāo)準(zhǔn)主要包括以下八個(gè)維度:
首先是準(zhǔn)確性和精確性。準(zhǔn)確性指數(shù)據(jù)采集值或觀測值與真實(shí)值之間的接近程度,也可以理解為誤差大?。欢_性則強(qiáng)調(diào)對同一對象重復(fù)采集或觀測時(shí),結(jié)果是否一致,波動越小說明精確性越好。
其次是真實(shí)性,即數(shù)據(jù)是否如實(shí)反映了客觀業(yè)務(wù)事實(shí),是否存在人為造假、篡改或補(bǔ)填的現(xiàn)象,這是衡量數(shù)據(jù)可信度的基礎(chǔ)。
及時(shí)性與即時(shí)性。及時(shí)性強(qiáng)調(diào)數(shù)據(jù)是否能在業(yè)務(wù)所需時(shí)間節(jié)點(diǎn)前準(zhǔn)備好,例如月末財(cái)務(wù)數(shù)據(jù)能否在月初用于對賬。而即時(shí)性則更偏向技術(shù)層面,關(guān)注的是數(shù)據(jù)從采集到傳輸、落地的響應(yīng)速度,是否能第一時(shí)間流轉(zhuǎn)到下游系統(tǒng)。
完整性表示應(yīng)采集數(shù)據(jù)與實(shí)際采集數(shù)據(jù)之間的匹配程度,缺字段、多空值都會降低完整性;全面性則進(jìn)一步關(guān)注采集內(nèi)容是否覆蓋了業(yè)務(wù)所需的所有維度和字段,是判斷數(shù)據(jù)是否“采全”的標(biāo)準(zhǔn)。
最后是關(guān)聯(lián)性,它衡量數(shù)據(jù)項(xiàng)之間是否具有關(guān)聯(lián)邏輯。例如員工的工資數(shù)據(jù)是否能與人力資源系統(tǒng)中的員工檔案一一對應(yīng),是否具備可追溯的主鍵或映射關(guān)系。
數(shù)據(jù)治理不僅僅是修復(fù)“臟數(shù)據(jù)”,更不是一次性的質(zhì)量清洗項(xiàng)目。它是一整套數(shù)據(jù)能力體系的構(gòu)建過程,質(zhì)量只是其中的基本點(diǎn)。
數(shù)據(jù)治理的價(jià)值
數(shù)據(jù)治理不是“為了治理而治理”,它的本質(zhì)是通過制度化、流程化、平臺化的手段,提升數(shù)據(jù)資產(chǎn)的使用效率、服務(wù)能力與戰(zhàn)略價(jià)值。 從實(shí)際業(yè)務(wù)效果來看,數(shù)據(jù)治理通常能夠?yàn)?/span>組織帶來以下六個(gè)價(jià)值:
1、降低業(yè)務(wù)運(yùn)營成本
自動化,減低人力成本:一致性的數(shù)據(jù)環(huán)境讓系統(tǒng)應(yīng)用集成、數(shù)據(jù)清理變得更加自動化,減少過程中的人工成本;
標(biāo)準(zhǔn)化,減少溝通成本:標(biāo)準(zhǔn)化的數(shù)據(jù)定義讓業(yè)務(wù)部門之間的溝通保持順暢,降低由于數(shù)據(jù)不標(biāo)準(zhǔn)、定義不明確引發(fā)的各種溝通成本。
2、提升業(yè)務(wù)處理效率
有效的數(shù)據(jù)治理可以提高組織的運(yùn)營效率。高質(zhì)量的數(shù)據(jù)環(huán)境和高效的數(shù)據(jù)服務(wù)讓組織員工可以方便、及時(shí)地查詢到所需的數(shù)據(jù),然后即可展開自己的工作,而無須在部門與部門之間進(jìn)行協(xié)調(diào)、匯報(bào)等。
3、改善數(shù)據(jù)質(zhì)量
高質(zhì)量的數(shù)據(jù)有利于提升應(yīng)用集成的效率和質(zhì)量,提高數(shù)據(jù)分析的可信度。
4、控制數(shù)據(jù)風(fēng)險(xiǎn)
5、增強(qiáng)數(shù)據(jù)安全
有效的數(shù)據(jù)治理可以更好地保證數(shù)據(jù)的安全防護(hù)、敏感數(shù)據(jù)保護(hù)和數(shù)據(jù)的合規(guī)使用。通過數(shù)據(jù)梳理識別敏感數(shù)據(jù),再通過實(shí)施相應(yīng)的數(shù)據(jù)安全處理技術(shù),例如數(shù)據(jù)加密/解密、數(shù)據(jù)脫敏/脫密、數(shù)據(jù)安全傳輸、數(shù)據(jù)訪問控制、數(shù)據(jù)分級授權(quán)等手段,實(shí)現(xiàn)數(shù)據(jù)的安全防護(hù)和使用合規(guī)。
6、賦能管理決策
有效的數(shù)據(jù)治理有利于提升數(shù)據(jù)分析和預(yù)測的準(zhǔn)確性,從而改善決策水平。良好的決策是基于經(jīng)驗(yàn)和事實(shí)的,不可靠的數(shù)據(jù)就意味著不可靠的決策。
數(shù)據(jù)中臺VS數(shù)據(jù)治理
雖然我們已經(jīng)從價(jià)值維度理解了數(shù)據(jù)治理對組織的作用,但治理最終要落地,離不開平臺能力的支撐。比如在實(shí)際建設(shè)中,“中臺”和“治理”經(jīng)常同時(shí)出現(xiàn)。我們可以從“相同點(diǎn)”“不同點(diǎn)”和“協(xié)同關(guān)系”三個(gè)角度來理解它們的本質(zhì)差異與配合方式:
1、相同點(diǎn):企業(yè)級的數(shù)據(jù)體系
無論是數(shù)據(jù)治理,還是數(shù)據(jù)中臺,本質(zhì)上都是為了讓數(shù)據(jù)真正“用得上、用得好”。它們共同具備的特征包括:覆蓋面廣,涉及數(shù)據(jù)倉庫、數(shù)據(jù)集成、數(shù)據(jù)安全、ETL等多個(gè)環(huán)節(jié),都強(qiáng)調(diào)全局視角,是企業(yè)級別的能力體系,不是哪個(gè)部門的單兵作戰(zhàn)都需要制度、技術(shù)與平臺的協(xié)同建設(shè)。
2、不同點(diǎn):價(jià)值不同
數(shù)據(jù)中臺并不僅僅是數(shù)據(jù)治理工作的放大升級版,而是數(shù)據(jù)治理工作的深化,它強(qiáng)化了數(shù)據(jù)治理的深度和廣度,并拓展了數(shù)據(jù)治理不涉及的數(shù)據(jù)應(yīng)用領(lǐng)域。應(yīng)該說,數(shù)據(jù)中臺真正實(shí)現(xiàn)了組織內(nèi)部數(shù)據(jù)的閉環(huán)。
從價(jià)值層面來看,數(shù)據(jù)中臺的價(jià)值在于業(yè)務(wù)數(shù)據(jù)化、數(shù)據(jù)資產(chǎn)化、資產(chǎn)服務(wù)化和服務(wù)業(yè)務(wù)化。而數(shù)據(jù)治理則是實(shí)現(xiàn)數(shù)據(jù)資產(chǎn)化的重要步驟。
3、協(xié)同關(guān)系
數(shù)據(jù)治理不是數(shù)據(jù)平臺的附件,而是數(shù)據(jù)中臺建設(shè)的一個(gè)重要組成部分。數(shù)據(jù)治理,在消除數(shù)據(jù)孤島、提高數(shù)據(jù)質(zhì)量、保障數(shù)據(jù)安全等方面,支撐中臺數(shù)據(jù)的可見、可用、可運(yùn)營。
即便很多人認(rèn)為中臺戰(zhàn)略已經(jīng)“過時(shí)”,但如果組織已經(jīng)構(gòu)建起自己的服務(wù)共享平臺和數(shù)據(jù)資產(chǎn)庫,能夠支撐業(yè)務(wù)系統(tǒng)快速復(fù)用與靈活組合,那么它依然是一個(gè)具備實(shí)際價(jià)值的數(shù)據(jù)中臺。
中臺思想本身沒有錯(cuò),關(guān)鍵點(diǎn)還是在于業(yè)務(wù)如何變革,業(yè)務(wù)和IT如何協(xié)同去推動中臺規(guī)劃和建設(shè)。所以,即使沒有完善的數(shù)據(jù)中臺,數(shù)據(jù)治理依然可以獨(dú)立發(fā)揮作用。
說到底,數(shù)據(jù)治理的目的不是建平臺,而是讓數(shù)據(jù)真正“能用、敢用、好用”。這是一項(xiàng)組織級的系統(tǒng)性工作,需要管理層統(tǒng)一指揮、各部門協(xié)同參與、從具體業(yè)務(wù)場景出發(fā)持續(xù)推進(jìn),才能真正實(shí)現(xiàn)數(shù)據(jù)能力的落地與釋放。
特別聲明:智慧醫(yī)療網(wǎng)轉(zhuǎn)載其他網(wǎng)站內(nèi)容,出于傳遞更多信息而非盈利之目的,同時(shí)并不代表贊成其觀點(diǎn)或證實(shí)其描述,內(nèi)容僅供參考。版權(quán)歸原作者所有,若有侵權(quán),請聯(lián)系我們刪除。
凡來源注明智慧醫(yī)療網(wǎng)的內(nèi)容為智慧醫(yī)療網(wǎng)原創(chuàng),轉(zhuǎn)載需獲授權(quán)。
智慧醫(yī)療網(wǎng) ? 2022 版權(quán)所有 ICP備案號:滬ICP備17004559號-5