企業(yè)數(shù)據(jù)治理的七個(gè)工具

　　前言：正所謂：“工欲善其事，必先利其器!”，一套好的數(shù)據(jù)治理工具，能讓企業(yè)的數(shù)據(jù)治理工作事半功倍。數(shù)據(jù)治理本質(zhì)是盤點(diǎn)數(shù)據(jù)資產(chǎn)、治理數(shù)據(jù)質(zhì)量，實(shí)施數(shù)據(jù)全生命周期的管理，根據(jù)不同的項(xiàng)目特點(diǎn)，會(huì)用到不同的技術(shù)或工具，一般來說，數(shù)據(jù)治理產(chǎn)品或工具主要包含以下組件：數(shù)據(jù)模型管理、元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量管理、數(shù)據(jù)標(biāo)準(zhǔn)管理、主數(shù)據(jù)管理、數(shù)據(jù)安全管理、數(shù)據(jù)服務(wù)平臺(tái)。

　　數(shù)據(jù)治理產(chǎn)品中的七個(gè)工具或組件，都各有自己的特點(diǎn)和使命，在企業(yè)的數(shù)據(jù)治理中都有著不同的功能側(cè)重，但是解決問題的目標(biāo)是一致的——提升數(shù)據(jù)質(zhì)量。這讓我不由聯(lián)想到的是那部經(jīng)典的電影《七劍下天山》，數(shù)據(jù)治理的七個(gè)工具就如同電影中的七把利劍，它們的打造材料、工藝、對(duì)使用者的要求都各不相同，在執(zhí)行任務(wù)中需要各盡其職，同時(shí)又需要緊密協(xié)同。想想看，數(shù)據(jù)治理中的七個(gè)工具，何嘗不是這樣呢?

　　天瀑劍(數(shù)據(jù)標(biāo)準(zhǔn))：一把雙頭劍，忽攻忽守，用劍者必須很專一，是一把表現(xiàn)“紀(jì)律”的劍。

　　莫問劍(數(shù)據(jù)安全)：劍身是烏黑的，長(zhǎng)兼富彈性，變化無窮，招式變幻難測(cè)。心法重劍略，有劍氣，輕易不殺，使用者需智能與內(nèi)涵。

　　游龍劍(元數(shù)據(jù))：無堅(jiān)不摧，一劍既出，眾劍稱臣，是最高攻擊的武器。

　　青干劍(主數(shù)據(jù))：奇鈍無比，非極鋒利，可抵擋天下最鋒利的武器，可克制“游龍”，是最好防守兵器。

　　競(jìng)星劍(數(shù)據(jù)模型)：短身，藏于衣服之內(nèi)，在電光火石之間，出劍神速，迅雷不可目睹。

　　日月劍(數(shù)據(jù)質(zhì)量)：兩把相連的子母劍，時(shí)而雙劍，時(shí)而成一體，攻擊范圍可大可小。

　　舍神劍(數(shù)據(jù)服務(wù))：是一把開山辟石的大劍。使者攻勢(shì)力大無窮，鈍重有力，是一把求生的劍，代表重生，純樸，恒心。

　　一、競(jìng)星劍：數(shù)據(jù)模型管理

　　數(shù)據(jù)模型管理工具猶如“競(jìng)星劍”，短身，藏于衣服之內(nèi)，在電光火石之間，出劍神速，迅雷不可目睹。在企業(yè)信息化建設(shè)過程中，數(shù)據(jù)模型“藏”于數(shù)據(jù)庫(kù)底層，對(duì)業(yè)務(wù)人員和管理人員是無感的，所以往往被忽視。但是數(shù)據(jù)模型卻是企業(yè)數(shù)據(jù)治理中最核心的一把利劍。數(shù)據(jù)模型對(duì)上是承載數(shù)據(jù)業(yè)務(wù)需求的元數(shù)據(jù)，對(duì)下是數(shù)據(jù)標(biāo)準(zhǔn)管理的內(nèi)容，同時(shí)，是數(shù)據(jù)質(zhì)量指標(biāo)和規(guī)則定義的起點(diǎn)，是主數(shù)據(jù)和參照數(shù)據(jù)設(shè)計(jì)的根本，是數(shù)據(jù)倉(cāng)庫(kù)和BI的核心，也是數(shù)據(jù)安全管控的對(duì)象。數(shù)據(jù)模型管理平臺(tái)從功能上，主要包括：可視化建模、模型版本管理、數(shù)據(jù)模型管理、數(shù)據(jù)模型查詢、數(shù)據(jù)模型瀏覽、數(shù)據(jù)模型分析等。

　　可視化建模。提供的可視化的前臺(tái)建模能力，支持企業(yè)級(jí)數(shù)據(jù)模型的構(gòu)建，數(shù)據(jù)可視化建模一般支持oracle、MySQL、SQLserver、HIVE、Hbase等數(shù)據(jù)庫(kù)類型，優(yōu)秀的模型管理平臺(tái)支持?jǐn)?shù)據(jù)倉(cāng)庫(kù)或業(yè)務(wù)系統(tǒng)的正向建模，同時(shí)支持將企業(yè)現(xiàn)有系統(tǒng)數(shù)據(jù)模型反向采集。

　　模型版本管理。支持模型變更和版本的管理，支持版本的回溯，版本明細(xì)信息查詢。

　　數(shù)據(jù)模型管理。支持模型導(dǎo)入功能，對(duì)于采用PowerDesigner、Erwin、Excle等模型設(shè)計(jì)工具設(shè)計(jì)的模型能夠?qū)�入到模型管理平臺(tái)中來，并提供模型的可視化修改、模型導(dǎo)出、模型刪除等功能。

　　數(shù)據(jù)模型查詢。支持?jǐn)?shù)據(jù)模型查詢，通過輸入關(guān)鍵字可以查詢到指定的數(shù)據(jù)模型。

　　數(shù)據(jù)模型瀏覽。支持?jǐn)?shù)據(jù)模型全景視圖，能夠直觀看到企業(yè)數(shù)據(jù)的分布地圖，并支持通過模型下鉆功能進(jìn)行模型的逐級(jí)查詢，直到查詢的模型的最深層級(jí)的元數(shù)據(jù)。

　　數(shù)據(jù)模型分析。主要提供模型的對(duì)比分析功能，這種對(duì)比分析可以是兩個(gè)不同模型之間也可以是統(tǒng)一模型的不同版本之間的對(duì)比分析。通過模型的對(duì)比分析，能夠輕松找到模型之間的差異，支持由模型驅(qū)動(dòng)的影響分析。

　　二、游龍劍：元數(shù)據(jù)管理

　　元數(shù)據(jù)管理工具猶如“游龍劍”，一劍既出，眾劍稱臣。元數(shù)據(jù)管理統(tǒng)一管控分布在企業(yè)各個(gè)角落的數(shù)據(jù)資源，企業(yè)涉及的業(yè)務(wù)元數(shù)據(jù)、技術(shù)元數(shù)據(jù)、管理元數(shù)據(jù)都是其管理的范疇，按照科學(xué)、有效的機(jī)制對(duì)元數(shù)據(jù)進(jìn)行管理，并面向開發(fā)人員、最終用戶提供元數(shù)據(jù)服務(wù)，以滿足用戶的業(yè)務(wù)需求，對(duì)企業(yè)業(yè)務(wù)系統(tǒng)和數(shù)據(jù)分析平臺(tái)的開發(fā)、維護(hù)過程提供支持。元數(shù)據(jù)管理是企業(yè)數(shù)據(jù)治理的基礎(chǔ)，把它比作“游龍劍”并不為過。

　　元數(shù)據(jù)管理平臺(tái)從功能上，主要包括：元數(shù)據(jù)采集服務(wù)，應(yīng)用開發(fā)支持服務(wù)，元數(shù)據(jù)訪問服務(wù)、元數(shù)據(jù)管理服務(wù)和元數(shù)據(jù)分析服務(wù)。

　　請(qǐng)參考：《數(shù)據(jù)治理系列2：元數(shù)據(jù)管理【深度解析】》

　　元數(shù)據(jù)采集服務(wù)。元數(shù)據(jù)采集服務(wù)提供各類適配器滿足以上各類元數(shù)據(jù)的采集，并將元數(shù)據(jù)整合處理后統(tǒng)一存儲(chǔ)于中央元數(shù)據(jù)倉(cāng)庫(kù)，實(shí)現(xiàn)元數(shù)據(jù)的統(tǒng)一管理。這個(gè)過程中，數(shù)據(jù)采集適配器十分重要，元數(shù)據(jù)采集要能夠適配各種DB、各類ETL、各類DW和Report產(chǎn)品，同時(shí)還需要適配各類結(jié)構(gòu)化或半結(jié)構(gòu)化數(shù)據(jù)源。

　　元數(shù)據(jù)管理服務(wù)。市場(chǎng)上主流的元數(shù)據(jù)管理產(chǎn)品，基本都包括元數(shù)據(jù)查詢、元模型管理、元數(shù)據(jù)維護(hù)、元數(shù)據(jù)版本管理、元數(shù)據(jù)對(duì)比分析、元數(shù)據(jù)適配器、元數(shù)據(jù)同步管理、元數(shù)據(jù)生命周期管理等功能。

　　元數(shù)據(jù)訪問服務(wù)。元數(shù)據(jù)訪問服務(wù)是元數(shù)據(jù)管理軟件提供的元數(shù)據(jù)訪問的接口服務(wù)，一般支持REST或Webservice等接口協(xié)議。通過元數(shù)據(jù)訪問服務(wù)支持企業(yè)元數(shù)據(jù)的共享，是企業(yè)數(shù)據(jù)治理的基礎(chǔ)。

　　元數(shù)據(jù)分析服務(wù)。

　　血緣分析：告訴你數(shù)據(jù)來自哪里，都經(jīng)過了哪些加工。

　　影響分析：告訴你數(shù)據(jù)都去了哪里，經(jīng)過了哪些加工。

　　冷熱度分析：告訴你哪些數(shù)據(jù)是企業(yè)常用數(shù)據(jù)，哪些數(shù)據(jù)屬于僵死數(shù)據(jù)。

　　關(guān)聯(lián)度分析：告訴你數(shù)據(jù)和其他數(shù)據(jù)的關(guān)系以及它們的關(guān)系是怎樣建立的。

　　數(shù)據(jù)資產(chǎn)地圖：告訴你有哪些數(shù)據(jù)，在哪里可以找到這些數(shù)據(jù)，能用這些數(shù)據(jù)干什么。

　　三、日月劍：數(shù)據(jù)質(zhì)量管理

　　數(shù)據(jù)質(zhì)量管理工具猶如“日月劍”，是兩把相連的子母劍，時(shí)而雙劍，時(shí)而成一體，攻擊范圍可大可小。數(shù)據(jù)質(zhì)量管理工具在不同的數(shù)據(jù)治理項(xiàng)目中有時(shí)會(huì)被單獨(dú)使用，有時(shí)配合元數(shù)據(jù)使用、有時(shí)又與主數(shù)據(jù)搭檔。在管理范圍上，往往會(huì)根據(jù)項(xiàng)目的需求、客戶的目標(biāo)進(jìn)行控制，可以是企業(yè)級(jí)的全域數(shù)據(jù)質(zhì)量管理，也可以針對(duì)某一特定業(yè)務(wù)領(lǐng)域進(jìn)行數(shù)據(jù)質(zhì)量管理的實(shí)施。

　　數(shù)據(jù)質(zhì)量管理工具從功能上，主要包括：數(shù)據(jù)質(zhì)量指標(biāo)管理、數(shù)據(jù)質(zhì)量規(guī)則管理、數(shù)據(jù)質(zhì)量評(píng)估任務(wù)、數(shù)據(jù)質(zhì)量評(píng)估報(bào)告。

　　請(qǐng)參考：《數(shù)據(jù)治理系列5：數(shù)據(jù)質(zhì)量管理的正確打開方式》

　　數(shù)據(jù)質(zhì)量指標(biāo)管理。通過對(duì)不同業(yè)務(wù)規(guī)則的收集、分類、抽象和概括，定義數(shù)據(jù)質(zhì)量維度，這里給出了六種，分別是：數(shù)據(jù)唯一性、數(shù)據(jù)一致性、數(shù)據(jù)準(zhǔn)確性、數(shù)據(jù)關(guān)聯(lián)性、數(shù)據(jù)完整性、數(shù)據(jù)及時(shí)性。質(zhì)量指標(biāo)反映了數(shù)據(jù)質(zhì)量不同的規(guī)格標(biāo)準(zhǔn)，也體現(xiàn)了高層次的指標(biāo)度量的特點(diǎn)。

　　數(shù)據(jù)治理規(guī)則管理。一個(gè)數(shù)據(jù)質(zhì)量規(guī)則包含了數(shù)據(jù)的評(píng)估對(duì)象，評(píng)估指標(biāo)、權(quán)重和期望值等。質(zhì)量規(guī)則是由業(yè)務(wù)人員根據(jù)各檢核類別對(duì)不同的業(yè)務(wù)實(shí)體提出的數(shù)據(jù)質(zhì)量的衡量標(biāo)準(zhǔn)。它是各檢核類別在不同業(yè)務(wù)實(shí)體上的具體體現(xiàn)。

　　數(shù)據(jù)質(zhì)量檢核任務(wù)。檢核任務(wù)調(diào)度模塊是數(shù)據(jù)質(zhì)量平臺(tái)的核心，通過執(zhí)行檢核方法生成相應(yīng)的檢核結(jié)果問題數(shù)據(jù)文件，檢核結(jié)果問題數(shù)據(jù)能夠反映出用戶所關(guān)心的數(shù)據(jù)質(zhì)量問題。

　　數(shù)據(jù)質(zhì)量分析報(bào)告。數(shù)據(jù)質(zhì)量報(bào)告提供了一個(gè)集中展示數(shù)據(jù)質(zhì)量狀況的窗口，相關(guān)人員可以對(duì)數(shù)據(jù)質(zhì)量問題進(jìn)行查詢、統(tǒng)計(jì)、分析，找到引起數(shù)據(jù)質(zhì)量問題的根因，并付諸行動(dòng)，從源頭上解決數(shù)據(jù)質(zhì)量的根本問題，實(shí)現(xiàn)數(shù)據(jù)質(zhì)量的閉環(huán)。

　　四、天瀑劍：數(shù)據(jù)標(biāo)準(zhǔn)管理

　　數(shù)據(jù)標(biāo)準(zhǔn)管理工具猶如“天瀑劍”，是一把雙頭劍，用劍者必須很專一，是一把表現(xiàn)“紀(jì)律”的劍。數(shù)據(jù)標(biāo)準(zhǔn)從字面上理解就是數(shù)據(jù)既定的“規(guī)則”，這個(gè)規(guī)則一旦定義，就需要必須執(zhí)行。數(shù)據(jù)標(biāo)準(zhǔn)化就是研究、制定和推廣應(yīng)用統(tǒng)一的數(shù)據(jù)分類分級(jí)、記錄格式及轉(zhuǎn)換、編碼等技術(shù)標(biāo)準(zhǔn)的過程。從管理的對(duì)象上來看，數(shù)據(jù)標(biāo)準(zhǔn)主要包含三個(gè)方面的標(biāo)準(zhǔn)：數(shù)據(jù)模型標(biāo)準(zhǔn)、即元數(shù)據(jù)的標(biāo)準(zhǔn)化;主數(shù)據(jù)和參照數(shù)據(jù)標(biāo)準(zhǔn);指標(biāo)數(shù)據(jù)標(biāo)準(zhǔn)，如指標(biāo)的統(tǒng)計(jì)維度、計(jì)算方式、分析規(guī)則等。數(shù)據(jù)標(biāo)準(zhǔn)管理工具，從功能層面主要包括：數(shù)據(jù)標(biāo)準(zhǔn)編制、數(shù)據(jù)標(biāo)準(zhǔn)審批、數(shù)據(jù)標(biāo)準(zhǔn)發(fā)布、數(shù)據(jù)標(biāo)準(zhǔn)使用。

　　請(qǐng)參考《數(shù)據(jù)治理系列3：數(shù)據(jù)標(biāo)準(zhǔn)管理》

　　數(shù)據(jù)標(biāo)準(zhǔn)編制。根據(jù)企業(yè)業(yè)務(wù)進(jìn)行管控?cái)?shù)據(jù)項(xiàng)的劃分，確定數(shù)據(jù)項(xiàng)的名稱、編碼、類型、長(zhǎng)度、業(yè)務(wù)含義、數(shù)據(jù)來源、質(zhì)量規(guī)則、安全級(jí)別、域值范圍等。數(shù)據(jù)標(biāo)準(zhǔn)可以參考國(guó)際、國(guó)家或行業(yè)標(biāo)準(zhǔn)的現(xiàn)行標(biāo)準(zhǔn)進(jìn)行制定，也可以根據(jù)企業(yè)業(yè)務(wù)制定特定的企業(yè)級(jí)數(shù)據(jù)標(biāo)準(zhǔn)。

　　數(shù)據(jù)標(biāo)準(zhǔn)審查。對(duì)數(shù)據(jù)標(biāo)準(zhǔn)初稿進(jìn)行審查，判斷數(shù)據(jù)標(biāo)準(zhǔn)是否符合企業(yè)的應(yīng)用和管理需求，是否符合企業(yè)數(shù)據(jù)戰(zhàn)略要求

　　數(shù)據(jù)標(biāo)準(zhǔn)發(fā)布。數(shù)據(jù)標(biāo)準(zhǔn)一經(jīng)發(fā)布各部門、各業(yè)務(wù)系統(tǒng)都需要按相應(yīng)的標(biāo)準(zhǔn)進(jìn)行執(zhí)行，對(duì)于遺留系統(tǒng)會(huì)存在一定的風(fēng)險(xiǎn)。標(biāo)準(zhǔn)發(fā)布的過程需要對(duì)現(xiàn)有應(yīng)用系統(tǒng)、數(shù)據(jù)模型的影響進(jìn)行評(píng)估，并做好相應(yīng)的應(yīng)對(duì)策略。

　　數(shù)據(jù)標(biāo)準(zhǔn)貫徹。把已定義的數(shù)據(jù)標(biāo)準(zhǔn)與業(yè)務(wù)系統(tǒng)、應(yīng)用和服務(wù)進(jìn)行映射，標(biāo)明標(biāo)準(zhǔn)和現(xiàn)狀的關(guān)系以及可能影響到的應(yīng)用。該過程中，對(duì)于企業(yè)新建的系統(tǒng)應(yīng)當(dāng)直接應(yīng)用定義好的數(shù)據(jù)標(biāo)準(zhǔn)，對(duì)于舊系統(tǒng)應(yīng)對(duì)一般建議建了相應(yīng)的數(shù)據(jù)映射關(guān)系，進(jìn)行數(shù)據(jù)轉(zhuǎn)換，逐步進(jìn)行數(shù)據(jù)標(biāo)準(zhǔn)的落地。

　　五、青干劍：主數(shù)據(jù)管理

　　主數(shù)據(jù)管理工具猶如“青干劍”，奇鈍無比，非常鋒利，是最好防守兵器。主數(shù)據(jù)是企業(yè)最基礎(chǔ)、最核心的數(shù)據(jù)，企業(yè)的一切業(yè)務(wù)基本都是基于主數(shù)據(jù)來開展的，是企業(yè)最重要的數(shù)據(jù)資產(chǎn)。如果大數(shù)據(jù)是一座礦山，主數(shù)據(jù)就是那礦山中的金子，通過主數(shù)據(jù)的解決各異構(gòu)系統(tǒng)的數(shù)據(jù)不標(biāo)準(zhǔn)、不一致問題，保障業(yè)務(wù)連貫性和數(shù)據(jù)的一致性、完整性和準(zhǔn)確性，提升業(yè)務(wù)線條之間的協(xié)同能力，同時(shí)，高質(zhì)量的主數(shù)據(jù)也為領(lǐng)導(dǎo)的管理決策提供了支撐。所以，主數(shù)據(jù)管理也是企業(yè)數(shù)據(jù)治理成為最核心部分。

　　主數(shù)據(jù)管理平臺(tái)從功能上主要包括：主數(shù)據(jù)模型、主數(shù)據(jù)編碼、主數(shù)據(jù)管理、主數(shù)據(jù)清洗、主數(shù)據(jù)質(zhì)量、主數(shù)據(jù)集成等。

　　對(duì)于如何建設(shè)主數(shù)據(jù)請(qǐng)參考《數(shù)據(jù)治理系列4：主數(shù)據(jù)管理四部曲》

　　主數(shù)據(jù)模型。提供主數(shù)據(jù)的建模功能，管理主數(shù)據(jù)的邏輯模型和物理模型以及各類主數(shù)據(jù)模板。

　　主數(shù)據(jù)編碼。編碼功能是主數(shù)據(jù)產(chǎn)品的初級(jí)形態(tài)，也是主數(shù)據(jù)產(chǎn)品的核心能力，支持各種形式主數(shù)據(jù)的編碼，提供數(shù)據(jù)編碼申請(qǐng)、審批、集成等服務(wù)。

　　主數(shù)據(jù)管理。主要提供主數(shù)據(jù)的增刪改查功能。

　　主數(shù)據(jù)清洗。主要包括主數(shù)據(jù)的采集、轉(zhuǎn)換、清理、裝載等功能。

　　主數(shù)據(jù)質(zhì)量。主要提供主數(shù)據(jù)質(zhì)量從質(zhì)量問題發(fā)現(xiàn)到質(zhì)量問題處理的閉環(huán)管理功能。

　　主數(shù)據(jù)集成。主要提供主數(shù)據(jù)采集和分發(fā)服務(wù)，完成與企業(yè)其他異構(gòu)系統(tǒng)的對(duì)接。當(dāng)然，談到集成就不得不說的一個(gè)重要工具，ESB(企業(yè)服務(wù)總線)，這個(gè)工具也是經(jīng)常會(huì)與主數(shù)據(jù)產(chǎn)品進(jìn)行配合在實(shí)現(xiàn)企業(yè)主數(shù)據(jù)治理的同時(shí)，解決企業(yè)異構(gòu)系統(tǒng)的集成問題。關(guān)于數(shù)據(jù)集成我們下次單獨(dú)再談，此處不再贅述。

　　六、莫問劍：數(shù)據(jù)安全管理

　　數(shù)據(jù)安全管理工具猶如“莫問劍”劍身是烏黑的，長(zhǎng)兼富彈性，招式變幻難測(cè)，重劍略，有劍氣，輕易不殺，使用者需智能與內(nèi)涵。數(shù)據(jù)安全規(guī)則會(huì)隨著不同行業(yè)、不同企業(yè)的需求不同而變換莫測(cè)，數(shù)據(jù)安全一般企業(yè)作為數(shù)據(jù)戰(zhàn)略的重要組成。“莫問劍”長(zhǎng)兼富彈性，帶有劍氣，不易操作，需要使用者的智能與內(nèi)涵。數(shù)據(jù)安全也一樣，在企業(yè)數(shù)據(jù)治理中，數(shù)據(jù)安全一般作為是企業(yè)數(shù)據(jù)治理的一道“紅線”，任何人、任何數(shù)據(jù)不可逾越。但是數(shù)據(jù)安全也不能隨意、輕易地使用，否則就會(huì)影響業(yè)務(wù)效率，安全和效率之間需要找到一個(gè)平衡點(diǎn)。

　　數(shù)據(jù)安全涵蓋了操作系統(tǒng)安全、網(wǎng)絡(luò)安全、數(shù)據(jù)庫(kù)安全、軟件應(yīng)用安全等。對(duì)于數(shù)據(jù)的安全治理，側(cè)重點(diǎn)是對(duì)于數(shù)據(jù)使用過程的控制，使得數(shù)據(jù)安全合法的進(jìn)行使用，所以管控的重點(diǎn)是在應(yīng)用上。從應(yīng)用上，數(shù)據(jù)安全的主要功能包括：身份認(rèn)證與訪問控制、數(shù)據(jù)合規(guī)性申請(qǐng)、數(shù)據(jù)分級(jí)與授權(quán)、數(shù)據(jù)脫敏/脫敏、數(shù)據(jù)加密、安全審計(jì)等。

　　身份認(rèn)證與訪問控制。身份認(rèn)證是為訪問控制提供支撐，訪問控制提供了不同身份用戶訪問不同信息資源提供了相應(yīng)的安全策略。身份認(rèn)證是在計(jì)算機(jī)及計(jì)算機(jī)網(wǎng)絡(luò)系統(tǒng)中確認(rèn)操作者身份的過程，確定用戶是否具有對(duì)某種資源的訪問和使用權(quán)限，防止攻擊者假冒合法用戶獲得資源的訪問權(quán)限，保證系統(tǒng)和數(shù)據(jù)的安全。常用身份認(rèn)證的技術(shù)包括：電子簽名(CA)、USB-key(智能卡)、靜態(tài)口令，動(dòng)態(tài)口令、短信密碼、人臉識(shí)別、指紋識(shí)別、虹膜識(shí)別、聲音識(shí)別等。

　　數(shù)據(jù)合規(guī)性申請(qǐng)。對(duì)于企業(yè)關(guān)鍵信息的創(chuàng)建和變更需要符合企業(yè)相關(guān)的數(shù)據(jù)管理流程，建立數(shù)據(jù)申請(qǐng)、審批制度，對(duì)新增的數(shù)據(jù)或變更的數(shù)據(jù)進(jìn)行合法性審批。

　　數(shù)據(jù)的分級(jí)與授權(quán)。根據(jù)數(shù)據(jù)的來源、內(nèi)容和用途對(duì)數(shù)據(jù)資產(chǎn)進(jìn)行分類，根據(jù)數(shù)據(jù)的價(jià)值、敏感程度、影響范圍進(jìn)行敏感分級(jí)，建立敏感分級(jí)數(shù)據(jù)與用戶角色的訪問控制矩陣，對(duì)不同等級(jí)的數(shù)據(jù)分配給相應(yīng)的用戶角色實(shí)現(xiàn)分級(jí)授權(quán)。

　　數(shù)據(jù)脫敏。簡(jiǎn)單的數(shù)據(jù)脫敏技術(shù)就是給數(shù)據(jù)打個(gè)“馬賽克”，脫敏的過程數(shù)據(jù)的含義保持不變、數(shù)據(jù)類型不變、數(shù)據(jù)的關(guān)系不變。

　　數(shù)據(jù)加密。數(shù)據(jù)加密技術(shù)是數(shù)據(jù)防竊取的一種安全防治技術(shù)，指將一個(gè)信息經(jīng)過加密鑰匙及加密函數(shù)轉(zhuǎn)換，變成無意義的密文，而接收方則將此密文經(jīng)過解密函數(shù)、解密鑰匙還原成明文。

　　安全審計(jì)。數(shù)據(jù)安全審計(jì)是通過記錄用戶對(duì)數(shù)據(jù)的所有訪問和操作記錄日志，并通過日志的分類統(tǒng)計(jì)和分析，提供數(shù)據(jù)訪問報(bào)表，支持對(duì)數(shù)據(jù)的檢索和分析，支持對(duì)用戶的違規(guī)訪問和危險(xiǎn)操作進(jìn)行告警。

　　七、舍神劍：數(shù)據(jù)服務(wù)平臺(tái)

　　數(shù)據(jù)服務(wù)平臺(tái)猶如“舍身劍”：是一把開山辟石的大劍，鈍重有力，是一把求生的劍，代表重生，純樸，恒心。數(shù)據(jù)服務(wù)平臺(tái)是數(shù)據(jù)治理的能力輸出平臺(tái)，持續(xù)的數(shù)據(jù)服務(wù)能力輸出，披荊斬棘，為前端的數(shù)據(jù)分析和數(shù)據(jù)應(yīng)用提供支撐。數(shù)據(jù)服務(wù)平臺(tái)在互聯(lián)網(wǎng)架構(gòu)下一般會(huì)基于統(tǒng)一的API網(wǎng)關(guān)進(jìn)行服務(wù)的統(tǒng)一接入，由統(tǒng)一網(wǎng)關(guān)對(duì)所有數(shù)據(jù)服務(wù)進(jìn)行調(diào)度、管理、編排、適配，應(yīng)適應(yīng)企業(yè)內(nèi)部的數(shù)據(jù)共享和企業(yè)外部的數(shù)據(jù)開放等需求。

　　數(shù)據(jù)服務(wù)平臺(tái)主要包括服務(wù)能力輸出和統(tǒng)一網(wǎng)關(guān)服務(wù)兩大部分，一部分是輸出數(shù)據(jù)服務(wù)能力，另一部分是通過統(tǒng)一的網(wǎng)關(guān)來管理這些能力。

　　能力輸出。數(shù)據(jù)治理平臺(tái)的主要輸出的數(shù)據(jù)服務(wù)能力包括：數(shù)據(jù)查詢服務(wù)、資源目錄服務(wù)、主數(shù)據(jù)服務(wù)、數(shù)據(jù)標(biāo)準(zhǔn)查詢服務(wù)、數(shù)據(jù)安全服務(wù)等，每一類數(shù)據(jù)服務(wù)都是由一組服務(wù)接口組成的。數(shù)據(jù)服務(wù)能力也可以根據(jù)業(yè)務(wù)主題進(jìn)行組織，形成主題服務(wù)。數(shù)據(jù)服務(wù)的量和質(zhì)量也是考驗(yàn)一個(gè)數(shù)據(jù)治理項(xiàng)目實(shí)施的一項(xiàng)重要指標(biāo)。

　　服務(wù)網(wǎng)關(guān)。嚴(yán)格意義上來說，服務(wù)網(wǎng)關(guān)也是一套獨(dú)立的工具，核心功能包括：服務(wù)的編排、注冊(cè)接入、流程控制、協(xié)議適配、安全防護(hù)等。傳統(tǒng)架構(gòu)中一般會(huì)以ESB——企業(yè)服務(wù)總線，作為服務(wù)網(wǎng)關(guān)來使用。在互聯(lián)網(wǎng)架構(gòu)下，ESB這種中心化的架構(gòu)對(duì)應(yīng)高并發(fā)的前臺(tái)應(yīng)用無法支撐，所以目前一般采用API網(wǎng)關(guān)，即API Gateway技術(shù)來替代傳統(tǒng)的ESB。API網(wǎng)關(guān)提供日志、安全、流量控制、熔斷、負(fù)載均衡、鑒權(quán)等功能插件。這些插件會(huì)隨著企業(yè)業(yè)務(wù)應(yīng)用規(guī)模等的變化進(jìn)行不斷的強(qiáng)化與調(diào)整，而不用頻繁對(duì)網(wǎng)關(guān)層進(jìn)行改動(dòng)，確保網(wǎng)關(guān)層的穩(wěn)定性。

　　八、傳說中七劍合璧就能召喚神龍

　　在一個(gè)大型的數(shù)據(jù)治理項(xiàng)目中，不是一項(xiàng)技術(shù)或工具就能搞定的，需要根據(jù)企業(yè)的需求采用不同產(chǎn)品和工具的組合。而當(dāng)我們將以上企業(yè)數(shù)據(jù)治理的七把利劍的相關(guān)核心能力組合起來以后，就形成了一個(gè)完整的數(shù)據(jù)治理平臺(tái)，而這個(gè)數(shù)據(jù)治理平臺(tái)與當(dāng)前流行的“數(shù)據(jù)中臺(tái)”不謀而合。這里，我們并不是因?yàn)閿?shù)據(jù)中臺(tái)的概念火，就將數(shù)據(jù)治理往中臺(tái)靠，而事實(shí)上，任何一個(gè)數(shù)據(jù)中臺(tái)，都離不開數(shù)據(jù)治理的各項(xiàng)能力。一個(gè)完整的數(shù)據(jù)中臺(tái)重點(diǎn)提供了數(shù)據(jù)的“采、管、存、用”四種能力，而數(shù)據(jù)治理工具就是提供了最核心的“管”數(shù)據(jù)的能力和一部分“采、存、用”數(shù)據(jù)的能力。

　　注：關(guān)于數(shù)據(jù)中臺(tái)的話題，不斷更新中……

　　1、《熱的發(fā)燙的「中臺(tái)」是什么?》

　　2、《數(shù)據(jù)中臺(tái)“熱”下的“冷思考”》

　　九、寫在最后

　　數(shù)據(jù)治理的各個(gè)工具在企業(yè)數(shù)據(jù)治理過程中各司其職，發(fā)揮著不同的作用，當(dāng)然，除了筆者以上列出的七個(gè)產(chǎn)品，在不同的項(xiàng)目可能還會(huì)用到企業(yè)的數(shù)據(jù)治理工具或技術(shù)，這里就不在一一羅列了。一個(gè)企業(yè)的數(shù)據(jù)治理項(xiàng)目的成功實(shí)施和持續(xù)見效，產(chǎn)品和工具很重要，但絕對(duì)不能以工具論。高瞻遠(yuǎn)矚的數(shù)據(jù)戰(zhàn)略，先進(jìn)的數(shù)據(jù)治理架構(gòu)，數(shù)據(jù)治理時(shí)機(jī)的把握，數(shù)據(jù)治理組織、文化和制度的保障以及建立長(zhǎng)效的運(yùn)營(yíng)機(jī)制缺一不可!而技術(shù)與工具只是支撐企業(yè)數(shù)據(jù)戰(zhàn)略、數(shù)據(jù)標(biāo)準(zhǔn)落地的工具而已。