數(shù)據(jù)治理系列之元數(shù)據(jù)管理平臺的原理

隨著大數(shù)據(jù)時代的到來，企業(yè)在日常業(yè)務(wù)運營中積累了大量的數(shù)據(jù)。如何從這些海量數(shù)據(jù)中挖掘出有價值的信息，已經(jīng)成為許多企業(yè)迫切需要解決的問題之一。隨著大數(shù)據(jù)平臺和因特網(wǎng)的興起，數(shù)據(jù)治理逐漸成為企業(yè)挖掘數(shù)據(jù)價值的重要手段和工具。理解數(shù)據(jù)治理這一概念可能會有些困難，但沒關(guān)系，一步一步來，今天我們了解一下數(shù)據(jù)治理的基礎(chǔ)——元數(shù)據(jù)管理。
?

一、什么是元數(shù)據(jù)管理？

在了解元數(shù)據(jù)管理之前，首先要了解元數(shù)據(jù)的定義。元數(shù)據(jù)主要記錄數(shù)據(jù)倉庫中模型的定義、各級之間的映射關(guān)系、數(shù)據(jù)倉庫的數(shù)據(jù)狀態(tài)和ETL的任務(wù)運行狀態(tài)。元數(shù)據(jù)管理是對數(shù)據(jù)采集、存儲、處理和顯示等數(shù)據(jù)生命周期的描述信息，幫助用戶理解數(shù)據(jù)關(guān)系和相關(guān)屬性。元數(shù)據(jù)管理是企業(yè)數(shù)據(jù)治理的基礎(chǔ)，是企業(yè)級數(shù)據(jù)倉庫的關(guān)鍵組成部分，貫穿于數(shù)據(jù)倉庫的整個生命周期，利用元數(shù)據(jù)帶動數(shù)據(jù)倉庫的發(fā)展，使數(shù)據(jù)倉庫自動化、可視化。

二、元數(shù)據(jù)管理平臺的功能

元數(shù)據(jù)管理平臺主要包括元數(shù)據(jù)采集服務(wù)、元數(shù)據(jù)訪問服務(wù)、元數(shù)據(jù)管理服務(wù)和元數(shù)據(jù)分析服務(wù)。

1、元數(shù)據(jù)采集服務(wù)：能夠適應(yīng)異構(gòu)環(huán)境，支持從傳統(tǒng)關(guān)系數(shù)據(jù)庫和大數(shù)據(jù)平臺中采集從數(shù)據(jù)生成系統(tǒng)到數(shù)據(jù)處理系統(tǒng)到數(shù)據(jù)應(yīng)用報表系統(tǒng)的全量元數(shù)據(jù)，包括過程中的數(shù)據(jù)實體和數(shù)據(jù)實體處理過程中的邏輯。

如思邁特軟件Smartbi數(shù)據(jù)管理平臺內(nèi)置多種采集適配器，支持多種存儲格式的元數(shù)據(jù)自動獲取，如：數(shù)據(jù)庫、報表工具、ETL工具、文件系統(tǒng)等。在信息管理方面，Smartbi可以管理系統(tǒng)中的元數(shù)據(jù)信息，包括表、字段、參數(shù)、業(yè)務(wù)主題、多維模型、查詢、儀表盤等信息管理。

2、元數(shù)據(jù)訪問服務(wù)：元數(shù)據(jù)訪問服務(wù)是元數(shù)據(jù)管理軟件提供的元數(shù)據(jù)訪問接口服務(wù)，一般支持REST或Webservice等接口協(xié)議。通過元數(shù)據(jù)訪問服務(wù)支持企業(yè)元數(shù)據(jù)共享，是企業(yè)數(shù)據(jù)治理的基礎(chǔ)。

3、元數(shù)據(jù)管理服務(wù)：實現(xiàn)元數(shù)據(jù)的模型定義和存儲，將功能層包裝成各種元數(shù)據(jù)功能，最終提供應(yīng)用和展示；提供元數(shù)據(jù)分類建模、血緣關(guān)系和影響分析，方便數(shù)據(jù)跟蹤和追溯。

4、元數(shù)據(jù)分析服務(wù)：元數(shù)據(jù)的應(yīng)用一般包括數(shù)據(jù)地圖、血緣、影響分析、全鏈分析等。

三、元數(shù)據(jù)管理平臺對企業(yè)運營的價值

元數(shù)據(jù)管理平臺為用戶提供高質(zhì)量、準確、易于管理的數(shù)據(jù)，貫穿于數(shù)據(jù)中心建設(shè)、運行和維護的整個生命周期。通過元數(shù)據(jù)管理，可以形成整個系統(tǒng)信息數(shù)據(jù)資本的準確視圖，縮短數(shù)據(jù)清理周期，提高數(shù)據(jù)質(zhì)量。元數(shù)據(jù)管理有利于統(tǒng)一數(shù)據(jù)口徑，標明數(shù)據(jù)方向，分析數(shù)據(jù)關(guān)系，管理數(shù)據(jù)變更，為企業(yè)級數(shù)據(jù)治理提供支持，是企業(yè)實現(xiàn)數(shù)據(jù)自我服務(wù)，促進企業(yè)數(shù)據(jù)運營的可行路線。

可見元數(shù)據(jù)管理對企業(yè)運營的重要性，當(dāng)然這一切都離不開元數(shù)據(jù)管理工具的推廣。萬丈高樓平地起，所以小伙伴們在進行數(shù)據(jù)治理工作時也一定不能忽視元數(shù)據(jù)管理工具的選擇喔，可以多嘗試一下再選擇。

? ? ? ? ymf

?