轉載本文需註明出處:微信公衆號EAWorld,違者必究。數據庫
當今時代,經濟、政治和文化三者之間的交融日益緊密。一位哲學家曾經說過,「經濟是骨骼,政治是血肉,文化是靈魂」,可見文化已經成爲國家核心競爭力的重要因素。
微信
國學經典做爲中華民族五千年燦爛文化的精髓,對現代企業的管理有着重要的意義。一直以來將國學經典與現代企業管理聯繫起來的學術研究和專著層出不窮,那麼,又有哪些對數據治理具備指導性意義呢?網絡
目錄:架構
1、爲何要作大數據治理?框架
2、大數據治理須要注意什麼?微服務
3、如何實現數據治理自動化?工具
4、總結大數據
1、爲何要作大數據治理?spa
「不知諸侯之謀者,不能豫交;不知山林、險阻、沮澤之形者,不能行軍。」若是不知道各諸侯國的政治意圖,就不能與之結交。若是不是對全部的地形都很是清楚,就不能行軍。.net
對於企業來講,建設大數據平臺也是同樣的道理,現現在不少企業對「地形」還不清楚,就盲目「行軍」,結果每每不容樂觀。企業建設大數據平臺,先要經過數據治理來摸清自身的數據狀況,多利用元數據管理工具來梳理企業數據,在數據梳理好的基礎上再進行大數據相關的建設是必要的。
2、大數據治理須要注意什麼?
一、水因地而制流,兵因敵而制勝
正如水流順應地勢的不一樣而產生不一樣的流向,做戰也要根據敵人的狀況而制定合適的策略。企業在進行大數據治理建設時,要創建符合自身狀況的數據治理規劃。不少企業急於求成,直接照搬知名公司的數據治理框架就開始着手數據治理建設,最終由於數據治理戰略和自身業務不匹配,項目很難進行下去,極少數能進行到最後的項目也收效甚微。
二、善戰者,求之於勢,不責於人,故能擇人而任勢
好的將領,應該把重點放運用形勢上,而不是去苛求手下的將吏。企業要儘可能在不打擾員工本職工做的狀況下進行數據治理建設,要順勢而爲,不要把重點放在對人的管控。曾在幾年前,普元就提出了「數據治理應該成爲全企業的數據工做環境」這一觀點。讓全部的員工都經過數據治理平臺來進行與數據相關的操做,能讓員工在作好本職工做的同時,天然而然地就把作數據治理作好,反過來還能增長員工參與數據治理的積極性。
三、百發失一,不足謂善射;千里蹞步不至,不足謂善御
百支箭中有一支不中靶,就不能算是善射;馬行千里,只差半步而沒能走完,這也不能算是善駕。要想完全解決數據問題,須要管理好數據的全生命週期。如今企業的廣泛問題是隻管理上線之後的數據,這並不能從根本上解決數據問題,其實數據治理應該從需求階段就開始了,要管理好整個數據的生命週期,在事前系統化、流程化地保證規範的落地,在過後經過數據檢核,查漏補缺,以此來實現數據的全方位管控。
3、如何實現數據治理自動化?
「亮性長於巧思,損益連弩,木牛流馬,皆出其意。損益連弩謂之元戎,以鐵爲矢,矢長八寸,一弩十矢俱發。」在三國鼎立時期,形勢逼迫蜀漢必須造出先進的武器以抵禦較強大的敵人。諸葛意識到若是能發明出一弩多矢的武器,將會大大提高軍隊戰鬥力,「元戎弩」就此誕生。魏末晉初的著名思想家傅玄曾評價其「國之精器,軍之要用也。」可見自動化工具早已深刻人心。
(圖片來源於網絡)
實現數據治理自動化,要善於利用自動化和準確率高的數據治理工具,不然,企業會付出不少人力成本,效果也難以獲得保證。舉個例子,報表和指標的採集是數據治理一定會涉及到的內容,若不能經過工具對其進行自動化採集,或者自動化採集的結果準確率低,那麼部分報表就須要徹底靠手工整理,將會帶來過大的工做量,出錯率極高。
自動化程度高的數據治理工具至少應該能在如下幾個方面給企業提供幫助:
自動實現數據模型變動的協調統一
自動構建數據地圖
自動規範系統數據模型,保證與數據標準的一致性
一、自動實現數據模型變動的協調統一,統一對數據模型的認知
「言不相聞,故爲金鼓;視不相見,故爲旌旗。夫金鼓旌旗者,因此一人之耳目也。」在戰場上聽不清用來指揮的話語,因此設置了金鼓;看不見用來指揮的動做,因此都用旌旗。有了金鼓、旌旗,才能統一士兵的視聽,統一做戰行動。
在戰場上,在做戰方針發生變化時還可以保證軍隊的協調一致是相當重要的。對於企業來講,數據治理工具也須要像金鼓旌旗同樣,在數據特別是數據模型發生變動時,讓全部人員都能借助工具在第一時間知曉數據變動的狀況,保證數據模型變動的協調統一。
二、自動構建數據地圖,全方位展現企業數據資產
《左傳》中有:「惜夏方有德也,遠方圖物,貢金九牧,鑄鼎像物,百物而爲之備,使民知神奸」。意思是說,在夏朝,遠方的人把各類事物畫成圖,把圖和一些金屬看成禮品獻給夏禹,禹後來把這些畫鑄在了鼎上,以便百姓能從這些圖畫中辨別各類事物。
一圖勝千言,對企業來講,構建企業級數據地圖是全面掌控企業數據架構的一種有效方法,而有了元數據管理工具,構建數據地圖也會變得很是簡單。經過元數據管理工具自動採集技術元數據和業務元數據,經過天然語言處理等方法,對政策、法規、需求、數據庫comments、界面等多種來源進行分析,自動化創建起企業知識圖譜,能爲企業提供從多種角度認識數據的能力。
三、自動規範系統數據模型,保證與數據標準的一致性
「樣式房之差,五行八做之首,案規矩、例制之法繪圖、燙樣,…更改由上意。」
古代建築工程從選址、規劃、設計到施工,都有縝密的運做程序,其中樣「樣式房」最具專業地位,要按照工業標準來設計圖紙和製做燙樣(根據圖紙的尺寸式樣,按比例作成的立體模型),是否更改要遵從皇帝的意思,經皇帝欽准以後才能夠進入施工程序。
(圖片來源:國家地理中文網)
圖紙與燙樣的製做要嚴格遵守標準來,最終還要通過皇帝的審覈。企業在作系統開發時也同樣,保證數據模型與數據標準相一致在整個開發過程當中相當重要,企業在數據模型設計好以後,能夠將模型提交給數據治理工具審覈,工具自動分析模型中的依賴關係、主外鍵關係等,自動檢驗模型與數據標準的一致性,還能夠檢驗開發態、生產態等多種狀態之間的一致性,一致性校驗經過後才能進行後續操做,經過此種方式,嚴格控制數據標準的落地。
4、總結
目前,建設大數據平臺是很多企業發掘大數據業務價值的發力點,但在不知道企業數據有哪些,都在哪裏,數據之間的關係是什麼的狀況下,貿然建設大數據平臺是很是冒險的行爲,建議企業建設大數據平臺以前,先把數據治理好。
數據治理要講究方式方法,制定知足自身需求的數據治理計劃,管理數據的全生命週期,要讓數據治理成爲全企業的工做環境,而不是一味地對人進行管控。
自動化是數據治理成敗的主要因素,普元自動化的數據治理工具,能幫助企業自動檢核數據質量問題、自動構建數據知識圖譜、自動規範系統數據模型、自動監測數據質量問題、自動實現數據模型的變動,想了解關於普元自動化數據治理的更多案例,歡迎持續關注咱們。
參考文獻:
[1] 駢宇騫, 王建宇, 牟虹, 郝小剛. 孫子兵法[M]. 北京:中華書局, 2007.
[2] 王軒.建設大數據平臺,從「治理」數據談起[EB/OL], 2017-06-23/2017-10-13.
[3] 方勇. 孟子[M]. 北京:中華書局, 2015. 105-106
[4] 郭丹, 程小青, 李彬源. 左傳(全三冊)[M]. 北京:中華書局, 2012. 202-203
[5] 王其亨,Li Yingchun. 清代樣式雷建築圖檔中的平格研究——中國傳統建築設計理念與方法的經典範例[J]. 建築遺產,2016,(01):24-33.
關於做者
龔菲
畢業於中南大學,負責數據治理產品研究與推廣,尤爲是對元數據相關理論與業界產品有深刻了解,擅長業務元數據管理、本體構建等元數據相關領域知識,編寫了一系列數據治理相關文章。
關於EAWorld
微服務,DevOps,元數據,企業架構原創技術分享,EAii(Enterprise Architecture Innovation Institute)企業架構創新研究院旗下官方微信公衆號。
微信號:eaworld,長按二維碼關注
10月-11月,PWorld系列技術趴還將繼續上演。目前,10月28日將在北京舉行PWorld MeetUP「移動平臺新技術發展新趨勢及企業實踐」已啓動報名,戳「閱讀原文」可直達報名頁面,並瞭解更多詳情~
本文分享自微信公衆號 - EAWorld(eaworld)。
若有侵權,請聯繫 support@oschina.cn 刪除。
本文參與「OSC源創計劃」,歡迎正在閱讀的你也加入,一塊兒分享。