大數(shù)據(jù)、人工智能、移動互聯(lián)、云計算、物聯(lián)網(wǎng)等新一代信息技術(shù)的發(fā)展為企業(yè)數(shù)字化轉(zhuǎn)型提供了技術(shù)支撐。數(shù)字化轉(zhuǎn)型并不是對企業(yè)以往的信息化推倒重來，而是需要整合優(yōu)化以往的企業(yè)信息化系統(tǒng)，在整合優(yōu)化的基礎(chǔ)上，提升管理和運營水平，運用新的技術(shù)手段提升企業(yè)新的技術(shù)能力，以支撐企業(yè)適應(yīng)數(shù)字化轉(zhuǎn)型變化帶來的新要求。因此，該公眾號將相繼推出企業(yè)數(shù)字化轉(zhuǎn)型的關(guān)鍵技術(shù)與問題一系列推文，以期為目標企業(yè)數(shù)字化轉(zhuǎn)型提供借鑒性思路。
“企業(yè)數(shù)字化轉(zhuǎn)型的關(guān)鍵技術(shù)與問題”系列推文七：
企業(yè)數(shù)字化轉(zhuǎn)型的必由之路：數(shù)字治理
當(dāng)前，以云計算、大數(shù)據(jù)、人工智能等新興技術(shù)引領(lǐng)的新一代科技革命正在飛速開展，以此為契機數(shù)字技術(shù)正廣泛應(yīng)用于現(xiàn)代經(jīng)濟活動中，成為推動經(jīng)濟增長的重要途徑，產(chǎn)業(yè)數(shù)字化成為數(shù)字經(jīng)濟發(fā)展的重要組成部分。在2020年這個“十三五”規(guī)劃的收官之年與“十四五”規(guī)劃的謀劃之年，各行業(yè)紛紛圍繞“新基建”、“數(shù)字化轉(zhuǎn)型”進行全方位、戰(zhàn)略性布局。
什么是數(shù)字治理？
在大數(shù)據(jù)時代，數(shù)據(jù)治理對所有擁有大量數(shù)據(jù)的公司來說都是一個巨大的挑戰(zhàn)。沒有數(shù)據(jù)，公司就缺乏數(shù)據(jù)的支持來做決定。然而，隨著數(shù)據(jù)越來越多，在很多情況下也增加了數(shù)據(jù)管理的成本，這確實使數(shù)據(jù)產(chǎn)生了價值，但發(fā)現(xiàn)如何管理分散在不同地方的數(shù)據(jù)，并有效地將數(shù)據(jù)進行組織則成了一個令人頭疼的問題。
如果企業(yè)不能夠使用數(shù)據(jù)，那它就不是資產(chǎn)，而成為了成本。也正因為如此，數(shù)據(jù)治理和數(shù)據(jù)管理對企業(yè)來說變得越來越重要。
企業(yè)數(shù)據(jù)治理是一套持續(xù)改善的管理機制，通常包括組織架構(gòu)、政策制度、技術(shù)工具、數(shù)據(jù)標準、作業(yè)流程、監(jiān)督及考核等多個方面，涉及的IT技術(shù)主題眾多，包括數(shù)據(jù)體系、管理體系、平臺建設(shè)、數(shù)據(jù)管控等多個方面。
二、企業(yè)為什么要數(shù)字治理
即使一個公司有宏偉的愿景和雄心勃勃的目標，每個人也很難朝著同一個方向努力。大型而復(fù)雜的組織充滿了混亂。在開始實施戰(zhàn)略目標的時候，著眼于全局的領(lǐng)導(dǎo)者會集中精力把愿景變成現(xiàn)實，而不同意愿景的管理者會忽略它。一些部門行動太慢;一些部門在沒有充分考慮規(guī)章、安全、組織風(fēng)險的情況下，輕率行事，給企業(yè)帶來風(fēng)險;有些部門會把資源浪費在重復(fù)甚至相互矛盾的任務(wù)上。
數(shù)字化治理可以確保企業(yè)在正確的方向上采取行動，將所有員工的各種想法匯聚成協(xié)調(diào)一致的驅(qū)動力，帶動數(shù)字化轉(zhuǎn)型愿景的落地實施。
適當(dāng)?shù)臄?shù)字治理不僅可以防范風(fēng)險，還可以激發(fā)新的數(shù)字能力。移動電話應(yīng)用程序、協(xié)作網(wǎng)絡(luò)、互聯(lián)產(chǎn)品和社交媒體等技術(shù)為營銷、制造和用戶服務(wù)帶來了新的機遇。由于用戶和員工的雙重需求，業(yè)務(wù)周期變得越來越快。治理能力可以幫助公司更快地實現(xiàn)新的解決方案，處理安全問題、遵從性問題和傳統(tǒng)的系統(tǒng)集成問題;幫助企業(yè)獲得更完整的用戶和運行條件，更有效地協(xié)作，使企業(yè)規(guī)章制度更好地運行。
例如，用戶需要更好的體驗，數(shù)據(jù)分析需要更完整的數(shù)據(jù)，但很多企業(yè)很難整合分散的數(shù)據(jù)資源。事實上，數(shù)據(jù)整合是建立數(shù)字化服務(wù)的最大挑戰(zhàn)。數(shù)字大家憑借治理能力，為實施數(shù)字化建立統(tǒng)一的平臺，使之涵蓋新型用戶體驗、工廠自動化和先進的分析能力等。
隨著公司的全球化擴張，企業(yè)越發(fā)需要跨地域、部門和專業(yè)進行有效協(xié)作。如果員工不遵守公司規(guī)章、而采取自己的方式協(xié)作時，就會激發(fā)潛在的安全、法律和整合問題。企業(yè)也可以運用治理能力制定和強化管理策略，指出哪種協(xié)作是合適的，并開發(fā)監(jiān)測工具監(jiān)測違規(guī)行為
調(diào)查顯示，數(shù)字化水平高的公司可以更好地治理數(shù)字化活動。通過評測一系列綜合指標，包括職能清晰度、戰(zhàn)略一致性、跨部門協(xié)作、KPI使用以及數(shù)字化轉(zhuǎn)型路線圖等，結(jié)果顯示，數(shù)字大家的得分比其他企業(yè)高出51％，彰顯出對采取何種轉(zhuǎn)型措施、如何成功實施這些舉措有著更清晰的認知。
三、數(shù)據(jù)治理如何為數(shù)字化轉(zhuǎn)型提供基礎(chǔ)支撐
1、數(shù)據(jù)治理能夠避免數(shù)據(jù)湖成為“數(shù)據(jù)黑洞”
數(shù)據(jù)湖是按存儲原始數(shù)據(jù)格式的數(shù)據(jù)存儲，旨在任何數(shù)據(jù)可以以最原始的形態(tài)儲存，可是結(jié)構(gòu)化或者非結(jié)構(gòu)化數(shù)據(jù)，以確保數(shù)據(jù)在使用時可以不丟失任何細節(jié)。采用Hadoop大數(shù)據(jù)技術(shù)生態(tài)體系以構(gòu)建大數(shù)據(jù)平臺，所有的實時數(shù)據(jù)和批量數(shù)據(jù)，都匯總到數(shù)據(jù)湖當(dāng)中，然后從湖中取相關(guān)數(shù)據(jù)用于機器學(xué)習(xí)或者數(shù)據(jù)分析。大規(guī)模捕獲各種新舊類型的多源異構(gòu)原始數(shù)據(jù)，并按需進行數(shù)據(jù)轉(zhuǎn)換，形成多樣化應(yīng)用。
然而，數(shù)據(jù)湖的完美理念卻面臨著諸多問題，企業(yè)的業(yè)務(wù)是實時在變化的，這代表著沉積在數(shù)據(jù)湖中的數(shù)據(jù)定義、數(shù)據(jù)格式實時都在發(fā)生的轉(zhuǎn)變，企業(yè)的大型數(shù)據(jù)湖對企業(yè)數(shù)據(jù)治理（Data Governance）提升了更高的要求。大部分使用數(shù)據(jù)湖的企業(yè)在數(shù)據(jù)真的需要使用的時候，往往因為數(shù)據(jù)湖中的數(shù)據(jù)質(zhì)量太差而無法最終使用，數(shù)據(jù)無法訪問、難以檢索，成為只進不出的“數(shù)據(jù)黑洞”。
為避免數(shù)據(jù)湖淪為“數(shù)據(jù)黑洞”，須實現(xiàn)數(shù)據(jù)目錄、標準、質(zhì)量、安全、共享的統(tǒng)一管理，開展相關(guān)的數(shù)據(jù)治理活動：
首先，基于元數(shù)據(jù)信息，為數(shù)據(jù)湖構(gòu)建企業(yè)級數(shù)據(jù)資源目錄，對入湖數(shù)據(jù)進行編目分類、建立索引，以便迅速查找、定位、獲取所需數(shù)據(jù)資源；其次，進行數(shù)據(jù)血緣分析和影響分析，構(gòu)建數(shù)據(jù)全維關(guān)系圖譜，對數(shù)據(jù)流向從源頭到目的地之間追蹤信息的可視化表示，實現(xiàn)對數(shù)據(jù)資源流轉(zhuǎn)的清晰掌握和數(shù)據(jù)流通全流程的監(jiān)控；基于數(shù)據(jù)資源目錄，劃分數(shù)據(jù)安全等級和共享類型，以此為基礎(chǔ)進行用戶角色的訪問控制、身份驗證、授權(quán)，數(shù)據(jù)脫敏規(guī)則設(shè)計以及靜態(tài)和動態(tài)數(shù)據(jù)加密，以提高數(shù)據(jù)湖的安全與隱私性。
2、數(shù)據(jù)治理是人工智能的基石
數(shù)據(jù)治理與人工智能
在人工智能時代，數(shù)據(jù)不再是程序代碼的附屬物。數(shù)據(jù)從本質(zhì)上已經(jīng)成為構(gòu)建算法的源代碼和生成算法結(jié)果的核心驅(qū)動。基于大量的數(shù)據(jù)，通過“自適應(yīng)和自學(xué)習(xí)”算法“訓(xùn)練”它。因此，數(shù)據(jù)質(zhì)量的好壞決定了算法的優(yōu)劣及其魯棒性;此外，在進行人工智能工作時，數(shù)據(jù)共享和數(shù)據(jù)安全也是需要考慮的因素。數(shù)據(jù)治理在人工智能工作中可以發(fā)揮以下關(guān)鍵作用:
保證制度流程：
在人工智能發(fā)展的過程中,聯(lián)合數(shù)據(jù)治理組織制定和發(fā)布系統(tǒng),程序和規(guī)范,配合人工智能技術(shù)的發(fā)展,明確各部門和項目團隊(人工智能項目團隊,數(shù)據(jù)治理項目,數(shù)據(jù)平臺項目團隊)和業(yè)務(wù)系統(tǒng)項目團隊,等等)的職責(zé)分工;
保障數(shù)據(jù)安全：
在人工智能工作的發(fā)展過程中，需要采取一系列的數(shù)據(jù)安全保護措施，如私人數(shù)據(jù)的符合性確認和檢查、敏感數(shù)據(jù)的脫敏、安全訪問控制、防泄漏措施等。為AI應(yīng)用結(jié)果的數(shù)據(jù)安全性和合規(guī)性奠定基礎(chǔ);
資源協(xié)調(diào)：
通過數(shù)據(jù)治理團隊協(xié)助協(xié)調(diào)數(shù)據(jù)資源、數(shù)據(jù)治理團隊清楚地理解數(shù)據(jù)資源的存儲位置,集中式的管理部門,并能促進企業(yè)內(nèi)部數(shù)據(jù)資源的共享,并協(xié)助人工智能團隊迅速獲得所需的基本數(shù)據(jù)資源;
高質(zhì)量數(shù)據(jù)輸入：
數(shù)據(jù)治理團隊根據(jù)AI團隊的數(shù)據(jù)質(zhì)量需求和業(yè)務(wù)規(guī)則，對輸入的數(shù)據(jù)資源進行數(shù)據(jù)質(zhì)量檢查，根據(jù)需要出具數(shù)據(jù)質(zhì)量評估報告，給出數(shù)據(jù)質(zhì)量健康度評分，發(fā)現(xiàn)數(shù)據(jù)質(zhì)量問題，快速制定數(shù)據(jù)質(zhì)量改進方案。
四、經(jīng)邦企業(yè)級數(shù)據(jù)治理整體解決方案
經(jīng)邦推出了企業(yè)級數(shù)據(jù)治理整體解決方案,實施“一站式”全球數(shù)據(jù)治理,覆蓋所有功能區(qū)域的數(shù)據(jù)治理從數(shù)據(jù)資源目錄,目錄建設(shè)、標準的制定、質(zhì)量改進、安全管理數(shù)據(jù)共享和應(yīng)用程序協(xié)助建立數(shù)據(jù)治理體系和指導(dǎo)企業(yè)內(nèi)的各種特殊的治理活動。
經(jīng)邦企業(yè)級數(shù)據(jù)治理解決方案框架
1、數(shù)據(jù)治理專業(yè)能力建設(shè)
企業(yè)級數(shù)據(jù)治理解決方案的核心要素是數(shù)據(jù)治理專業(yè)能力，包括數(shù)據(jù)標準管理、數(shù)據(jù)質(zhì)量管理、數(shù)據(jù)資源目錄、數(shù)據(jù)安全管理、數(shù)據(jù)架構(gòu)管理、數(shù)據(jù)共享和應(yīng)用程序管理。應(yīng)用知識圖、微服務(wù)、元數(shù)據(jù)收集、自然語言處理、大數(shù)據(jù)等技術(shù)，智能整理企業(yè)數(shù)據(jù)資產(chǎn)，規(guī)范系統(tǒng)數(shù)據(jù)模型，支持數(shù)據(jù)標準構(gòu)建，實現(xiàn)數(shù)據(jù)協(xié)同變更，控制細粒度敏感信息，為企業(yè)提供深層次的數(shù)據(jù)價值。
2、數(shù)據(jù)治理平臺建設(shè)
經(jīng)邦已形成了一套完整的方法，從數(shù)據(jù)治理咨詢、需求轉(zhuǎn)換,原型平臺實現(xiàn)，并迅速轉(zhuǎn)換數(shù)據(jù)治理專業(yè)功能由企業(yè)按需為平臺建設(shè)的需求，并將治理數(shù)據(jù)治理過程中生成的結(jié)果進行統(tǒng)一和管理通過平臺實現(xiàn)全景和視覺顯示的數(shù)據(jù)資源，同時為用戶提供數(shù)據(jù)質(zhì)量評估、數(shù)據(jù)架構(gòu)評估、數(shù)據(jù)能力評估、智能檢索等多樣化服務(wù)。
數(shù)據(jù)治理平臺架構(gòu)
3、數(shù)據(jù)治理工作機制建設(shè)
數(shù)據(jù)治理需要企業(yè)所有部門的參與，需要所有資源的協(xié)調(diào)。一是建立規(guī)范化的數(shù)據(jù)治理組織，共同推進數(shù)據(jù)治理。二是建立數(shù)據(jù)問責(zé)機制，解決“橫向超越邊緣，縱向無底洞”的共同突出問題。同時，高效的管理流程也是公司治理的強大動力。最后，需要建立數(shù)據(jù)運行機制，確保數(shù)據(jù)治理的有效發(fā)展。
