如今數(shù)字化轉(zhuǎn)型正在各行各業(yè)中迅速發(fā)展，以數(shù)據(jù)、流量、知識為主大數(shù)據(jù)時代已經(jīng)到來，對于一個企業(yè)來說，要實施數(shù)字化和大數(shù)據(jù)戰(zhàn)略，數(shù)據(jù)治理更為重要。

數(shù)據(jù)治理使組織能夠處理其擁有的數(shù)據(jù)，從該數(shù)據(jù)中獲取更多價值，并使用戶可以看到該數(shù)據(jù)的重要方面。它還提供管理這些方面的功能。這不僅是因為現(xiàn)有數(shù)據(jù)的錯誤和遺漏，而且因為數(shù)據(jù)的新用途通常需要新的屬性，因此需要新的元數(shù)據(jù)來支持它們。

數(shù)據(jù)治理需要什么？

從人和流程開始

數(shù)據(jù)治理是關(guān)于啟用和鼓勵有關(guān)數(shù)據(jù)的良好行為，以及限制產(chǎn)生風(fēng)險的行為。無論您是在大數(shù)據(jù)環(huán)境還是傳統(tǒng)的數(shù)據(jù)管理環(huán)境中，都是一樣的。使組織能夠識別誰負責(zé)數(shù)據(jù)，協(xié)作設(shè)置策略和制定決策，就如何使用數(shù)據(jù)及其用途創(chuàng)建明確的協(xié)議，了解某些指標和信息的來源，并確定變更對業(yè)務(wù)的影響數(shù)據(jù)。這些都是任何環(huán)境所需要的。
?

?

使用技術(shù)作為上述的推動者

這些過程通常變化很大，涉及組織不同部門的許多不同利益相關(guān)者。他們也是時間敏感的。特別是在大數(shù)據(jù)場景中，數(shù)據(jù)變化的類型，數(shù)量和頻率一直在增加。雖然可以執(zhí)行一次或兩次這些任務(wù)，但如果沒有專門的系統(tǒng)和自動化，就不可能連續(xù)執(zhí)行治理。以同樣的方式考慮這一點，我們的大多數(shù)業(yè)務(wù)流程都需要自動化，以便高效，高效地執(zhí)行。
此外，與任何其他流程一樣，必須測量和管理數(shù)據(jù)本身的治理，以便在必要時可以提高數(shù)據(jù)的質(zhì)量，實用性和安全性。

預(yù)先確定數(shù)據(jù)管理的哪些方面對您的業(yè)務(wù)至關(guān)重要

了解您需要管理的內(nèi)容是實施適當數(shù)據(jù)治理的關(guān)鍵部分。雖然所有信息可能都應(yīng)該受到某些治理的影響，并且應(yīng)該對其進行編目以便找到，但是有一部分重要信息應(yīng)該成為任何數(shù)據(jù)治理工作的重點。這些關(guān)鍵數(shù)據(jù)元素及其前提是組織決策，服務(wù)客戶和向監(jiān)管機構(gòu)報告的基礎(chǔ)。

利用現(xiàn)有流程和最佳實踐

數(shù)據(jù)治理不一定是一項新的繁瑣的舉措。實際上，由于對抑制因素和開銷的感知，一些組織可能會擱置正式的數(shù)據(jù)治理計劃。但事實是，您已經(jīng)擁有適當?shù)牧鞒蹋梢宰鳛檎綌?shù)據(jù)治理計劃的基礎(chǔ)。這些可能被標記為“工作流程”或“業(yè)務(wù)規(guī)則”，但這些僅僅是針對同一組實踐的不同術(shù)語。使用這些流程作為起點，構(gòu)建一種策略，幫助您從大數(shù)據(jù)中獲取更多價值。

數(shù)據(jù)治理的關(guān)鍵要求是什么？

這些功能中的每一項都可以實現(xiàn)受管理的環(huán)境 目錄和數(shù)據(jù)字典元數(shù)據(jù)的組合為數(shù)據(jù)策略和使用的可審計性提供了完整的信息。它還包含血統(tǒng)和操縱。工作流控制信息生命周期管理的過程，包括攝取，操作/派生和處置。強大的分布式基礎(chǔ)架構(gòu)可實現(xiàn)業(yè)務(wù)連續(xù)性，快速處理和數(shù)據(jù)的持續(xù)可用性。

確保系統(tǒng)可靠性和可用性

雖然高可用性和災(zāi)難恢復(fù)等概念通常不被歸類為數(shù)據(jù)治理策略的組件，但這些功能對于數(shù)據(jù)是有價值資產(chǎn)的任何環(huán)境都至關(guān)重要。因此，數(shù)據(jù)治理策略必須包含高可用性和災(zāi)難恢復(fù)策略。畢竟，如果系統(tǒng)無法可靠地保持運行，那么數(shù)據(jù)將與相關(guān)的數(shù)據(jù)治理策略一起貶值。

識別數(shù)據(jù)和維護數(shù)據(jù)目錄

由于各種數(shù)據(jù)的爆炸式增長，對數(shù)據(jù)進行編目并使該目錄可供用戶使用至關(guān)重要。但是，這不僅僅是跟蹤有關(guān)信息的技術(shù)元數(shù)據(jù)。它需要一個可以自動完成該過程的大部分引擎。數(shù)據(jù)太多，而且手動分類所有內(nèi)容的速度增長太快。
其次，業(yè)務(wù)用戶需要可以訪問此目錄，因此他們可以“購買”他們檢查業(yè)務(wù)問題所需的數(shù)據(jù)。這意味著數(shù)據(jù)的實施必須與業(yè)務(wù)術(shù)語相關(guān)聯(lián)。組織需要一個可以輕松擴充和更新的業(yè)務(wù)術(shù)語表，因為新數(shù)據(jù)和現(xiàn)有數(shù)據(jù)的新用途將發(fā)揮作用。此外，環(huán)境能夠跟蹤與數(shù)據(jù)相關(guān)的各種資產(chǎn)至關(guān)重要，它的使用和加工。
?

?

探索該數(shù)據(jù)以識別機會

獲得數(shù)據(jù)目錄后，您需要一種很好的方法來查找該目錄中的內(nèi)容。
組織內(nèi)的不同角色需要以不同的方式看待事物。
IT專業(yè)人員需要在系統(tǒng)或應(yīng)用程序上下文中查看數(shù)據(jù)。
安全團隊需要根據(jù)其隱私策略上下文查看信息，審核員需要通過靈活的可視化查看完整的血統(tǒng)和相關(guān)信息，能夠在上下文中顯示任何類型的關(guān)系。這應(yīng)該與基于角色的視圖和模板相結(jié)合，以及按角色定制導(dǎo)航，以使業(yè)務(wù)用戶盡可能簡單地找到他或她需要的內(nèi)容?？梢允褂孟冗M的機器學(xué)習(xí)和人工智能來幫助找到適當?shù)臄?shù)據(jù)。

保持數(shù)據(jù)的有效性

保持數(shù)據(jù)的有效性是兩部分的努力。首先是建立圍繞數(shù)據(jù)的系統(tǒng)政策和控制，并確保測量的數(shù)據(jù)準確性適合其用途。
工作流和策略管理功能使了解數(shù)據(jù)的業(yè)務(wù)用戶可以輕松地協(xié)作，協(xié)商和批準策略和過程。與IT服務(wù)管理系統(tǒng)集成后，可以將策略信息一旦最終確定，即可轉(zhuǎn)移到IT部門進行實施，而不會丟失上下文以及策略及其要求的細節(jié)。
自動規(guī)則可以輕松確定策略是否沒有準則。全面的業(yè)務(wù)研習(xí)使任何人都可以確定哪些策略適用于哪些信息，哪些業(yè)務(wù)術(shù)語涉及哪些數(shù)據(jù)？

保護敏感數(shù)據(jù)

保護數(shù)據(jù)可能是一項復(fù)雜的工作，雖然這種能力還依賴于擁有合適的人員和流程，但該技術(shù)可以在確保適當保護方面發(fā)揮很大作用。
保護敏感數(shù)據(jù)需要幾個步驟。
首先，必須確定數(shù)據(jù)及其敏感性。
其次，必須有一種方法可以明確說明圍繞數(shù)據(jù)做什么以及由誰做的政策。
再者，必須有一種系統(tǒng)的方法來收集這些信息并將其傳播給數(shù)據(jù)的消費者和能夠?qū)π畔嵤┪锢砜刂频募夹g(shù)人員。這三個步驟通常是由實現(xiàn)合規(guī)性的需要驅(qū)動的，但也與您自己的內(nèi)部政策相關(guān)聯(lián)。重要的是，大數(shù)據(jù)有何不同，以及它如何影響數(shù)據(jù)治理？
關(guān)于大數(shù)據(jù)的一些事情改變了之前對數(shù)據(jù)治理的理解。其中每一項都需要一種新方法來有效地管理數(shù)據(jù)資產(chǎn)。
?

?

各種資產(chǎn)，包括工作，模型，可視化

第一個主要區(qū)別是不同類型的數(shù)據(jù)資產(chǎn)的數(shù)量，以及此類別正在增長的事實。

數(shù)據(jù)類之間缺乏物理隔離

第二個區(qū)別是更微妙，但它是我們使用信息管理拓撲分離數(shù)據(jù)的方式的副產(chǎn)品。通常，我們依賴于某些數(shù)據(jù)的物理分離，以某種方式將其識別為敏感數(shù)據(jù)，并管理圍繞該數(shù)據(jù)的控制。
在大數(shù)據(jù)世界中，雖然數(shù)據(jù)可以分布，但物理隔離通常不存在，必須使用其他方法來識別哪些數(shù)據(jù)是敏感的，誰對哪些數(shù)據(jù)負責(zé)。治理流程需要維護這些信息。

通過組合以前沒有相關(guān)的數(shù)據(jù)來創(chuàng)造價值

此外，數(shù)據(jù)共享通常是一個尚未正式化的過程。數(shù)據(jù)湖的目標是創(chuàng)建一個可以輕松利用所有數(shù)據(jù)的環(huán)境。這意味著擁有數(shù)據(jù)的組織的不同部分必須同意提供它，并以受控方式提供它。
此外，現(xiàn)在可以與組織的許多部分共享數(shù)據(jù)，通常不需要他們付出太多努力。這意味著需要明確協(xié)商數(shù)據(jù)共享要求，以便數(shù)據(jù)的所有用戶都能理解他們應(yīng)該和不應(yīng)該對數(shù)據(jù)做什么。
此外，語義不匹配的范圍也會增加，因為組織的不同部分將使用具有不同含義的相同術(shù)語。

更多樣化和靈活的流程

大數(shù)據(jù)不是基于ETL的預(yù)先定義和政策決定，而是暗示自下而上的“按需要做”治理方法。這反過來意味著該治理的自動化系統(tǒng)需要高度靈活和協(xié)作，并具有明確的運營模式。該運營模型考慮了數(shù)據(jù)的配置，使用，更改和退役的整個生命周期以及質(zhì)量和可靠性，需要自動化以處理不斷增加的數(shù)據(jù)量和種類。
?

?

多樣性的增加使自動化成為一項要求

數(shù)量和種類的不斷增加需要自動化。手動流程無法跟上數(shù)據(jù)變化的次數(shù)以及幾乎每天都帶入湖中的新數(shù)據(jù)。手動流程處理現(xiàn)有的大量數(shù)據(jù)太慢而且繁瑣。將管理信息保存在桌面工具，電子表格甚至文檔共享站點上太慢而且繁瑣，并且不會使業(yè)務(wù)用戶即時訪問他們所需的數(shù)據(jù)。有必要使用應(yīng)用程序自動執(zhí)行數(shù)據(jù)治理，就像使用特定應(yīng)用程序為此目的自動執(zhí)行任何其他業(yè)務(wù)活動一樣。

該數(shù)據(jù)是操作必需品并且一直在使用

最終，這些數(shù)據(jù)是組織的生命線。托管和處理它的基礎(chǔ)架構(gòu)和平臺必須能夠跟上所有更改，以及使用和處理數(shù)據(jù)的請求量。如果沒有這種可靠性和安全性，組織將無法利用其數(shù)據(jù)，也無法快速獲取新的數(shù)據(jù)和洞察力，從而具有競爭力。數(shù)據(jù)已成為商業(yè)競爭和產(chǎn)品和服務(wù)質(zhì)量的關(guān)鍵水平。

數(shù)據(jù)治理成功的好處

最后，這些流程旨在使您的組織更加靈活和有能力。您可以在需要時使用您的數(shù)據(jù)，您可以添加它，您可以管理它，它就在那里。擁有大數(shù)據(jù)和治理功能的最佳組織發(fā)現(xiàn)有許多具體的好處。他們可以比以往更有效地查找數(shù)據(jù)，描述數(shù)據(jù)，使用數(shù)據(jù)并進行管理。
?

保持可用性

在管理大數(shù)據(jù)時，您希望最大化正常運行時間，同時最大限度地減少確保正常運行時間的工作量 您的基礎(chǔ)大數(shù)據(jù)平臺必須實現(xiàn)這些目標。

保護敏感數(shù)據(jù)

需要廣泛的重要功能來滿足您的數(shù)據(jù)安全要求。您的數(shù)據(jù)平臺必須提供以數(shù)據(jù)為中心的控件，以確保安全的環(huán)境。
?

快速訪問您的數(shù)據(jù)

組織花費高達75％的時間來創(chuàng)建從事數(shù)據(jù)的分析和爭吵活動。數(shù)據(jù)易于搜索，機器學(xué)習(xí)人工智能有助于推薦合適的數(shù)據(jù)。高級可視化可以顯示任何類型的關(guān)系和數(shù)據(jù)上下文，因此數(shù)據(jù)科學(xué)家和BI專業(yè)人員可以輕松快速地獲取正確的數(shù)據(jù)。而且因為數(shù)據(jù)提取治理可以確保您知道數(shù)據(jù)湖中究竟是什么。

快速安全地更改數(shù)據(jù)

確保您的查詢返回正確的數(shù)據(jù)，以便可以信任基于該數(shù)據(jù)的分析指標。數(shù)據(jù)科學(xué)家，所有者和用戶可以確保使用正確的數(shù)據(jù)值，參考和結(jié)果。使用非結(jié)構(gòu)化數(shù)據(jù)需要生產(chǎn)者，消費者和數(shù)據(jù)科學(xué)家之間的有效協(xié)調(diào)，以確保所有各方都了解可能影響結(jié)果的變化。由于對數(shù)據(jù)的更改經(jīng)常發(fā)生并且經(jīng)常在發(fā)現(xiàn)該數(shù)據(jù)的新用途時不斷發(fā)生，因此這是一項關(guān)鍵功能。這種通信還減少了耗時的錯誤分析和解決方案; 部分原因是分析中幾乎沒有莫名其妙的錯誤，部分原因是報告問題和解決問題的過程是自動化的。這增加了對分析的信任，增加了它們的使用，并促進了自助服務(wù)。
了解您的數(shù)據(jù)
數(shù)據(jù)治理可以讓您了解自己擁有的內(nèi)容，并以多種不同的方式查找知識。大數(shù)據(jù)環(huán)境不僅僅是表格，文件和流。組織使用許多不同類型的資產(chǎn)來提供高性能，預(yù)測分析和獨特見解。這些包括分析模型，地圖/減少作業(yè)，查詢，可視化，報告和使用數(shù)據(jù)的任何人工制品。
以上內(nèi)容也僅僅是讓大家對數(shù)據(jù)治理有一個簡單清晰的方向，更專業(yè)詳細的數(shù)據(jù)治理技術(shù)知識還是需要經(jīng)過系統(tǒng)學(xué)習(xí)才能獲得！

數(shù)據(jù)治理考證與培訓(xùn)

為了解決社會對數(shù)據(jù)管理人才的緊迫需求，規(guī)范化數(shù)字要素市場，推進政府數(shù)據(jù)開放共享、提升社會數(shù)據(jù)資源價值、加強數(shù)據(jù)資源整合和安全保護三項要求，DAMA中國特就決定建立一個長期的“數(shù)據(jù)人才”成長計劃，面向個人開展培訓(xùn)認證。

為了便于國內(nèi)廣大數(shù)據(jù)從業(yè)者學(xué)習(xí)相關(guān)認證，DAMA中國以國際數(shù)據(jù)管理協(xié)會(簡稱“DAMA國際”) DAMA數(shù)據(jù)管理知識體系為基礎(chǔ)，結(jié)合國內(nèi)實際需求，對DAMA國際數(shù)據(jù)管理專業(yè)人員認證( CDMP )的考試語言、考試形式、考試內(nèi)容、證書類型等進行了適當本地化重構(gòu)。
?

?

重構(gòu)后認證考試分為數(shù)據(jù)治理工程師( CDGA )和數(shù)據(jù)治理專家( CDGP )，DAMA中國承擔認證考試命題工作，并定期組織中文考試，對考試通過者由DAMA中國頒發(fā)認證證書。
證書有效期為三年，獲得CDGA認證才能申請CDGP認證考試。
弘博創(chuàng)新是DAMA中國授權(quán)的數(shù)據(jù)管理知識體系培訓(xùn)基地，幫助數(shù)據(jù)管理從業(yè)人士獲得企業(yè)數(shù)字化轉(zhuǎn)型戰(zhàn)略下的必備職業(yè)能力，促進開展工作實踐應(yīng)用及實際問題解決，形成企業(yè)所需的新數(shù)字經(jīng)濟下的核心職業(yè)競爭能力。

課程十三大知識模塊
?