數(shù)據(jù)治理帶來(lái)曙光

IT部門使用數(shù)據(jù)倉(cāng)庫(kù)進(jìn)行響應(yīng)，數(shù)據(jù)倉(cāng)庫(kù)會(huì)在斷開(kāi)連接的交易系統(tǒng)中收集數(shù)據(jù)，僅用于分析。出現(xiàn)了聰明的報(bào)告工具，可以更容易地操作，加入和匯總原始交易表，甚至可以將它們下載到電子表格中。當(dāng)然，原始數(shù)據(jù)仍然存儲(chǔ)在不同的應(yīng)用程序和格式中，但是通過(guò)足夠的努力，數(shù)據(jù)倉(cāng)庫(kù)可以被用來(lái)以理解所有這些，提供客戶，產(chǎn)品，資產(chǎn)和位置等維度。但是，要實(shí)際生成一致的客戶和產(chǎn)品列表，必須解決底層系統(tǒng)的不一致問(wèn)題。

主數(shù)據(jù)管理（MDM）誕生了，與此同時(shí)，還需要數(shù)據(jù)治理策略。業(yè)務(wù)用戶被鼓勵(lì)或哄騙決定哪些客戶和產(chǎn)品的分類是“黃金記錄”，要在整個(gè)企業(yè)中高舉，哪些將被投入到部門特定的本地術(shù)語(yǔ)的荒野中。這是一個(gè)經(jīng)常激烈的過(guò)程，不同的部門爭(zhēng)論哪個(gè)是分類數(shù)據(jù)的最佳方式。一些公司文化比其他文化更適合這種方法。高度集中的公司習(xí)慣于從高度但分散的方式?jīng)Q定結(jié)構(gòu)，并且努力保持在數(shù)據(jù)治理結(jié)構(gòu)中。這些公司的分析師認(rèn)為自己是自由戰(zhàn)士，而中央辦公室的分析人員則認(rèn)為他們是數(shù)據(jù)恐怖分子。

很明顯，至少在很多公司中，自由戰(zhàn)士現(xiàn)在方興未艾。這標(biāo)志著數(shù)據(jù)準(zhǔn)備工具的市場(chǎng)不斷增長(zhǎng)。這些產(chǎn)品能夠訪問(wèn)來(lái)自各種來(lái)源的數(shù)據(jù)，包括傳統(tǒng)數(shù)據(jù)庫(kù)，應(yīng)用程序包，Excel或企業(yè)防火墻外的應(yīng)用程序。它們支持一些數(shù)據(jù)質(zhì)量技術(shù)，例如分析，并使業(yè)務(wù)用戶能夠設(shè)置數(shù)據(jù)轉(zhuǎn)換，并通過(guò)可重復(fù)的工作流程自動(dòng)執(zhí)行此類提取，數(shù)據(jù)清理和轉(zhuǎn)換。這些工具擁有自己的分析工具，或者可以調(diào)用最新的可視化和數(shù)據(jù)挖掘產(chǎn)品，使分析師能夠根據(jù)自己的內(nèi)容處理數(shù)據(jù)。

如果企業(yè)數(shù)據(jù)倉(cāng)庫(kù)和MDM正在開(kāi)展工作，那么這樣的市場(chǎng)就不會(huì)存在。數(shù)據(jù)準(zhǔn)備，質(zhì)量檢查和轉(zhuǎn)換正是準(zhǔn)備將數(shù)據(jù)輸入數(shù)據(jù)倉(cāng)庫(kù)的準(zhǔn)備。問(wèn)題是公司數(shù)據(jù)倉(cāng)庫(kù)已超出其自然限制。數(shù)據(jù)現(xiàn)在來(lái)自各種各樣的來(lái)源，其中許多來(lái)自企業(yè)之外，并且在這樣的數(shù)量中，傳統(tǒng)的數(shù)據(jù)管理方法正在崩潰。

電子商務(wù)系統(tǒng)可以生成如此大小的網(wǎng)絡(luò)流量日志，使得普通數(shù)據(jù)庫(kù)不能處理該處理。車輛和機(jī)械上的傳感器現(xiàn)在產(chǎn)生大量的流數(shù)據(jù)：波音787每次飛行產(chǎn)生幾乎1TB的數(shù)據(jù)。在其他行業(yè)中也是如此，汽車，家庭智能電表甚至道路上的傳感器都會(huì)產(chǎn)生大量數(shù)據(jù)進(jìn)行分析。所有這些都是傳統(tǒng)企業(yè)數(shù)據(jù)的補(bǔ)充，以及來(lái)自業(yè)務(wù)合作伙伴和數(shù)據(jù)經(jīng)紀(jì)人的數(shù)據(jù)。有這么多數(shù)據(jù)出現(xiàn)在你面前，誰(shuí)有時(shí)間討論不同客戶分類層次結(jié)構(gòu)的優(yōu)點(diǎn)？