數(shù)據(jù)中臺是什么？

廣義上理解，數(shù)據(jù)中臺包含了頂層數(shù)據(jù)戰(zhàn)略、數(shù)據(jù)治理體系以及數(shù)據(jù)管理及運營、數(shù)據(jù)文化培養(yǎng)和組織架構(gòu)支撐，是一套持續(xù)管理和運營的體系。

狹義上看，數(shù)據(jù)中臺是通過數(shù)據(jù)技術(shù)，對海量、多源、多樣的數(shù)據(jù)進行采集、處理、存儲、計算，統(tǒng)一標準和口徑，并以標準形式存儲，形成大數(shù)據(jù)資產(chǎn)層，以滿足前臺數(shù)據(jù)分析和應(yīng)用的需求。

數(shù)據(jù)中臺對一個企業(yè)的數(shù)字化轉(zhuǎn)型和可持續(xù)發(fā)展起著至關(guān)重要的作用。數(shù)據(jù)中臺為解耦而生，企業(yè)建設(shè)數(shù)據(jù)中臺的最大意義就是應(yīng)用與數(shù)據(jù)之間的解藕，這樣企業(yè)就可以不受限制地按需構(gòu)建滿足業(yè)務(wù)需求的數(shù)據(jù)應(yīng)用。

主要特點：

• 數(shù)據(jù)是“打平”的，而非主題式，以利于企業(yè)從全局角度對數(shù)據(jù)進行分析。

• 數(shù)據(jù)是實時的，實時不是簡單指數(shù)據(jù)只有最新數(shù)據(jù)，而是不僅僅有歷史數(shù)據(jù)，也有當前實時數(shù)據(jù)，當數(shù)據(jù)發(fā)生變化時，如果對歷史數(shù)據(jù)產(chǎn)生影響，歷史數(shù)據(jù)的影響也要能實時反應(yīng)出來。

• 數(shù)據(jù)是可平滑擴充的，利用分布式存儲與分布式計算技術(shù)，當數(shù)據(jù)量擴大或者分析業(yè)務(wù)擴充時，能夠在不影響已有數(shù)據(jù)的情況下，快速平滑擴充。

• 數(shù)據(jù)的變化與使用是可追溯的，支持血緣追溯功能，當數(shù)據(jù)發(fā)生錯誤時，可快速定位錯誤的來源，并且對數(shù)據(jù)的影響范圍與用戶清晰，化被動為主動。

• 數(shù)據(jù)是以業(yè)務(wù)語言表示的，業(yè)務(wù)人員可直接使用：不同于數(shù)據(jù)倉庫時代數(shù)據(jù)都是以表和字段等技術(shù)語言來表示，數(shù)據(jù)中臺的數(shù)據(jù)要支撐管理模型，對外以業(yè)務(wù)語言來表示，能夠為業(yè)務(wù)人員直接使用。

• 數(shù)據(jù)與業(yè)務(wù)松耦合，當數(shù)據(jù)發(fā)生變化時，不會對業(yè)務(wù)分析造成困擾，同樣當業(yè)務(wù)需求發(fā)生變化時，也不會直接影響到數(shù)據(jù)中臺的數(shù)據(jù)組織方式。

數(shù)據(jù)湖是什么？

數(shù)據(jù)湖（Data Lake）是一個存儲企業(yè)的各種各樣原始數(shù)據(jù)的大型倉庫，其中的數(shù)據(jù)可供存取、處理、分析及傳輸。數(shù)據(jù)湖是以其自然格式存儲的數(shù)據(jù)的系統(tǒng)或存儲庫，通常是對象blob或文件。

數(shù)據(jù)湖通常是企業(yè)所有數(shù)據(jù)的單一存儲，包括源系統(tǒng)數(shù)據(jù)的原始副本，以及用于報告、可視化、分析和機器學(xué)習(xí)等任務(wù)的轉(zhuǎn)換數(shù)據(jù)。

數(shù)據(jù)湖從企業(yè)的多個數(shù)據(jù)源獲取原始數(shù)據(jù)，并且針對不同的目的，同一份原始數(shù)據(jù)還可能有多種滿足特定內(nèi)部模型格式的數(shù)據(jù)副本。因此，數(shù)據(jù)湖中被處理的數(shù)據(jù)可能是任意類型的信息，從結(jié)構(gòu)化數(shù)據(jù)到完全非結(jié)構(gòu)化數(shù)據(jù)。

企業(yè)對數(shù)據(jù)湖寄予厚望，希望它能幫助用戶快速獲取有用信息，并能將這些信息用于數(shù)據(jù)分析和機器學(xué)習(xí)算法，以獲得與企業(yè)運行相關(guān)的洞察力。

主要特點：

• 數(shù)據(jù)是以原始格式存儲，不同于數(shù)據(jù)中臺的結(jié)構(gòu)化存儲方式，數(shù)據(jù)湖以自然格式存儲數(shù)據(jù)。

• 數(shù)據(jù)不需要提前進行定義，在準備使用數(shù)據(jù)時，再定義即可，提高了最高的靈活性與可擴展性。

數(shù)據(jù)湖和數(shù)據(jù)中臺的區(qū)別

根據(jù)以上數(shù)據(jù)中臺和數(shù)據(jù)湖的概念論述和特點對比，它們在某個維度上為業(yè)務(wù)產(chǎn)生價值的形式有不同的側(cè)重：

1.數(shù)據(jù)湖更多地是面向不同對象的不同形態(tài)的數(shù)據(jù)資產(chǎn)，而數(shù)據(jù)中臺更多強調(diào)的是服務(wù)于前臺，實現(xiàn)邏輯、標簽、算法、模型的復(fù)用沉淀。

2.數(shù)據(jù)湖主要用來存儲數(shù)據(jù)，這些數(shù)據(jù)是原始格式的，數(shù)據(jù)湖能夠存儲結(jié)構(gòu)化的數(shù)據(jù)、 二進制數(shù)據(jù)；數(shù)據(jù)中臺是企業(yè)級的邏輯概念，體現(xiàn)企業(yè)數(shù)據(jù)向業(yè)務(wù)價值轉(zhuǎn)化的能力，為業(yè)務(wù)提供服務(wù)的主要方式是數(shù)據(jù) API。

3.數(shù)據(jù)中臺距離業(yè)務(wù)更近，能夠更快速的響應(yīng)業(yè)務(wù)和應(yīng)用開發(fā)需求，從而為業(yè)務(wù)提供速度更快的服務(wù)；

4.數(shù)據(jù)中臺可以建立在數(shù)據(jù)湖之上，是加速企業(yè)從數(shù)據(jù)到業(yè)務(wù)價值的過程的中間層。

關(guān)于光點科技

光點科技是一家在政企數(shù)據(jù)治理、數(shù)據(jù)中臺建設(shè)、數(shù)據(jù)可視化展示分析方面有著豐富經(jīng)驗的公司。作為國內(nèi)專業(yè)的數(shù)據(jù)智能解決方案專家，光點科技自成立以來就一直專注于數(shù)據(jù)產(chǎn)品的研發(fā)和落地，服務(wù)的客戶涉及智慧城市、園區(qū)、政府、集團企業(yè)、金融、制造、能源、電信、工程、教育、檢驗檢測等多個行業(yè)。