《科技觀察》066:ObjectScale:重新定義下一代對象存儲(chǔ),戴爾科技的重構(gòu)與創(chuàng)新
毫無疑問,隨著企業(yè)數(shù)字化轉(zhuǎn)型的逐步深入,今天非結(jié)構(gòu)化數(shù)據(jù)也正在快速的激增,并在千行百業(yè)中廣泛存在。例如,銀行的票據(jù)影像、醫(yī)院的PACS影像、檔案館的檔案數(shù)字化文件、制造業(yè)的設(shè)計(jì)圖紙以及生產(chǎn)質(zhì)量數(shù)據(jù)等等,都是典型的非結(jié)構(gòu)化數(shù)據(jù)。
根據(jù)Gartner數(shù)據(jù)顯示,目前全世界80%的數(shù)據(jù)都是非結(jié)構(gòu)化數(shù)據(jù);同樣,IDC也預(yù)測,截止到2023年,文件和對象數(shù)據(jù)的容量將增長3倍,且90%的新企業(yè)的應(yīng)用將是基于云原生設(shè)計(jì)的,顯然這就對非結(jié)構(gòu)化數(shù)據(jù)的存儲(chǔ)、使用和管理提出了全新的挑戰(zhàn)。

在此過程中,作為全球非結(jié)構(gòu)化數(shù)據(jù)和對象存儲(chǔ)領(lǐng)域的市場領(lǐng)導(dǎo)者,戴爾科技集團(tuán)在過去二十多年的時(shí)間里,就在對象存儲(chǔ)領(lǐng)域不斷的深耕和沉淀,從最早的Centera和Atmos,到ESC,再到為云原生時(shí)代而生的ObjectScale,可以說其不斷地重構(gòu)和創(chuàng)新,重新定義了下一代對象存儲(chǔ)的發(fā)展方向和趨勢。
也正因此,在Gartner公布的《2021年分布式文件系統(tǒng)和對象存儲(chǔ)魔力象限》報(bào)告中,戴爾科技集團(tuán)就位列榜首,再一次展現(xiàn)了其強(qiáng)大的技術(shù)實(shí)力和領(lǐng)先優(yōu)勢,而自2016年Gartner首次發(fā)布該報(bào)告以來,戴爾科技集團(tuán)更是已連續(xù)六年實(shí)現(xiàn)了“霸榜”。
那么,目前整個(gè)對象存儲(chǔ)領(lǐng)域究竟正在發(fā)生哪些演變趨勢?戴爾科技最新發(fā)布的ObjectScale又有何技術(shù)優(yōu)勢?面向未來,戴爾科技又將如何賦能千行百業(yè)的用戶,釋放海量非結(jié)構(gòu)化數(shù)據(jù)的新價(jià)值呢?
對象存儲(chǔ)三大演變新趨勢
我們知道,今天的數(shù)據(jù)已成為“新型生產(chǎn)要素”,在數(shù)字化轉(zhuǎn)型的大浪潮下,一切都離不開數(shù)據(jù),尤其是在海量非結(jié)構(gòu)化數(shù)據(jù)增長成為“新常態(tài)”的情況下,如何從海量非結(jié)構(gòu)化數(shù)據(jù)中真正獲取到價(jià)值,這也是對象存儲(chǔ)過去幾年來異軍突起、備受關(guān)注的關(guān)鍵原因所在。

戴爾科技集團(tuán)中國研發(fā)集團(tuán)上海研發(fā)中心總經(jīng)理陳春曦
戴爾科技集團(tuán)中國研發(fā)集團(tuán)上海研發(fā)中心總經(jīng)理陳春曦“感同身受”。他說:“戴爾科技早在2006年就在上海研發(fā)中心成立了對象存儲(chǔ)研發(fā)團(tuán)隊(duì),當(dāng)時(shí)整個(gè)公司就意識(shí)到了對象存儲(chǔ)在未來具有戰(zhàn)略地位,而在過去的16年時(shí)間里,無論是整個(gè)上海研發(fā)中心,還是對象存儲(chǔ)團(tuán)隊(duì)也都實(shí)現(xiàn)了不斷的發(fā)展。到現(xiàn)在為止,我們已經(jīng)有將近200多名研發(fā)人員,覆蓋了市場、架構(gòu)、研發(fā)、測試和技術(shù)支持等各個(gè)領(lǐng)域,同時(shí)在此過程中我們也看到整個(gè)對象存儲(chǔ)市場也正經(jīng)歷著新的演變趨勢?!?/p>
一是,從工作負(fù)載的角度看,對象存儲(chǔ)的角色正在向業(yè)務(wù)主存儲(chǔ)改變,并開始更多地承載關(guān)鍵業(yè)務(wù)工作負(fù)載??梢钥吹?,在對象存儲(chǔ)發(fā)展的早期,其往往被企業(yè)用作備份、數(shù)據(jù)歸檔或者內(nèi)容存儲(chǔ),是一款“性價(jià)比極高”的所謂“二級(jí)存儲(chǔ)”平臺(tái)。
但與此同時(shí),隨著海量數(shù)據(jù)的增長,尤其是越來越多新型應(yīng)用的出現(xiàn),對象存儲(chǔ)的角色也正在發(fā)生改變,那就是企業(yè)需要“更大、更快、更省”的存儲(chǔ)平臺(tái)以滿足其業(yè)務(wù)和數(shù)據(jù)快速增長的需求,而對象存儲(chǔ)正好滿足了這樣的市場需求,因此它也正在向業(yè)務(wù)主存儲(chǔ)的“角色”快速改變,并開始更多地承載關(guān)鍵業(yè)務(wù)工作負(fù)載。
二是,從云原生應(yīng)用的角度看,今天以Kubernetes為代表的云原生技術(shù)和理念正“大行其道”。根據(jù)IDC此前發(fā)布的報(bào)告,到2022年,50%的企業(yè)將部署統(tǒng)一的VMs、Kubernetes和多云管理流程和工具,以支持多云的管理和治理。此外,到2022年,60%的中國500強(qiáng)企業(yè)也將投資于云原生應(yīng)用和平臺(tái)的自動(dòng)化、編排和開發(fā)生命周期管理,而這些變化趨勢也對對象存儲(chǔ)的發(fā)展產(chǎn)生了重大的影響。
“今天越來越多的新型應(yīng)用都正在以云原生為基礎(chǔ)構(gòu)建,同時(shí)云原生也成為了下一代應(yīng)用程序發(fā)展的核心方向,而這也深刻影響了對象存儲(chǔ)的技術(shù)發(fā)展趨勢,對戴爾科技而言,如何更好地去重新定義云的應(yīng)用,或者說重新定義現(xiàn)代化的數(shù)據(jù)中心,讓對象存儲(chǔ)更好去適應(yīng)云原生應(yīng)用的發(fā)展,也是我們在設(shè)計(jì)和研發(fā)對象存儲(chǔ)時(shí)考量的重要方向。”陳春曦說。
三是,從技術(shù)創(chuàng)新的角度看,今天對象存儲(chǔ)無論是在元數(shù)據(jù)、API乃至向“邊緣/核心/云”方向進(jìn)化方面,同樣也正在經(jīng)歷著新一輪的技術(shù)創(chuàng)新。以元數(shù)據(jù)為例,對象存儲(chǔ)因?yàn)榭梢栽趥鹘y(tǒng)數(shù)據(jù)之外標(biāo)記很多的數(shù)據(jù),或者說能夠直接通過元數(shù)據(jù)定義業(yè)務(wù)標(biāo)簽,這樣就能夠幫助用戶更好地檢索、查詢數(shù)據(jù),尤其是在自動(dòng)駕駛,以及更多的人工智能、機(jī)器學(xué)習(xí)利用元數(shù)據(jù)方面,能夠幫助用戶定義特定的數(shù)據(jù)集,由此對整體的應(yīng)用產(chǎn)生巨大的效率提升,這是對象存儲(chǔ)的獨(dú)特之處,也是它巨大的優(yōu)勢。

除此之外,戴爾科技在對象存儲(chǔ)方面能夠支持S3協(xié)議,而大多數(shù)現(xiàn)代化應(yīng)用和云原生應(yīng)用都能夠兼容S3,這就讓對象存儲(chǔ)有了更多的“用武之地”;在此基礎(chǔ)之上,戴爾科技也正在對象存儲(chǔ)領(lǐng)域展開更多的創(chuàng)新,讓其也更加適應(yīng)“邊緣/核心/云”端到端覆蓋的領(lǐng)域,由此也讓對象存儲(chǔ)在技術(shù)創(chuàng)新維度實(shí)現(xiàn)了更多的延伸。
而戴爾科技在對象存儲(chǔ)領(lǐng)域持續(xù)探索與創(chuàng)新的“集大成者”——正是本文的主角“ObjectScale”,那么ObjectScale究竟在哪些方面實(shí)現(xiàn)了重構(gòu)與創(chuàng)新呢?
重新定義下一代對象存儲(chǔ)
據(jù)了解,ObjectScale最早出現(xiàn)在2020年戴爾科技與VMware的合作當(dāng)中,當(dāng)時(shí)在VMware容器平臺(tái)Tanzu上發(fā)布了其早期預(yù)覽版,它可以依托閃存構(gòu)建一個(gè)性能更高的容器對象存儲(chǔ)方案。2021年年底,ObjectScale迎來了正式發(fā)布,它是戴爾科技集團(tuán)有史以來最“軟”的一款軟件定義存儲(chǔ)產(chǎn)品,它采用了微服務(wù)架構(gòu),同時(shí)也支持Kubernetes編排,可以說在云原生時(shí)代真正重新定義下一代對象存儲(chǔ)平臺(tái)。

戴爾科技集團(tuán)中國研發(fā)集團(tuán)上海研發(fā)中心軟件工程資深總監(jiān)滕昱
戴爾科技集團(tuán)中國研發(fā)集團(tuán)上海研發(fā)中心軟件工程資深總監(jiān)滕昱表示:“ObjectScale可以把它理解為傳統(tǒng)的ECS不僅僅首次實(shí)現(xiàn)了軟件定義,同時(shí)也具有Kubernetes架構(gòu)靈活編排和部署的能力,能夠最大限度地使用物理的Resource(資源);更為重要的是它具備云原生的能力,能夠根據(jù)應(yīng)用的需求或者說工作負(fù)載的需求實(shí)現(xiàn)AutoScale(自動(dòng)伸縮)的能力,這種能力是傳統(tǒng)的軟件定義所不能達(dá)到的,所以O(shè)bjectScale是我們從軟件定義邁向云原生過程中非常關(guān)鍵的一步?!本唧w來看:
首先,在軟件定義方面,ObjectScale原生支持Kubernetes,運(yùn)維管理簡單;同時(shí)還具有智能的工作負(fù)載形態(tài)以及靈活的部署選項(xiàng)。其中,“加持” Kubernetes之后,ObjectScale就能夠通過Kubernetes存儲(chǔ)實(shí)現(xiàn)編排調(diào)度、負(fù)載平衡、自修復(fù)、資源優(yōu)化等能力,同時(shí)自服務(wù)的K8s API也能夠讓開發(fā)人員能夠?qū)ο蟠鎯?chǔ)集成到CI/CD管道中,由此提供可驗(yàn)證的、可重復(fù)的和一致的環(huán)境。另外,它還具有隔離資源和多租戶的能力,最終能夠以更低的TCO,實(shí)現(xiàn)應(yīng)用程序更快地開發(fā)。

而“靈活部署”指的是,ObjectScale支持在經(jīng)過驗(yàn)證的軟件和硬件上實(shí)現(xiàn)部署,目前已支持包括VxRail和VMware環(huán)境和Red Hat的OpenShift Kubernetes環(huán)境。此外,ObjectScale的“靈活性”還體現(xiàn)在全新的產(chǎn)品消費(fèi)模式上,如ObjectScale Community edition版本就免費(fèi)提供高達(dá)30TB的使用容量,同時(shí)也可以獲得永久有效的社區(qū)支持;而ObjectScale VCF with Tanzu版本和ObjectScale Red Hat OpenShift版本則提供訂閱或企業(yè)許可模式,可直接運(yùn)行在vSAN存儲(chǔ)或者運(yùn)行在disk/meida環(huán)境中。

其次,在企業(yè)級(jí)保障方面,ObjectScale具備強(qiáng)大的可擴(kuò)展性,同時(shí)作為一個(gè)覆蓋了從邊緣到核心的存儲(chǔ)平臺(tái),它也具備支撐客戶構(gòu)建“全球分布式數(shù)據(jù)湖”的能力。

“ObjectScale完全繼承了ECS企業(yè)級(jí)對象存儲(chǔ)的特性,它最大的重構(gòu)就是在整個(gè)管理和調(diào)度面引入了Kubernetes,但在數(shù)據(jù)面依然是ECS過去多年沉淀和積累下來的企業(yè)級(jí)能力,包括天然的橫向擴(kuò)展架構(gòu)支持對象存儲(chǔ)集群的擴(kuò)展;支持按需添加新節(jié)點(diǎn)、對象存儲(chǔ)和容量;在自動(dòng)伸縮能力方面,即使客戶的數(shù)據(jù)從TB級(jí)增長到EB級(jí),其對存儲(chǔ)桶或?qū)ο笠矝]有任何限制;此外,ObjectScale架構(gòu)本身也支持客戶在數(shù)據(jù)中心甚至在邊緣構(gòu)建小型的云中心等,加上它支持和兼容S3的接口,因此更多的客戶也可以通過ObjectScale在公有云環(huán)境中去實(shí)現(xiàn)全球數(shù)據(jù)湖的構(gòu)建?!彪耪f。
最后,在現(xiàn)代化應(yīng)用方面,ObjectScale豐富的S3兼容性和可擴(kuò)展性更使它成為了多種工作負(fù)載的理想整合平臺(tái),既能滿足高性能和低TCO的要求,也能滿足現(xiàn)代化應(yīng)用和傳統(tǒng)工作負(fù)載的要求。與此同時(shí),ObjectScale還在包括事件流和日志分析、備份和存儲(chǔ)的整合以及更多的應(yīng)用場景中發(fā)揮著更大的作用。

以事件流和日志分析為例,ObjectScale由于具備無限擴(kuò)展、無節(jié)點(diǎn)、租戶或容量限制;能夠?qū)崿F(xiàn)S3兼容、內(nèi)置元數(shù)據(jù)和搜索;支持多種存儲(chǔ)介質(zhì)的選擇,無論是傳統(tǒng)的HDD還是NVMe SSD;以及加上本身的操作簡單,具備低TCO等特性,因此,在數(shù)據(jù)采集管道、搜索和分析以及數(shù)據(jù)可視化領(lǐng)域都能夠起到更多的價(jià)值。
值得一提的是,在2022年的戴爾科技集團(tuán)全球峰會(huì)(DTW 2022)上,戴爾科技也宣布了與Snowflake的合作,這是一家能夠提供基于云的數(shù)據(jù)存儲(chǔ)和分析服務(wù)的公司,它允許企業(yè)用戶使用基于云的硬件和軟件來存儲(chǔ)和分析數(shù)據(jù),且能夠同時(shí)支持AWS、Azure 和 Google Cloud三個(gè)云平臺(tái)的數(shù)據(jù)倉庫服務(wù)的接入,這對于如今企業(yè)中多云、異構(gòu)的復(fù)雜部署環(huán)境有著很強(qiáng)的適用性。
滕昱認(rèn)為:“對于戴爾科技的行業(yè)客戶而言,今后就可以在私有云環(huán)境中通過ECS、ObjectScale,同時(shí)借助Snowflake的合作提供一樣的界面或者API,在此基礎(chǔ)上把ECS和ObjectScale的數(shù)據(jù)復(fù)制到Snowflake的云端系統(tǒng)中做分析,這樣的好處是行業(yè)客戶既可以讓重要的應(yīng)用程序和公有云環(huán)境實(shí)現(xiàn)完全的‘隔離’,同時(shí)又能讓對象存儲(chǔ)中的數(shù)據(jù)在云端實(shí)現(xiàn)實(shí)時(shí)分析,而這種強(qiáng)強(qiáng)聯(lián)合所打造的創(chuàng)新合作模式,正是當(dāng)下的客戶在云時(shí)代所需要的真正解決方案?!?/p>
當(dāng)然,隨著ObjectScale的發(fā)布,很多客戶也非常關(guān)心未來如何從ECS過渡到ObjectScale?滕昱對此強(qiáng)調(diào)說:“確保用戶數(shù)據(jù)的完整性是一家提供存儲(chǔ)產(chǎn)品公司的立身之本,這方面我們也給客戶做了承諾,那就是ECS會(huì)正常工作和持續(xù)運(yùn)營,同時(shí)我們也會(huì)根據(jù)客戶的需求,幫助客戶分階段完成升級(jí)以及交付的過程,當(dāng)然客戶的使用場景已經(jīng)完全‘Ready’的時(shí)候,我們也可以幫助客戶從ECS升級(jí)到ObjectScale,總之這是一個(gè)平滑升級(jí)和演進(jìn)的過程?!?/p>
由此可見,ObjectScale不但繼承了ECS發(fā)展多年所沉淀和積累下來的企業(yè)級(jí)的能力,同時(shí)通過加持“Kubernetes”,又在軟件定義、靈活部署,強(qiáng)大的S3兼容性以及現(xiàn)代化應(yīng)用方面實(shí)現(xiàn)了更多的創(chuàng)新,可以說在云原生時(shí)代為“下一代對象存儲(chǔ)”的技術(shù)創(chuàng)新和發(fā)展方向“打了個(gè)樣”。
釋放非結(jié)構(gòu)化數(shù)據(jù)新價(jià)值
隨著ObjectScale的加入,戴爾科技集團(tuán)在對象存儲(chǔ)領(lǐng)域也完成了更為強(qiáng)大和完整的產(chǎn)品布局,包括ECS一體化交付方案,這是一款經(jīng)過驗(yàn)證的一體化集成產(chǎn)品,具有NVMe的高性能配置以及高密度存儲(chǔ)能力,可在AI和分析場景,以及用于備份和長期存檔場景中起到堅(jiān)實(shí)的作用。

ObjectScale則是全新的軟件定義方案,其基于Kubernetes原生的容器化微服務(wù)架構(gòu)打造,專為下一代應(yīng)用和開發(fā)/測試場景設(shè)計(jì),支持包括VMware、Red Hat以及VxRail等靈活的部署選項(xiàng);而APEX Services On Dell ECS則是以“即服務(wù)”的模式為多云架構(gòu)打造,它支持AWS、微軟智能云Azure和谷歌云,能夠幫助用戶實(shí)現(xiàn)最小化的云環(huán)境使用成本,讓用戶在改變或者重構(gòu)其工作負(fù)載的情況下,最大化的減少低風(fēng)險(xiǎn)和成本。
不僅如此,戴爾科技集團(tuán)早在兩年前還發(fā)布了PowerScale,這是一款具備橫向擴(kuò)展能力的分布式存儲(chǔ),其憑借極高的存儲(chǔ)密度和非常高的存儲(chǔ)利用率,能夠幫助用戶在大容量和高性能之間取得很好的平衡??梢哉f,在非結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)領(lǐng)域,戴爾科技集團(tuán)的產(chǎn)品和方案陣容不僅具有“軟硬兼施”的特點(diǎn),同時(shí)更呈現(xiàn)出了“兵強(qiáng)馬壯”景象。

戴爾科技集團(tuán)大中華區(qū)非結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)事業(yè)部總經(jīng)理劉志洪
對此,戴爾科技集團(tuán)大中華區(qū)非結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)事業(yè)部總經(jīng)理劉志洪表示:“戴爾科技集團(tuán)連續(xù)6年‘霸榜’Gartner分布式文件系統(tǒng)和對象存儲(chǔ)魔力象限,已經(jīng)從一個(gè)側(cè)面印證了我們在非結(jié)構(gòu)化數(shù)據(jù)領(lǐng)域的領(lǐng)導(dǎo)者地位,而這種優(yōu)勢源于我們長達(dá)二十多年在這個(gè)領(lǐng)域的技術(shù)沉淀,以及在云原生時(shí)代所始終堅(jiān)持的技術(shù)創(chuàng)新能力?!?/p>
一方面,從技術(shù)沉淀看,在對象存儲(chǔ)市場,戴爾科技集團(tuán)在對象存儲(chǔ)領(lǐng)域的耕耘歷史超過了20年,從最初Centera和Atmos,到ESC,再到為云原生時(shí)代而生的ObjectScale,盡管產(chǎn)品的名稱有變化,但背后基于久經(jīng)驗(yàn)證的傳承與創(chuàng)新是沒有改變的;同樣,在非結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)市場,源自Isilon的PowerScale也是全世界第一款真正得到廣泛應(yīng)用的分布式存儲(chǔ),本身也具有適配性強(qiáng),成熟可靠,經(jīng)驗(yàn)證的能力。
“在分布式存儲(chǔ)和對象存儲(chǔ)領(lǐng)域,我們最大的優(yōu)勢,就是過去20多年積累下來的這種寶貴的資源,這種財(cái)富在業(yè)界是少有的,因?yàn)榇鎯?chǔ)最大的考驗(yàn)就是數(shù)據(jù)不能丟,而我們通過20多年的實(shí)踐和驗(yàn)證,證明了我們在成熟度方面的強(qiáng)大能力。”劉志洪說。

另一方面,從技術(shù)創(chuàng)新看,戴爾科技集團(tuán)并沒有因?yàn)闅v史沉淀而躺在“功勞簿”上,而是不斷的堅(jiān)持投入,堅(jiān)持創(chuàng)新,由此在數(shù)字化轉(zhuǎn)型或者說云原生時(shí)代真正在非結(jié)構(gòu)化數(shù)據(jù)市場打造出了“伸縮自如、簡捷如一”以及“任意數(shù)據(jù)、任意位置”的產(chǎn)品和方案,無論是ObjectScale還是PowerScale都具備這樣的特性。從這個(gè)角度也可以看到,戴爾科技集團(tuán)在技術(shù)創(chuàng)新領(lǐng)域,并沒有走任何的“捷徑”,而是“一步一個(gè)腳印”走出來的。
總的來說,二十多年來在分布式存儲(chǔ)和對象存儲(chǔ)領(lǐng)域的傳承和專注,是戴爾科技集團(tuán)領(lǐng)跑非結(jié)構(gòu)化數(shù)據(jù)市場的底蘊(yùn)和底氣所在;而始終堅(jiān)持技術(shù)的創(chuàng)新和迭代,又讓戴爾科技集團(tuán)在云原生時(shí)代,為釋放海量非結(jié)構(gòu)化數(shù)據(jù)新價(jià)值提供了更為充足的保證和信心,這種“獨(dú)一無二”的能力,一定能夠讓更多的行業(yè)客戶的數(shù)字化和智能化轉(zhuǎn)型之路走得更加簡單和從容,而這也正是戴爾科技集團(tuán)在非結(jié)構(gòu)化數(shù)據(jù)領(lǐng)域“把復(fù)雜留給自己,將簡單留給客戶”的真實(shí)寫照。