0
人們正在從不斷產(chǎn)生的數(shù)據(jù)中挖掘著價(jià)值，作為新的生產(chǎn)要素，數(shù)據(jù)量越大將代表著人工智能將越智能。
因此，人們渴望從大量的數(shù)據(jù)中挖掘出價(jià)值，在此前，對(duì)于數(shù)據(jù)潛能的挖掘的最大限制就是算力，而現(xiàn)如今，存儲(chǔ)日益成為一大限制因素。
隨著非機(jī)構(gòu)化數(shù)據(jù)的的不斷涌現(xiàn)，存儲(chǔ)這一限制則越發(fā)明顯，而據(jù)Gartner數(shù)據(jù)顯示，目前全世界80%的數(shù)據(jù)是非結(jié)構(gòu)化數(shù)據(jù)；同樣，IDC也預(yù)測(cè)，截至到2023年，文件和對(duì)象數(shù)據(jù)的容量將增長(zhǎng)3倍，且90%的新企業(yè)的應(yīng)用將是基于云原生設(shè)計(jì)的。
而這也就對(duì)非結(jié)構(gòu)化數(shù)據(jù)的存儲(chǔ)、使用和管理提出了更高要求，同時(shí)也對(duì)存儲(chǔ)基礎(chǔ)設(shè)施的性能和可擴(kuò)展性提出了前所未有的挑戰(zhàn)。
給企業(yè)用戶提供一個(gè)高效、高可用、高可靠的存儲(chǔ)產(chǎn)品，則成為了存儲(chǔ)廠商發(fā)力的重點(diǎn)。
“今天的非結(jié)構(gòu)化數(shù)據(jù)可謂‘無(wú)處不在’”。
在戴爾科技集團(tuán)大中華區(qū)非結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)事業(yè)部技術(shù)總監(jiān)胡淵汶看來(lái)，企業(yè)和機(jī)構(gòu)的非結(jié)構(gòu)化數(shù)據(jù)主要就有三大部分：
一是IT部門管理的數(shù)據(jù)，包括文件共享，主目錄，文件檔案庫(kù)，甚至包括視頻監(jiān)控；
二是行業(yè)應(yīng)用的數(shù)據(jù)，包括媒體里面有4K編輯、播出系統(tǒng)和媒資系統(tǒng)，生命科學(xué)有基因測(cè)序分析、石油能源、氣象、地震的高性能計(jì)算，EDA、ADAS（汽車自動(dòng)駕駛輔助系統(tǒng)），銀行影像系統(tǒng)等等；
三是大量的新興業(yè)務(wù)產(chǎn)生的數(shù)據(jù)，特別是隨著企業(yè)采用新的應(yīng)用架構(gòu)、微服務(wù)、容器等技術(shù)，傳統(tǒng)的存儲(chǔ)解決方案和數(shù)據(jù)庫(kù)無(wú)法提供這些新應(yīng)用和新架構(gòu)所需的簡(jiǎn)易性和靈活性。
在這一背景下，對(duì)象存儲(chǔ)由于主要操作對(duì)象是對(duì)象（Object），它既能夠像塊存儲(chǔ)一樣高效檢索，又能像文件存儲(chǔ)一樣極致擴(kuò)展，結(jié)合了塊和文件存儲(chǔ)的優(yōu)勢(shì)，受到了市場(chǎng)不斷的認(rèn)可。其存儲(chǔ)協(xié)議，也是大家熟知的S3、Swift等。
戴爾科技集團(tuán)大中華區(qū)非結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)事業(yè)部技術(shù)總監(jiān)胡淵汶
胡淵汶表示：“對(duì)象存儲(chǔ)由于其具有高擴(kuò)展性和易管理的特性，作為企業(yè)存儲(chǔ)戰(zhàn)略的關(guān)鍵元素，對(duì)象存儲(chǔ)已經(jīng)成為更多企業(yè)在數(shù)字化轉(zhuǎn)型中的第一選擇。”
同時(shí)，越來(lái)越多的公有云廠商把對(duì)象存儲(chǔ)當(dāng)做“云存儲(chǔ)”在售賣。
但在實(shí)際應(yīng)用中，雖然公有云的對(duì)象存儲(chǔ)服務(wù)有其優(yōu)勢(shì)，但考慮到安全合規(guī)以及帶寬成本等問題，企業(yè)傾向于部署企業(yè)私有的對(duì)象存儲(chǔ)方案。
胡淵汶介紹說(shuō)，在企業(yè)私有化部署場(chǎng)景中，對(duì)象存儲(chǔ)主要有兩類用法，一類是面向傳統(tǒng)場(chǎng)景提供歸檔存儲(chǔ)。另外一類，面向現(xiàn)代化的應(yīng)用程序，比如互聯(lián)網(wǎng)大數(shù)據(jù)分析、AI等場(chǎng)景，比如云原生架構(gòu)這類負(fù)載。
第一類用法利用的是對(duì)象存儲(chǔ)低成本以及寫入少讀取多（WORM）的特性；第二類主要利用其高擴(kuò)展性和高靈活性的優(yōu)點(diǎn)，更為關(guān)鍵的是，就是其存儲(chǔ)協(xié)議支持S3，而大多數(shù)現(xiàn)代化應(yīng)用和云原生應(yīng)用都能夠兼容S3，這就讓對(duì)象存儲(chǔ)有了更多的“用武之地”。
此外，為了克服對(duì)象存儲(chǔ)性能上的不足，業(yè)內(nèi)近幾年來(lái)開始嘗試用全閃存來(lái)提升性能，性能型的對(duì)象存儲(chǔ)成為趨勢(shì)后，應(yīng)用場(chǎng)景將進(jìn)一步擴(kuò)大。
當(dāng)前，對(duì)象存儲(chǔ)越來(lái)越快的走入到了企業(yè)的應(yīng)用場(chǎng)景之中，并在各個(gè)方面擔(dān)當(dāng)“重任”。
隨著非結(jié)構(gòu)數(shù)據(jù)呈現(xiàn)指數(shù)級(jí)的增長(zhǎng)，對(duì)于面向企業(yè)的對(duì)象存儲(chǔ)產(chǎn)品提供了更多更高的要求。
基于對(duì)企業(yè)用戶的需求，戴爾科技集團(tuán)更新了旗下的企業(yè)級(jí)對(duì)象存儲(chǔ)平臺(tái)——戴爾易安信ECS。
據(jù)胡淵汶介紹，ECS采用橫向擴(kuò)展式架構(gòu)，在容量、對(duì)象數(shù)量、文件規(guī)?；蚬?jié)點(diǎn)數(shù)量等方面無(wú)限制，因此無(wú)論行業(yè)客戶的數(shù)據(jù)中心位于何處，都可以輕松跟上指數(shù)級(jí)數(shù)據(jù)增長(zhǎng)的步伐，同時(shí)也只需以類似于公有云的規(guī)模添加新節(jié)點(diǎn)和支持工作負(fù)載，就能同時(shí)實(shí)現(xiàn)私有云基礎(chǔ)架構(gòu)的可靠性和控制。
由此也實(shí)現(xiàn)了更好的TCO成本，數(shù)據(jù)顯示，與行業(yè)領(lǐng)先的公有云提供商相比，通過(guò)ECS構(gòu)建一個(gè)對(duì)象存儲(chǔ)云，總擁有成本可降低59.5%。
同時(shí)，它還具備全球可訪問能力，支持8個(gè)站點(diǎn)的虛擬數(shù)據(jù)中心的聯(lián)合；此外，ECS采用Active-active架構(gòu)，支持XOR等能力，也帶來(lái)更加簡(jiǎn)化的管理；ECS還能充當(dāng)二級(jí)存儲(chǔ)，為關(guān)鍵業(yè)務(wù)應(yīng)用釋放昂貴的主存儲(chǔ)資源。
在存儲(chǔ)協(xié)議方面，ECS支持包括S3、NFS、SMB、CIFS、Swift、CAS、ATMOS、HDFS等多協(xié)議，同時(shí)也能通過(guò)RESTful API來(lái)支持云原生的應(yīng)用，這樣就能適應(yīng)目前企業(yè)往云原生轉(zhuǎn)型的趨勢(shì)；更為關(guān)鍵的是，多協(xié)議支持和良好的互操作性，企業(yè)也可以借助ECS構(gòu)建現(xiàn)代數(shù)據(jù)湖，進(jìn)而通過(guò)數(shù)據(jù)湖實(shí)現(xiàn)Splunk分析，以及流數(shù)據(jù)分析存儲(chǔ)等能力。
在數(shù)據(jù)安全保護(hù)方面，ECS內(nèi)置了數(shù)據(jù)保護(hù)功能，具有靜態(tài)數(shù)據(jù)加密、糾刪碼、三重鏡像等功能，能夠使得存儲(chǔ)平臺(tái)安全性增強(qiáng)，同時(shí)還新增了更多的安全能力，包括支持新的安全管理員角色，能夠?qū)⑻囟ǖ氖褂脵?quán)和特權(quán)授予安全管理員；提供了新的安全API，不僅方便自動(dòng)化地報(bào)告安全設(shè)置，同時(shí)企業(yè)也能將ECS整合到已有的安全解決方案中；此外，也支持外部的密匙管理器，幫助企業(yè)滿足合規(guī)要求。
在部署方面，ECS支持軟件定義模式部署，也可以通過(guò)一體機(jī)這種“交鑰匙”的方式部署，同時(shí)服務(wù)供應(yīng)商也能通過(guò)ECS提供相應(yīng)的部署，靈活的部署方式，可以讓企業(yè)擁有更好的可擴(kuò)展性、性能、彈性和經(jīng)濟(jì)性，真正滿足了企業(yè)現(xiàn)代化應(yīng)用的需求。
除此之外，ECS還能夠定制元數(shù)據(jù)，內(nèi)置元數(shù)據(jù)搜索功能，可以支持多達(dá)30個(gè)元數(shù)據(jù)字段，不但可以快速輕松定位數(shù)據(jù)，也能支持元數(shù)據(jù)更加精細(xì)的搜索。
值得注意的是，ECS還具有強(qiáng)一致性的多站點(diǎn)訪問能力，能夠通過(guò)全局命名空間，讓任意數(shù)據(jù)可以在任意站點(diǎn)進(jìn)行讀寫，支持應(yīng)用訪問無(wú)縫切換。
“ECS的多站點(diǎn)和強(qiáng)一致性能力，能夠給前端業(yè)務(wù)帶來(lái)很大的便利性，不需要處理很復(fù)雜的一致性的關(guān)系，就能實(shí)現(xiàn)數(shù)據(jù)的完整性、數(shù)據(jù)一致性的保證?！贝鳡柨萍技瘓F(tuán)大中華區(qū)非結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)事業(yè)部資深系統(tǒng)工程師白光茁說(shuō)到。
隨著云原生相關(guān)理念的逐步升溫，越來(lái)越多的企業(yè)都將目光瞄向了對(duì)象存儲(chǔ)。
據(jù)IDC《2020年Q2，中國(guó)軟件定義存儲(chǔ)及超融合存儲(chǔ)系統(tǒng)市場(chǎng)季度跟蹤報(bào)告》顯示，SDS在2020年上半年較去年同期實(shí)現(xiàn)38.3%增長(zhǎng)，其中對(duì)象存儲(chǔ)出貨比例增長(zhǎng)46%，超過(guò)軟件定義存儲(chǔ)市場(chǎng)總體增長(zhǎng)率，對(duì)象存儲(chǔ)是存儲(chǔ)市場(chǎng)增長(zhǎng)的新動(dòng)力。
這表明著越來(lái)越多的企業(yè)都開始選擇使用對(duì)象存儲(chǔ)，據(jù)胡淵汶介紹，海通證券利用ECS對(duì)象存儲(chǔ)的擴(kuò)展性建立了存儲(chǔ)資源池，不僅降低了初期成本投入和TCO ，還解決了傳統(tǒng)磁帶庫(kù)性能低下、可靠性不足等問題，同時(shí)還獲得了數(shù)據(jù)全生命周期管理能力，更為后續(xù)在業(yè)務(wù)中融入人工智能等技術(shù)做好了準(zhǔn)備。
胡淵汶認(rèn)為，企業(yè)在對(duì)舊的定制應(yīng)用系統(tǒng)做現(xiàn)代化改造時(shí)，最好的做法是改變應(yīng)用使用存儲(chǔ)的方式。
因?yàn)榛贜AS文件存儲(chǔ)來(lái)開發(fā)傳統(tǒng)應(yīng)用的體系其實(shí)非常復(fù)雜，有幾個(gè)應(yīng)用就需要對(duì)應(yīng)有幾套文件系統(tǒng)，甚至還有五花八門的專有API，這導(dǎo)致應(yīng)用開發(fā)和存儲(chǔ)管理的成本都很高。而且，許多應(yīng)用都只能本地使用，無(wú)法以Web應(yīng)用和移動(dòng)應(yīng)用方式來(lái)訪問，非常不現(xiàn)代化。
現(xiàn)代化的云原生應(yīng)用中直接使用對(duì)象存儲(chǔ)來(lái)存儲(chǔ)數(shù)據(jù)，數(shù)據(jù)繞過(guò)Web服務(wù)器，直接通過(guò)API存取數(shù)據(jù)到對(duì)象存儲(chǔ)，開發(fā)過(guò)程簡(jiǎn)化。而且對(duì)象存儲(chǔ)的管理成本很低，一個(gè)人就能輕松管理PB級(jí)的數(shù)據(jù)。配合對(duì)象存儲(chǔ)，云原生架構(gòu)會(huì)使得企業(yè)軟件的開發(fā)迭代速度變得非?？臁?/p>
從胡淵汶的介紹中了解到，國(guó)內(nèi)某大型商業(yè)銀行的手機(jī)銀行有許多新應(yīng)用需要大量頻繁迭代，于是，該銀行逐步把這部分業(yè)務(wù)轉(zhuǎn)型為云原生業(yè)務(wù)，底層存儲(chǔ)中采用了ECS，存放著超過(guò)100億個(gè)對(duì)象，每天大概要接受2億左右的請(qǐng)求，在ECS之上部署了200多個(gè)應(yīng)用。
該銀行的應(yīng)用開發(fā)部署的節(jié)奏明顯加快，最多一個(gè)季度上線了50個(gè)應(yīng)用這在以前是不可想象的，這是云原生架構(gòu)以及對(duì)象存儲(chǔ)技術(shù)的價(jià)值體現(xiàn)。（雷鋒網(wǎng)雷鋒網(wǎng)雷鋒網(wǎng)）
雷峰網(wǎng)原創(chuàng)文章，未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。
