0
本文作者: 呂倩 | 2018-01-10 14:59 |
1月9日,阿里云宣布推出新一代高性能企業(yè)級(jí)存儲(chǔ)產(chǎn)品家族,并對(duì)分布式存儲(chǔ)引擎進(jìn)行了全面升級(jí)。后者包括塊存儲(chǔ)、對(duì)象存儲(chǔ)在內(nèi)的云存儲(chǔ)家族,混合云存儲(chǔ)陣列、混合云容災(zāi)的混合云存儲(chǔ)服務(wù),以及高性能分布式專有存儲(chǔ)方案。
升級(jí)具體應(yīng)用在性能、可靠性、成本、自動(dòng)化運(yùn)維等方面,最終實(shí)現(xiàn)在底層提供微秒級(jí)延遲與百億級(jí)IOPS(Input/Output Operations Per Second,即每秒進(jìn)行讀寫操作的次數(shù),多用于數(shù)據(jù)庫等場(chǎng)合,衡量隨機(jī)訪問的性能)?;谌乱淮植际揭?,相比上一代整體IOPS性能提升50%,并新增ESSD云盤、極速型OSS、NAS Plus等新品。
阿里云資深總監(jiān)Jason吳結(jié)生于現(xiàn)場(chǎng)表示,互聯(lián)網(wǎng)的應(yīng)用、電商、支付寶,以及萬物互聯(lián),促進(jìn)整個(gè)數(shù)據(jù)大爆炸,加快數(shù)據(jù)采集速度。這對(duì)于存儲(chǔ)行業(yè)人士來講,既是機(jī)遇也是挑戰(zhàn)。數(shù)據(jù)爆炸時(shí)代,存儲(chǔ)系統(tǒng)應(yīng)該如何應(yīng)對(duì)挑戰(zhàn)?
Jason表示,阿里云將新時(shí)代存儲(chǔ)系統(tǒng)標(biāo)準(zhǔn)定為4V:
第一個(gè)V就是容量(Volume at Scale),怎樣提供一個(gè)存儲(chǔ)系統(tǒng)來存儲(chǔ)所有的數(shù)據(jù),而且用戶的數(shù)據(jù)不能刪。
第二個(gè)V是速度(Velocity at Scale),即當(dāng)數(shù)據(jù)產(chǎn)生的速度越來越快,包括IOT產(chǎn)生的數(shù)據(jù)速度,互聯(lián)網(wǎng)汽車產(chǎn)生數(shù)據(jù)的速度等,阿里云存儲(chǔ)系統(tǒng)需要跟數(shù)據(jù)產(chǎn)生的速度進(jìn)行匹配。
第三個(gè)V就是多樣性(Variety at Scale ),手機(jī)、跑步機(jī)、汽車等不同設(shè)備,都會(huì)產(chǎn)生數(shù)據(jù),數(shù)據(jù)產(chǎn)生的多樣性越來越多,這也要求存儲(chǔ)系統(tǒng)進(jìn)行相應(yīng)匹配。
第四個(gè)V就是普惠(Value at Scale),即讓存儲(chǔ)系統(tǒng)高可靠、高可用,能夠讓每位用戶或者每個(gè)應(yīng)用都享受得到。普惠的另外一層意義,就是怎樣讓存儲(chǔ)成本不斷下降,讓用戶持續(xù)地保存更多的數(shù)據(jù)。
Jason回顧自2008年,阿里云組建團(tuán)隊(duì),探索通過存儲(chǔ)系統(tǒng)滿足阿里集團(tuán)內(nèi)部業(yè)務(wù),包括虛擬機(jī)、阿里金融、郵箱搜索等。2009年阿里云團(tuán)隊(duì)開始創(chuàng)建分布式存儲(chǔ)1.0,主要面對(duì)阿里集團(tuán)內(nèi)部挑戰(zhàn),提供虛擬機(jī)存儲(chǔ)服務(wù)。
據(jù)雷鋒網(wǎng)了解,隨著技術(shù)演進(jìn)與業(yè)務(wù)擴(kuò)大,2015年,阿里云存儲(chǔ)引擎在五千臺(tái)機(jī)器基礎(chǔ)上進(jìn)行升級(jí),支持五千臺(tái)機(jī)器存儲(chǔ)集成,并首次在377秒過程中完成100TB的數(shù)據(jù)排序。
2016年,阿里云將存儲(chǔ)規(guī)模和存儲(chǔ)系統(tǒng)進(jìn)行升級(jí),支持1萬臺(tái)機(jī)器的存儲(chǔ)規(guī)模。2018年,阿里云即將發(fā)布分布式存儲(chǔ)引擎2.0,內(nèi)部代號(hào)盤古2.0,其出發(fā)點(diǎn)就是面向人工智能、面向新一代的存儲(chǔ)應(yīng)用場(chǎng)景,構(gòu)建下一代存儲(chǔ)引擎。
Jason表示,新一代阿里云存儲(chǔ)引擎,要打造世界上最全的存儲(chǔ)產(chǎn)品系列,包括對(duì)象、文件、塊、表格等各種存儲(chǔ)格式,且每個(gè)存儲(chǔ)陣列里都有不同忠烈,形成完全的產(chǎn)品矩陣,“這是第一條公有云產(chǎn)品矩陣?!?/p>
其次,阿里云也在打造混合云產(chǎn)品線——即如何把線下存儲(chǔ)和線上存儲(chǔ)連很好地銜接起來。
第三條產(chǎn)品線,就是阿里云專有云與企業(yè)存儲(chǔ)——做到將云上分布式存儲(chǔ)能力,輸入到用戶自己的數(shù)據(jù)中心內(nèi)。
Jason表示,安全對(duì)于阿里云來講,是始終堅(jiān)持的最重要功能——多層次、全鏈路、全方位的安全。即從整體安全機(jī)制來看,阿里云提供業(yè)務(wù)安全、安全運(yùn)營、數(shù)據(jù)安全、網(wǎng)絡(luò)安全、應(yīng)用安全、主機(jī)安全和帳戶安全,以及底層數(shù)據(jù)中心安全。
第一,不需要改動(dòng)任何的代碼就可以上云,就是說應(yīng)用通過網(wǎng)絡(luò)文件系統(tǒng)提供網(wǎng)絡(luò)文件系統(tǒng),就可以讓你的代碼不需要做任何的改動(dòng)就可以上云。
第二,完全的脫管服務(wù),也就是說你不需要自己來看容量的規(guī)劃,或者你需要擴(kuò)容你也不需要做操作系統(tǒng),要找到安全的等,安全運(yùn)維方面工作都可以省掉,也不需要去做備份我們有一套備份的系統(tǒng)能夠把你數(shù)據(jù)做備份。
第三,開通方便,Jason表示,數(shù)據(jù)爆發(fā)時(shí)代,云存儲(chǔ)標(biāo)準(zhǔn)除了上文所提的4V之外,易用性是普惠最重要的一點(diǎn)。
今天的云計(jì)算發(fā)展。包括云存儲(chǔ)。面臨各種各樣新企業(yè)、新金融、新零售、新制造、人工智能、生命科學(xué)等挑戰(zhàn),這些應(yīng)用與場(chǎng)景給云計(jì)算帶來廣泛的需求,包括低延時(shí)需求,在光譜情景范圍內(nèi)各種不同需求等。
據(jù)雷鋒網(wǎng)了解,正是在這樣的情況下,阿里云存儲(chǔ)提供各種不同存儲(chǔ)抽象,比如數(shù)據(jù)庫、塊存儲(chǔ)、對(duì)象存儲(chǔ)、表格存儲(chǔ)、人工智能、數(shù)據(jù)處理、抽象處理等,為不同行業(yè)提供廣譜動(dòng)力,來驅(qū)動(dòng)業(yè)務(wù)的發(fā)展。
阿里云存儲(chǔ)2.0引擎(內(nèi)部代號(hào)“盤古2.0”)也是為這規(guī)模而生的,引進(jìn)分布式原數(shù)據(jù)管理,使得可以輕松支持萬億級(jí)別文件,也可以輕松支持大量的小文件實(shí)現(xiàn)第一分布式原數(shù)據(jù)管理。同時(shí)實(shí)現(xiàn)更好的彈性部署,形成巨大的存儲(chǔ)池,將不同存儲(chǔ)介質(zhì)、不同的情形組合在一塊,形成一千PB、也就是億B級(jí)別的存儲(chǔ)容量出來。
一方面,Jason表示,阿里云存儲(chǔ)2.0引擎也是分層結(jié)構(gòu)——內(nèi)部有單機(jī)存儲(chǔ)層,中間是分布式存儲(chǔ)系統(tǒng),在上面做了一些文件接口的抽象,比如數(shù)據(jù)庫的文件系統(tǒng)、快存儲(chǔ)的文件系統(tǒng)、大數(shù)據(jù)的文件系統(tǒng)、Logfile文件接口等。再底下還有多個(gè)機(jī)房,在機(jī)房里裝有高速網(wǎng)絡(luò)互聯(lián),在這樣一個(gè)架構(gòu)里面可以使多個(gè)機(jī)房里的數(shù)據(jù)管理起來像一臺(tái)機(jī)器一樣,便捷地提供巨大的存儲(chǔ)池給上面的應(yīng)用。
其次,這個(gè)2.0引擎里第一次把阿里巴巴集團(tuán)Fusionengine融合進(jìn)來,更好地去適配各種不同的硬件,而且能夠更好地把這一種硬件的紅利釋放給客戶。
另外一個(gè)革命性的進(jìn)化,就是把存儲(chǔ)從毫秒時(shí)代進(jìn)化到微秒時(shí)代,2.0引擎支持微秒延時(shí)以及百億級(jí)別的IOR操作。
具體包括:
第一用戶度文件系統(tǒng)
第二高性能網(wǎng)絡(luò)庫
第三軟件極致的優(yōu)化,使得軟件開銷在鏈路里面占比不到10%
第四做了一些多流映射,把這帶寬提高3倍;做了一些動(dòng)態(tài)切換,提供更穩(wěn)定、更極致的性能
具體升級(jí)包括兩部分:
一個(gè)是硬件升級(jí)里,引入當(dāng)下最快的AVMVSD,也引入存儲(chǔ)級(jí)別的內(nèi)存MVDE,同時(shí)對(duì)網(wǎng)絡(luò)也進(jìn)行了升級(jí),使之也具備RDMA能力。
二是存儲(chǔ)系統(tǒng)的升級(jí),就是軟件系統(tǒng)升級(jí)。軟硬結(jié)合促使性能穩(wěn)定、整體能力達(dá)到一個(gè)世界第一的水準(zhǔn)。
性能表現(xiàn)方面,以ESSD超高性能云盤為例,其可提供單盤高達(dá)100萬的隨機(jī)讀寫能力,相比SSD云盤提升了50倍,是阿里云迄今為止性能最強(qiáng)的企業(yè)級(jí)塊存儲(chǔ)服務(wù),但售價(jià)不變,每GB每月僅需1元。
除了性能之外,線上線下的靈活拓展能力也變得越來越重要,數(shù)據(jù)在線產(chǎn)生的價(jià)值已經(jīng)成為了主流。阿里云存儲(chǔ)產(chǎn)品總監(jiān)許咼兢表示,線上線下存儲(chǔ)的邊界正在消失,阿里云要做的是在任何地方、以任何形式向不同企業(yè)提供高效的存儲(chǔ)解決方案。
據(jù)雷鋒網(wǎng)了解,阿里云已形成了一整套涵蓋公共云、混合云、專有云在內(nèi)的全線企業(yè)級(jí)高性能存儲(chǔ)產(chǎn)品線,并且提供在線和離線數(shù)據(jù)搬遷服務(wù)。此前,阿里云與國家天文臺(tái)合作,共同開展天文科學(xué)大數(shù)據(jù)研究。截至目前,國家天文臺(tái)將3.5億顆恒星的數(shù)據(jù)存儲(chǔ)在阿里云OSS上,用于計(jì)算、分析,并向公眾開放。
雷峰網(wǎng)原創(chuàng)文章,未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。