0
從2006年，AWS公開(kāi)發(fā)布S3存儲(chǔ)服務(wù)、SQS消息隊(duì)列及EC2虛擬機(jī)服務(wù)開(kāi)始，云計(jì)算已經(jīng)走過(guò)了十余年的發(fā)展歷史，中國(guó)的數(shù)百萬(wàn)家大中小型企業(yè)也在云計(jì)算的浪潮中逐步摸索著最合適自己的IT模式。
很多企業(yè)從IDC托管到私有云、公有云、混合云，追隨著時(shí)代不斷革新自己的IT系統(tǒng)，尋求最高效率的IT架構(gòu)；很多企業(yè)在面對(duì)自身超復(fù)雜業(yè)務(wù)場(chǎng)景時(shí)，為了追求系統(tǒng)穩(wěn)定，選擇不同云服務(wù)商進(jìn)行跨云災(zāi)備和業(yè)務(wù)雙活；還有很多企業(yè)將自己的不同業(yè)務(wù)系統(tǒng)部署在不同的云服務(wù)商，以避免單一廠商對(duì)自己業(yè)務(wù)和數(shù)據(jù)的深度綁定，使得IT管理更靈活。
面對(duì)這一系列的業(yè)務(wù)需求變化導(dǎo)致的IT變革，多云正式走入了云計(jì)算的舞臺(tái)中央。
多云不是趨勢(shì)，已是事實(shí)。
根據(jù)《Flexera 2021 State of the Cloud Report》的數(shù)據(jù)，目前有92%的大型企業(yè)在使用多云，7%使用一朵公有云，1%使用一朵私有云。
隨著IT系統(tǒng)的不斷演進(jìn)和業(yè)務(wù)需求的高速發(fā)展，企業(yè)面對(duì)著多云時(shí)代的龐大IT系統(tǒng)，亟待在困境中尋求解決之道：
首先，傳統(tǒng)的基礎(chǔ)設(shè)施管理已經(jīng)變成了各種云服務(wù)的管理，如何在成百上千種云服務(wù)中尋找高效的管理方式？
再者，業(yè)務(wù)持續(xù)增長(zhǎng)，應(yīng)用架構(gòu)越來(lái)越復(fù)雜，如何在多個(gè)云的不同云資源中快速構(gòu)建完整的應(yīng)用系統(tǒng)架構(gòu)？
第三，市場(chǎng)需求千變?nèi)f化，業(yè)務(wù)模式日新月異，如何使龐大的IT系統(tǒng)能夠跟上市場(chǎng)的變化，讓“大象”敏捷轉(zhuǎn)身，甚至敏捷奔跑？
2019年開(kāi)始，達(dá)達(dá)啟動(dòng)了多云戰(zhàn)略，構(gòu)建云原生體系，跨云管理，跨云雙活，歷時(shí)3年，與京東云一起探尋超大規(guī)模資源的調(diào)度管理模式，尋找高IT效率下的最優(yōu)部署方式，尋逐艱難卻必須要走的跨云遷移之路。
多云戰(zhàn)略啟動(dòng)伊始，達(dá)達(dá)集團(tuán)旗下的兩大核心業(yè)務(wù)，達(dá)達(dá)快送與京東到家，其即時(shí)配送和電商系統(tǒng)都部署在公有云上，隨著達(dá)達(dá)業(yè)務(wù)快速增長(zhǎng)，基礎(chǔ)業(yè)務(wù)和安全風(fēng)控壓力逐漸增大，原有云服務(wù)商的算力和存儲(chǔ)也面臨資源短缺。
因此，達(dá)達(dá)技術(shù)團(tuán)隊(duì)將部分算力和存儲(chǔ)遷移至京東云上，使得上下游業(yè)務(wù)連接更緊密，實(shí)現(xiàn)計(jì)算資源高彈性、成本壓縮與業(yè)務(wù)穩(wěn)定。遷移過(guò)程中，達(dá)達(dá)集團(tuán)旗下達(dá)達(dá)快送對(duì)原有的技術(shù)架構(gòu)進(jìn)行全面梳理與革新，實(shí)現(xiàn)傳統(tǒng)架構(gòu)向云原生體系的升級(jí)。
同時(shí)，完成向京東云的首批遷移后，達(dá)達(dá)與京東物流的信息交互可以通過(guò)公有云的內(nèi)網(wǎng)通道實(shí)現(xiàn)，規(guī)避了公網(wǎng)波動(dòng)，提升了穩(wěn)定的同時(shí)，大幅節(jié)省了網(wǎng)絡(luò)成本。
至此，達(dá)達(dá)走出了多云戰(zhàn)略的第一步。
云原生體系的搭建幫助達(dá)達(dá)實(shí)現(xiàn)了跨云管理，融合自身運(yùn)維、運(yùn)營(yíng)、安全等一系列多云架構(gòu)的擴(kuò)展需求，將多云資源向業(yè)務(wù)層邏輯化供給，屏蔽了底層異構(gòu)性。
云上遷移過(guò)程中，京東云為達(dá)達(dá)提供了4條專(zhuān)線以承載跨云間的數(shù)據(jù)傳輸服務(wù)，同時(shí)在網(wǎng)絡(luò)劃分、路由編寫(xiě)、對(duì)接打通等領(lǐng)域幫助達(dá)達(dá)解決了遷移過(guò)程中大量高可用問(wèn)題。同時(shí)，為了提升業(yè)務(wù)的穩(wěn)定性和抗風(fēng)險(xiǎn)能力，達(dá)達(dá)在京東云上完成了數(shù)據(jù)庫(kù)備份和網(wǎng)絡(luò)高可用設(shè)計(jì)。
另外，面對(duì)來(lái)自IaaS層的安全防護(hù)需求，達(dá)達(dá)與京東云共同創(chuàng)建了立體化的業(yè)務(wù)防護(hù)體系，1年內(nèi)，成功抵御了近20億次Web攻擊，發(fā)現(xiàn)上百個(gè)漏洞并提供專(zhuān)業(yè)修復(fù)和加固建議。同時(shí)面對(duì)達(dá)達(dá)來(lái)自業(yè)務(wù)層面的風(fēng)險(xiǎn)控制需求，京東云打造的實(shí)時(shí)業(yè)務(wù)風(fēng)險(xiǎn)識(shí)別安全體系，全面提升業(yè)務(wù)交易流程中的風(fēng)險(xiǎn)識(shí)別能力，降低黑灰產(chǎn)交易比例。
達(dá)達(dá)通過(guò)上云遷移實(shí)現(xiàn)了多云架構(gòu)的雛形，但這種不夠徹底的多個(gè)云模式的弊病也逐漸顯現(xiàn)，每個(gè)云上的業(yè)務(wù)就像一個(gè)煙囪，與其他系統(tǒng)隔離，這種架構(gòu)導(dǎo)致業(yè)務(wù)系統(tǒng)各自為戰(zhàn)，一方面降低了云資源的使用效率，一方面也減弱了云計(jì)算原本的快速便捷的優(yōu)勢(shì)，使得達(dá)達(dá)這種“多個(gè)云”模式的整體資源成本不斷攀升。
除了資源成本不斷攀升，達(dá)達(dá)還面臨另外一個(gè)難題。
達(dá)達(dá)的業(yè)務(wù)涉及電商與物流兩個(gè)融合場(chǎng)景，大促時(shí)既要面臨訂單峰值激增，又要保證快遞員短時(shí)高效準(zhǔn)確送達(dá)，平臺(tái)智能訂單分發(fā)系統(tǒng)和運(yùn)力供需調(diào)控系統(tǒng)受到極大挑戰(zhàn)。任何業(yè)務(wù)系統(tǒng)的不可用事件都會(huì)引起線上與線下的連鎖反應(yīng)，嚴(yán)重時(shí)會(huì)導(dǎo)致系統(tǒng)宕機(jī)，業(yè)務(wù)癱瘓。
在物流、電商等多個(gè)平臺(tái)的超復(fù)雜場(chǎng)景下，達(dá)達(dá)要兼顧資源成本和業(yè)務(wù)穩(wěn)定性的雙重壓力。此時(shí)，跨云雙活解決方案走進(jìn)了達(dá)達(dá)的視野。
借助京東云混合多云操作系統(tǒng)云艦的跨云多活能力，達(dá)達(dá)完成跨云雙活架構(gòu)的搭建，通過(guò)注冊(cè)中心多云部署，業(yè)務(wù)就近注冊(cè)和調(diào)度，實(shí)現(xiàn)跨云平臺(tái)的業(yè)務(wù)自由切換。除了跨云管理之外，跨云雙活架構(gòu)可以在多云一致的云原生運(yùn)行環(huán)境下，通過(guò)高效調(diào)度，提升資源利用率，實(shí)現(xiàn)生產(chǎn)效能升遷，顯著降低IT資源成本。跨云雙活架構(gòu)從根本上解決了多個(gè)云模式下煙囪式架構(gòu)所帶來(lái)的資源利用率低下的問(wèn)題。
至此，達(dá)達(dá)完成了多云戰(zhàn)略的第二步。
建立跨云雙活架構(gòu)，每年為達(dá)達(dá)節(jié)省千萬(wàn)的IT成本； 跨云雙活架構(gòu)下，達(dá)達(dá)又在京東云的幫助下實(shí)現(xiàn)了兩個(gè)關(guān)鍵技術(shù)的突破。
一是數(shù)據(jù)庫(kù)的雙向復(fù)制。達(dá)達(dá)龐大的用戶規(guī)模使得訂單表和用戶表數(shù)據(jù)量突破上億條，此時(shí)數(shù)據(jù)庫(kù)的IO能力、處理能力遇到瓶頸。將數(shù)據(jù)庫(kù)進(jìn)行分庫(kù)分表，可以規(guī)避性能極限，同時(shí)實(shí)現(xiàn)跨云的雙向復(fù)制。達(dá)達(dá)按照CityID進(jìn)行分庫(kù)分表，跨云切換時(shí)，以城市為單位進(jìn)行流量切換，確保系統(tǒng)數(shù)據(jù)的一致性，降低延時(shí)。
二是流量分發(fā)優(yōu)化。打通隨時(shí)配和落地配兩個(gè)業(yè)務(wù)之間的VPC對(duì)等連接，使用私有IP地址在兩個(gè)VPC之間路由流量實(shí)現(xiàn)VPC中實(shí)例的彼此通信。這樣的VPC對(duì)等連接既不是網(wǎng)關(guān)也不是VPN，不依賴某一單獨(dú)的物理硬件，沒(méi)有單點(diǎn)通信故障也沒(méi)有帶寬瓶頸。
達(dá)達(dá)通過(guò)跨云雙活實(shí)現(xiàn)了降本增效，每年節(jié)約千萬(wàn)級(jí)IT資源，但同時(shí)這一多云雙活架構(gòu)也不斷面臨著新的挑戰(zhàn)，新業(yè)務(wù)系統(tǒng)上線帶來(lái)的架構(gòu)調(diào)整，大促等流量爆發(fā)帶來(lái)的性能瓶頸，都不斷考驗(yàn)著目前系統(tǒng)架構(gòu)的最優(yōu)性。
跨云雙活還不是終點(diǎn)，達(dá)達(dá)和京東云的技術(shù)團(tuán)隊(duì)仍在不斷探索多云的更優(yōu)路徑。
跨云遷移不只是跨云搬遷，而是與業(yè)務(wù)應(yīng)用重構(gòu)和跨云容災(zāi)相結(jié)合，通過(guò)云原生操作系統(tǒng)屏蔽異構(gòu)化問(wèn)題，增加了多云遷移的靈活性和動(dòng)態(tài)性，降低了遷移成本，實(shí)現(xiàn)跨云遷移在業(yè)務(wù)層面的無(wú)感知。
達(dá)達(dá)業(yè)務(wù)的實(shí)時(shí)性和用戶的超強(qiáng)感知性，決定了其平臺(tái)對(duì)于系統(tǒng)穩(wěn)定性的超高要求。為了應(yīng)對(duì)業(yè)務(wù)變化對(duì)于多云架構(gòu)的實(shí)時(shí)考驗(yàn)，京東云通過(guò)技術(shù)創(chuàng)新和場(chǎng)景實(shí)踐，打造了一套標(biāo)準(zhǔn)化的跨云遷移方案，確保跨云遷移和多云架構(gòu)調(diào)整過(guò)程中，業(yè)務(wù)零感知，實(shí)現(xiàn)了上云，下云，多云，災(zāi)備，雙活的“選擇自由”和“切換自由”。
無(wú)感知式跨院遷移的第一個(gè)門(mén)檻來(lái)自于遷移的分批策略如何更好的對(duì)業(yè)務(wù)系統(tǒng)拆解分批，以最大化的降低遷移服務(wù)不可用對(duì)實(shí)際業(yè)務(wù)造成的影響。京東云-云泰混沌工程平臺(tái)可以模擬某一遷移批次服務(wù)不可用，在此情況下實(shí)際驗(yàn)證其他服務(wù)受到的影響，然后根據(jù)測(cè)試結(jié)果再來(lái)不斷的優(yōu)化遷移策略，然后再次驗(yàn)證，直到完成最終的遷移批次劃分方案。
無(wú)感知式跨云遷移的另外一個(gè)瓶頸來(lái)自數(shù)據(jù)庫(kù)的遷移，達(dá)達(dá)有100多個(gè)Redis集群，1000余個(gè)實(shí)例需要完成跨云遷移并能保持?jǐn)?shù)據(jù)實(shí)時(shí)同步。京東云自研的跨云遷移工具RedisSyncer可以完成redis之間數(shù)據(jù)同步，支持跨版本、異構(gòu)集群間的數(shù)據(jù)同步，能夠適應(yīng)云上與云下、原生與托管等多種場(chǎng)景，滿足數(shù)據(jù)庫(kù)遷移過(guò)程中的同步、擴(kuò)容等需求。
基于業(yè)務(wù)的動(dòng)態(tài)變化和多云架構(gòu)的調(diào)整，截至2022年4月，達(dá)達(dá)已經(jīng)在京東云部署了超5萬(wàn)核計(jì)算資源，實(shí)現(xiàn)落地配，即時(shí)配和電商系統(tǒng)的全面多云化，每年節(jié)省千萬(wàn)級(jí)IT成本，運(yùn)維效率提升30%。
歷時(shí)3年的多云戰(zhàn)略實(shí)踐，達(dá)達(dá)攜手京東云交出了一份滿意的答卷。
作為產(chǎn)業(yè)數(shù)智化的先行者，京東云基于零售、物流、健康、工業(yè)、園區(qū)等復(fù)雜場(chǎng)景的磨煉，持續(xù)輸出更貼近業(yè)務(wù)場(chǎng)景的產(chǎn)品服務(wù)產(chǎn)業(yè)客戶。京東混合云操作系統(tǒng)云艦可以提供多個(gè)公有云、多個(gè)私有云、混合云以及各種異構(gòu)資源的統(tǒng)一運(yùn)行環(huán)境。向下可以融合混合多云環(huán)境，屏蔽多云差異、實(shí)現(xiàn)多云一體、應(yīng)用一致運(yùn)行；向上可以提供業(yè)務(wù)所需能力，以PaaS輸出各類(lèi)數(shù)智化組件，保證PaaS應(yīng)用在多云有完全一致的體驗(yàn)。一方面提升了資源管理和運(yùn)維效率，一方面保證了業(yè)務(wù)系統(tǒng)的靈活性。
多云已經(jīng)成為IT架構(gòu)的新寵，在商業(yè)上獲得更具性價(jià)比的服務(wù)，在技術(shù)上增加靈活性、可拓展性和穩(wěn)定性。京東云作為云原生領(lǐng)先實(shí)踐者及受益者，將持續(xù)向行業(yè)輸出在多云領(lǐng)域的探索和成果，幫助更多企業(yè)實(shí)現(xiàn)可持續(xù)發(fā)展。
雷峰網(wǎng)(公眾號(hào)：雷峰網(wǎng))
雷峰網(wǎng)版權(quán)文章，未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見(jiàn)轉(zhuǎn)載須知。
