丁香五月天婷婷久久婷婷色综合91|国产传媒自偷自拍|久久影院亚洲精品|国产欧美VA天堂国产美女自慰视屏|免费黄色av网站|婷婷丁香五月激情四射|日韩AV一区二区中文字幕在线观看|亚洲欧美日本性爱|日日噜噜噜夜夜噜噜噜|中文Av日韩一区二区

您正在使用IE低版瀏覽器,為了您的雷峰網(wǎng)賬號安全和更好的產(chǎn)品體驗,強(qiáng)烈建議使用更快更安全的瀏覽器
此為臨時鏈接,僅用于文章預(yù)覽,將在時失效
業(yè)界 正文
發(fā)私信給嘉嘉
發(fā)送

0

達(dá)達(dá)“云上搬家”之旅

本文作者: 嘉嘉 2022-05-10 17:45
導(dǎo)語:達(dá)達(dá)超大規(guī)模資源跨云遷移實錄

從2006年,AWS公開發(fā)布S3存儲服務(wù)、SQS消息隊列及EC2虛擬機(jī)服務(wù)開始,云計算已經(jīng)走過了十余年的發(fā)展歷史,中國的數(shù)百萬家大中小型企業(yè)也在云計算的浪潮中逐步摸索著最合適自己的IT模式。

很多企業(yè)從IDC托管到私有云、公有云、混合云,追隨著時代不斷革新自己的IT系統(tǒng),尋求最高效率的IT架構(gòu);很多企業(yè)在面對自身超復(fù)雜業(yè)務(wù)場景時,為了追求系統(tǒng)穩(wěn)定,選擇不同云服務(wù)商進(jìn)行跨云災(zāi)備和業(yè)務(wù)雙活;還有很多企業(yè)將自己的不同業(yè)務(wù)系統(tǒng)部署在不同的云服務(wù)商,以避免單一廠商對自己業(yè)務(wù)和數(shù)據(jù)的深度綁定,使得IT管理更靈活。

面對這一系列的業(yè)務(wù)需求變化導(dǎo)致的IT變革,多云正式走入了云計算的舞臺中央。

多云時代,龐大IT系統(tǒng)背后的困局

多云不是趨勢,已是事實。

根據(jù)《Flexera 2021 State of the Cloud Report》的數(shù)據(jù),目前有92%的大型企業(yè)在使用多云,7%使用一朵公有云,1%使用一朵私有云。

達(dá)達(dá)“云上搬家”之旅

隨著IT系統(tǒng)的不斷演進(jìn)和業(yè)務(wù)需求的高速發(fā)展,企業(yè)面對著多云時代的龐大IT系統(tǒng),亟待在困境中尋求解決之道:

首先,傳統(tǒng)的基礎(chǔ)設(shè)施管理已經(jīng)變成了各種云服務(wù)的管理,如何在成百上千種云服務(wù)中尋找高效的管理方式?

再者,業(yè)務(wù)持續(xù)增長,應(yīng)用架構(gòu)越來越復(fù)雜,如何在多個云的不同云資源中快速構(gòu)建完整的應(yīng)用系統(tǒng)架構(gòu)?

第三,市場需求千變?nèi)f化,業(yè)務(wù)模式日新月異,如何使龐大的IT系統(tǒng)能夠跟上市場的變化,讓“大象”敏捷轉(zhuǎn)身,甚至敏捷奔跑?

2019年開始,達(dá)達(dá)啟動了多云戰(zhàn)略,構(gòu)建云原生體系,跨云管理,跨云雙活,歷時3年,與京東云一起探尋超大規(guī)模資源的調(diào)度管理模式,尋找高IT效率下的最優(yōu)部署方式,尋逐艱難卻必須要走的跨云遷移之路。

達(dá)達(dá)“云上搬家”之旅

云原生是多云架構(gòu)的地基

多云戰(zhàn)略啟動伊始,達(dá)達(dá)集團(tuán)旗下的兩大核心業(yè)務(wù),達(dá)達(dá)快送與京東到家,其即時配送和電商系統(tǒng)都部署在公有云上,隨著達(dá)達(dá)業(yè)務(wù)快速增長,基礎(chǔ)業(yè)務(wù)和安全風(fēng)控壓力逐漸增大,原有云服務(wù)商的算力和存儲也面臨資源短缺。

因此,達(dá)達(dá)技術(shù)團(tuán)隊將部分算力和存儲遷移至京東云上,使得上下游業(yè)務(wù)連接更緊密,實現(xiàn)計算資源高彈性、成本壓縮與業(yè)務(wù)穩(wěn)定。遷移過程中,達(dá)達(dá)集團(tuán)旗下達(dá)達(dá)快送對原有的技術(shù)架構(gòu)進(jìn)行全面梳理與革新,實現(xiàn)傳統(tǒng)架構(gòu)向云原生體系的升級。

同時,完成向京東云的首批遷移后,達(dá)達(dá)與京東物流的信息交互可以通過公有云的內(nèi)網(wǎng)通道實現(xiàn),規(guī)避了公網(wǎng)波動,提升了穩(wěn)定的同時,大幅節(jié)省了網(wǎng)絡(luò)成本。

至此,達(dá)達(dá)走出了多云戰(zhàn)略的第一步。

云原生體系的搭建幫助達(dá)達(dá)實現(xiàn)了跨云管理,融合自身運維、運營、安全等一系列多云架構(gòu)的擴(kuò)展需求,將多云資源向業(yè)務(wù)層邏輯化供給,屏蔽了底層異構(gòu)性。

云上遷移過程中,京東云為達(dá)達(dá)提供了4條專線以承載跨云間的數(shù)據(jù)傳輸服務(wù),同時在網(wǎng)絡(luò)劃分、路由編寫、對接打通等領(lǐng)域幫助達(dá)達(dá)解決了遷移過程中大量高可用問題。同時,為了提升業(yè)務(wù)的穩(wěn)定性和抗風(fēng)險能力,達(dá)達(dá)在京東云上完成了數(shù)據(jù)庫備份和網(wǎng)絡(luò)高可用設(shè)計。

另外,面對來自IaaS層的安全防護(hù)需求,達(dá)達(dá)與京東云共同創(chuàng)建了立體化的業(yè)務(wù)防護(hù)體系,1年內(nèi),成功抵御了近20億次Web攻擊,發(fā)現(xiàn)上百個漏洞并提供專業(yè)修復(fù)和加固建議。同時面對達(dá)達(dá)來自業(yè)務(wù)層面的風(fēng)險控制需求,京東云打造的實時業(yè)務(wù)風(fēng)險識別安全體系,全面提升業(yè)務(wù)交易流程中的風(fēng)險識別能力,降低黑灰產(chǎn)交易比例。

達(dá)達(dá)通過上云遷移實現(xiàn)了多云架構(gòu)的雛形,但這種不夠徹底的多個云模式的弊病也逐漸顯現(xiàn),每個云上的業(yè)務(wù)就像一個煙囪,與其他系統(tǒng)隔離,這種架構(gòu)導(dǎo)致業(yè)務(wù)系統(tǒng)各自為戰(zhàn),一方面降低了云資源的使用效率,一方面也減弱了云計算原本的快速便捷的優(yōu)勢,使得達(dá)達(dá)這種“多個云”模式的整體資源成本不斷攀升。

跨云雙活是多云構(gòu)架降本增效的利器

除了資源成本不斷攀升,達(dá)達(dá)還面臨另外一個難題。

達(dá)達(dá)的業(yè)務(wù)涉及電商與物流兩個融合場景,大促時既要面臨訂單峰值激增,又要保證快遞員短時高效準(zhǔn)確送達(dá),平臺智能訂單分發(fā)系統(tǒng)和運力供需調(diào)控系統(tǒng)受到極大挑戰(zhàn)。任何業(yè)務(wù)系統(tǒng)的不可用事件都會引起線上與線下的連鎖反應(yīng),嚴(yán)重時會導(dǎo)致系統(tǒng)宕機(jī),業(yè)務(wù)癱瘓。

在物流、電商等多個平臺的超復(fù)雜場景下,達(dá)達(dá)要兼顧資源成本和業(yè)務(wù)穩(wěn)定性的雙重壓力。此時,跨云雙活解決方案走進(jìn)了達(dá)達(dá)的視野。

借助京東云混合多云操作系統(tǒng)云艦的跨云多活能力,達(dá)達(dá)完成跨云雙活架構(gòu)的搭建,通過注冊中心多云部署,業(yè)務(wù)就近注冊和調(diào)度,實現(xiàn)跨云平臺的業(yè)務(wù)自由切換。除了跨云管理之外,跨云雙活架構(gòu)可以在多云一致的云原生運行環(huán)境下,通過高效調(diào)度,提升資源利用率,實現(xiàn)生產(chǎn)效能升遷,顯著降低IT資源成本??缭齐p活架構(gòu)從根本上解決了多個云模式下煙囪式架構(gòu)所帶來的資源利用率低下的問題。

達(dá)達(dá)“云上搬家”之旅 

至此,達(dá)達(dá)完成了多云戰(zhàn)略的第二步。

建立跨云雙活架構(gòu),每年為達(dá)達(dá)節(jié)省千萬的IT成本; 跨云雙活架構(gòu)下,達(dá)達(dá)又在京東云的幫助下實現(xiàn)了兩個關(guān)鍵技術(shù)的突破。

一是數(shù)據(jù)庫的雙向復(fù)制。達(dá)達(dá)龐大的用戶規(guī)模使得訂單表和用戶表數(shù)據(jù)量突破上億條,此時數(shù)據(jù)庫的IO能力、處理能力遇到瓶頸。將數(shù)據(jù)庫進(jìn)行分庫分表,可以規(guī)避性能極限,同時實現(xiàn)跨云的雙向復(fù)制。達(dá)達(dá)按照CityID進(jìn)行分庫分表,跨云切換時,以城市為單位進(jìn)行流量切換,確保系統(tǒng)數(shù)據(jù)的一致性,降低延時。

二是流量分發(fā)優(yōu)化。打通隨時配和落地配兩個業(yè)務(wù)之間的VPC對等連接,使用私有IP地址在兩個VPC之間路由流量實現(xiàn)VPC中實例的彼此通信。這樣的VPC對等連接既不是網(wǎng)關(guān)也不是VPN,不依賴某一單獨的物理硬件,沒有單點通信故障也沒有帶寬瓶頸。

達(dá)達(dá)通過跨云雙活實現(xiàn)了降本增效,每年節(jié)約千萬級IT資源,但同時這一多云雙活架構(gòu)也不斷面臨著新的挑戰(zhàn),新業(yè)務(wù)系統(tǒng)上線帶來的架構(gòu)調(diào)整,大促等流量爆發(fā)帶來的性能瓶頸,都不斷考驗著目前系統(tǒng)架構(gòu)的最優(yōu)性。

跨云雙活還不是終點,達(dá)達(dá)和京東云的技術(shù)團(tuán)隊仍在不斷探索多云的更優(yōu)路徑。

無感知式跨云遷移是保障多云穩(wěn)定的基石

跨云遷移不只是跨云搬遷,而是與業(yè)務(wù)應(yīng)用重構(gòu)和跨云容災(zāi)相結(jié)合,通過云原生操作系統(tǒng)屏蔽異構(gòu)化問題,增加了多云遷移的靈活性和動態(tài)性,降低了遷移成本,實現(xiàn)跨云遷移在業(yè)務(wù)層面的無感知。

達(dá)達(dá)業(yè)務(wù)的實時性和用戶的超強(qiáng)感知性,決定了其平臺對于系統(tǒng)穩(wěn)定性的超高要求。為了應(yīng)對業(yè)務(wù)變化對于多云架構(gòu)的實時考驗,京東云通過技術(shù)創(chuàng)新和場景實踐,打造了一套標(biāo)準(zhǔn)化的跨云遷移方案,確??缭七w移和多云架構(gòu)調(diào)整過程中,業(yè)務(wù)零感知,實現(xiàn)了上云,下云,多云,災(zāi)備,雙活的“選擇自由”和“切換自由”。

無感知式跨院遷移的第一個門檻來自于遷移的分批策略如何更好的對業(yè)務(wù)系統(tǒng)拆解分批,以最大化的降低遷移服務(wù)不可用對實際業(yè)務(wù)造成的影響。京東云-云泰混沌工程平臺可以模擬某一遷移批次服務(wù)不可用,在此情況下實際驗證其他服務(wù)受到的影響,然后根據(jù)測試結(jié)果再來不斷的優(yōu)化遷移策略,然后再次驗證,直到完成最終的遷移批次劃分方案。

無感知式跨云遷移的另外一個瓶頸來自數(shù)據(jù)庫的遷移,達(dá)達(dá)有100多個Redis集群,1000余個實例需要完成跨云遷移并能保持?jǐn)?shù)據(jù)實時同步。京東云自研的跨云遷移工具RedisSyncer可以完成redis之間數(shù)據(jù)同步,支持跨版本、異構(gòu)集群間的數(shù)據(jù)同步,能夠適應(yīng)云上與云下、原生與托管等多種場景,滿足數(shù)據(jù)庫遷移過程中的同步、擴(kuò)容等需求。

基于業(yè)務(wù)的動態(tài)變化和多云架構(gòu)的調(diào)整,截至2022年4月,達(dá)達(dá)已經(jīng)在京東云部署了超5萬核計算資源,實現(xiàn)落地配,即時配和電商系統(tǒng)的全面多云化,每年節(jié)省千萬級IT成本,運維效率提升30%。

歷時3年的多云戰(zhàn)略實踐,達(dá)達(dá)攜手京東云交出了一份滿意的答卷。

多云是超大規(guī)模IT資源管理的致勝之匙

作為產(chǎn)業(yè)數(shù)智化的先行者,京東云基于零售、物流、健康、工業(yè)、園區(qū)等復(fù)雜場景的磨煉,持續(xù)輸出更貼近業(yè)務(wù)場景的產(chǎn)品服務(wù)產(chǎn)業(yè)客戶。京東混合云操作系統(tǒng)云艦可以提供多個公有云、多個私有云、混合云以及各種異構(gòu)資源的統(tǒng)一運行環(huán)境。向下可以融合混合多云環(huán)境,屏蔽多云差異、實現(xiàn)多云一體、應(yīng)用一致運行;向上可以提供業(yè)務(wù)所需能力,以PaaS輸出各類數(shù)智化組件,保證PaaS應(yīng)用在多云有完全一致的體驗。一方面提升了資源管理和運維效率,一方面保證了業(yè)務(wù)系統(tǒng)的靈活性。

多云已經(jīng)成為IT架構(gòu)的新寵,在商業(yè)上獲得更具性價比的服務(wù),在技術(shù)上增加靈活性、可拓展性和穩(wěn)定性。京東云作為云原生領(lǐng)先實踐者及受益者,將持續(xù)向行業(yè)輸出在多云領(lǐng)域的探索和成果,幫助更多企業(yè)實現(xiàn)可持續(xù)發(fā)展。

雷峰網(wǎng)(公眾號:雷峰網(wǎng))

雷峰網(wǎng)版權(quán)文章,未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。

分享:
相關(guān)文章
當(dāng)月熱門文章
最新文章
請?zhí)顚懮暾埲速Y料
姓名
電話
郵箱
微信號
作品鏈接
個人簡介
為了您的賬戶安全,請驗證郵箱
您的郵箱還未驗證,完成可獲20積分喲!
請驗證您的郵箱
立即驗證
完善賬號信息
您的賬號已經(jīng)綁定,現(xiàn)在您可以設(shè)置密碼以方便用郵箱登錄
立即設(shè)置 以后再說