0
“看春晚?yè)尲t包”不僅是千家萬(wàn)戶(hù)生活的一部分，一定程度上來(lái)說(shuō)，也是各大互聯(lián)網(wǎng)公司技術(shù)展示的第一舞臺(tái)。
其實(shí)，對(duì)于參加春晚量級(jí)的互聯(lián)網(wǎng)公司來(lái)說(shuō)，一次春晚能帶動(dòng)的短期數(shù)據(jù)增長(zhǎng)并不那么“誘人”，完整的展示自己的互動(dòng)能力和技術(shù)水平，才更是春晚的誘人之處。
2015年，微信登場(chǎng)春晚的這一年，中國(guó)網(wǎng)民不足6億。而京東搶下2022年虎年春晚時(shí)，中國(guó)網(wǎng)民數(shù)量已經(jīng)穩(wěn)破10億。
交互的復(fù)雜性和規(guī)模的增長(zhǎng)，與云計(jì)算等新一代數(shù)字技術(shù)的發(fā)展，誰(shuí)跑贏誰(shuí)？
而似乎為了給自己“增加難度”，2022虎年春晚，京東破天荒的加入了實(shí)物環(huán)節(jié)，這是自信還是自知？
1月31日20：00，雷峰網(wǎng)(公眾號(hào)：雷峰網(wǎng))與此前溝通過(guò)的京東云、春晚項(xiàng)目IDC支持及資源運(yùn)維管理負(fù)責(zé)人常亮核對(duì)一個(gè)交流細(xì)節(jié)，他只回了一句話(huà)，我在春晚值班……
這一天，“共赴春晚”的還有3000多個(gè)京東工程師，只不過(guò)他們的參與方式并非安閑的在臺(tái)下觀看，而是用互聯(lián)網(wǎng)和云計(jì)算的力量保障春晚紅包互動(dòng)這一全球最大的網(wǎng)絡(luò)互動(dòng)的活動(dòng)……
根據(jù)不完全統(tǒng)計(jì)，2022年虎年春晚期間，全球華人參與京東APP紅包累計(jì)互動(dòng)量達(dá)691億次；自年貨節(jié)啟動(dòng)至春晚結(jié)束，京東云自主研發(fā)的京東智能客服言犀，累計(jì)咨詢(xún)服務(wù)量達(dá)5.5億次，為16.5萬(wàn)商家提供超1億次服務(wù)；京東科技核心交易系統(tǒng)持續(xù)不間斷能力超99.99%......
因此，京東云成功打贏了虎年春晚保衛(wèi)戰(zhàn)！
回顧從備戰(zhàn)到春晚結(jié)束的歷程，有諸多故事頗為震撼，從京東云以歷史最短的19天備戰(zhàn)時(shí)間在不增加計(jì)算資源的情況下，依托云原生數(shù)字基礎(chǔ)設(shè)施和混合多云操作系統(tǒng)云艦，秒級(jí)調(diào)度近300萬(wàn)個(gè)容器、超1000萬(wàn)核算力資源，在春晚的7輪紅包互動(dòng)中，實(shí)現(xiàn)春晚互動(dòng)模式與“年貨春運(yùn)”模式之間16次的無(wú)縫切換，讓用戶(hù)體驗(yàn)流暢紅包互動(dòng)的同時(shí)也暢享年貨云上購(gòu)物。
虎年春晚，從技術(shù)備戰(zhàn)的角度來(lái)看，也是歷史上最具挑戰(zhàn)性的春晚之一。
1月5日，在中央廣播電視總臺(tái)2022年春節(jié)聯(lián)歡晚會(huì)獨(dú)家互動(dòng)合作項(xiàng)目發(fā)布會(huì)上，官宣了京東成為2022年春晚獨(dú)家互動(dòng)合作伙伴，該消息一出當(dāng)即成為熱門(mén)話(huà)題。
自開(kāi)啟了春晚攜手互聯(lián)網(wǎng)公司一起“看春晚”的先河，如今已經(jīng)走過(guò)了7個(gè)年頭，諸多行業(yè)巨頭參與其中并且樂(lè)此不疲。
其實(shí)，我們都知道，隨著移動(dòng)互聯(lián)網(wǎng)的發(fā)展，技術(shù)不斷升級(jí)的同時(shí)，春晚的交互玩法的創(chuàng)新需求也在不斷增加。然而這里面就有個(gè)問(wèn)題，每增加一個(gè)新體驗(yàn)、新玩法，在如此高流量、高并發(fā)的場(chǎng)景下，對(duì)任何互聯(lián)網(wǎng)公司而言，對(duì)技術(shù)硬實(shí)力都是嚴(yán)峻的考驗(yàn)——然而，這也是互聯(lián)網(wǎng)大廠為何如此鐘情挑戰(zhàn)春晚的原因之一，世界上還有比這更檢驗(yàn)和證明技術(shù)能力的舞臺(tái)么？
與以往不同的是，本屆春晚互動(dòng)活動(dòng)，除了有搶紅包的活動(dòng)還將送出實(shí)物大獎(jiǎng)，京東邀請(qǐng)全民分15億紅包和好物，同時(shí)活動(dòng)從臘月二十二（1月24日）到元宵節(jié)（2月15日）將持續(xù)23天。
為什么說(shuō)本屆春晚互動(dòng)活動(dòng)最具挑戰(zhàn)？其實(shí)可以從四個(gè)“最”來(lái)看：備戰(zhàn)時(shí)間最短、規(guī)模最大、場(chǎng)景最復(fù)雜、持續(xù)時(shí)間最長(zhǎng)。
從1月5日官宣、啟動(dòng)備戰(zhàn)、到1月24日春晚紅包互動(dòng)預(yù)約活動(dòng)開(kāi)啟，虎年春晚留給京東云技術(shù)團(tuán)隊(duì)只有短短的19天，這個(gè)時(shí)間比上屆的27天縮短了近30%，并且，活動(dòng)持續(xù)到元宵節(jié)共23天，持續(xù)時(shí)間上也創(chuàng)造了歷史。
對(duì)比的場(chǎng)景是電商節(jié)大促，一般來(lái)說(shuō)大促峰值差不多在一小時(shí)內(nèi)，春晚有七輪口播則意味著有七次潮涌式超大峰值。根據(jù)預(yù)測(cè)數(shù)據(jù)顯示，春晚的流量峰值差不多是618、雙十一的數(shù)十倍。以去年的春晚為例，相關(guān)數(shù)據(jù)統(tǒng)計(jì)，全球約12.72億人觀看了春晚，期間累計(jì)產(chǎn)生紅包互動(dòng)達(dá)700多億次，并且在數(shù)十秒內(nèi)，有數(shù)十億甚至數(shù)百億人次（累計(jì)）參與互動(dòng)點(diǎn)擊，形成數(shù)億級(jí)別的QPS流量洪峰，因此這非?？简?yàn)平臺(tái)的承載力和穩(wěn)定性。
常規(guī)紅包互動(dòng)的高并發(fā)已經(jīng)是全球最大規(guī)模的網(wǎng)絡(luò)互動(dòng)，更何況還疊加了京東的“年貨春運(yùn)”，可謂是春晚史上的歷史性突破——這是第一次打破基于全程虛擬互動(dòng)的春晚玩法，“從虛到實(shí)”的把線(xiàn)上線(xiàn)下場(chǎng)景結(jié)合進(jìn)來(lái)——誠(chéng)然，物流效率是京東無(wú)可比擬的絕對(duì)優(yōu)勢(shì)，但在如此關(guān)鍵的時(shí)點(diǎn)，如此生猛的給自己加難度，還是讓人瞠目。
因?yàn)椋@堪稱(chēng)世界級(jí)的龐大而復(fù)雜的供應(yīng)鏈應(yīng)用場(chǎng)景，涉及了前端網(wǎng)站、訂單、結(jié)算、支付、搜索、推薦，還有后端的倉(cāng)儲(chǔ)、配送、客服、售后等諸多業(yè)務(wù)系統(tǒng)，并且都需要依托京東云的技術(shù)支撐，每一個(gè)鏈路環(huán)節(jié)的增加，對(duì)春晚場(chǎng)景的復(fù)雜度和應(yīng)對(duì)難度都是指數(shù)級(jí)的增長(zhǎng)。
因此，2022年的虎年春晚，成為了全球規(guī)模最大、場(chǎng)景最復(fù)雜、周期最長(zhǎng)，同時(shí)籌備時(shí)間又最短的活動(dòng)之一。
多年以來(lái)，人們很少把京東和“技術(shù)”這個(gè)符號(hào)聯(lián)系在一起，雖然劉強(qiáng)東在2018年曾經(jīng)喊話(huà)——未來(lái)，京東只有三樣?xùn)|西:技術(shù)!技術(shù)!技術(shù)!
但是，這依舊讓人們擔(dān)心，京東的技術(shù)平臺(tái)是否能從支撐內(nèi)部業(yè)務(wù)延展到能接下來(lái)春晚這個(gè)超大流量和復(fù)雜場(chǎng)景。
今年的春節(jié)期間，京東人忙壞了，要備戰(zhàn)春晚，還有年貨節(jié)以及冬奧期間的物流保障。而最大的挑戰(zhàn)，是如何在現(xiàn)有的資源配置下，應(yīng)對(duì)4小時(shí)的春晚幾億觀眾同時(shí)參與的紅包、搶好貨的活動(dòng)，再同時(shí)保證其他戰(zhàn)略級(jí)項(xiàng)目的絲滑運(yùn)轉(zhuǎn)，要知道，總體備戰(zhàn)時(shí)間只有19天。
不重視顯然是不行的，由于整個(gè)春晚紅包互動(dòng)項(xiàng)目任務(wù)急、挑戰(zhàn)大，場(chǎng)景復(fù)雜涉及的人員又多，京東拉通了數(shù)十個(gè)部門(mén)參與備戰(zhàn)，涉及京東零售、京東科技、京東物流等各BGBU。
更準(zhǔn)確的說(shuō)法是，京東集團(tuán)技術(shù)體系有超3000名技術(shù)人員參與了春晚項(xiàng)目的技術(shù)攻關(guān)與保障工作，除夕當(dāng)天參與一線(xiàn)值守的技術(shù)保障人員近2000人，超萬(wàn)名技術(shù)人員協(xié)同作戰(zhàn)，支持跨度超過(guò)一個(gè)多月的年貨節(jié)、春晚等超級(jí)項(xiàng)目。
當(dāng)然，到底是孤注一擲以贏得“技術(shù)京東”這塊金牌？還是早有把握渡過(guò)難關(guān)？筆者傾向于后者–—成功固然可喜可賀，但如果失敗則頗損美譽(yù)，京東輸不起也不能輸。
這里面的關(guān)鍵角色，是作為整個(gè)技術(shù)底座和動(dòng)力引擎的京東云。
前段時(shí)間，京東云發(fā)布的業(yè)內(nèi)首個(gè)混合多云操作系統(tǒng)云艦(JDOS)，實(shí)現(xiàn)了更大規(guī)模異構(gòu)基礎(chǔ)設(shè)施的統(tǒng)一化調(diào)度，而京東云依托云原生基礎(chǔ)設(shè)施、混合云操作系統(tǒng)云艦，能夠根據(jù)場(chǎng)景的不同，快速變身滿(mǎn)足不同的業(yè)務(wù)需求。
其實(shí)，如果真正說(shuō)希望借助春晚打開(kāi)市場(chǎng)，那京東瞄準(zhǔn)的也絕不僅僅是紅包流量帶來(lái)的消費(fèi)級(jí)市場(chǎng)，而是增量空間更大的云計(jì)算市場(chǎng)。這個(gè)市場(chǎng)的目前已經(jīng)有巨頭林立，如果要進(jìn)入賽道的第一序列，春晚紅包互動(dòng)這塊最硬的“試金石“是京東云必須磕下的硬仗。
的確多年以來(lái)，京東都扛住了618、雙十一等大促下的高并發(fā)流量洪峰，但畢竟是體系內(nèi)的戰(zhàn)斗。京東云希望春晚可以證明——經(jīng)歷過(guò)高壓復(fù)雜的超級(jí)應(yīng)用場(chǎng)景“大考”之后，京東云的實(shí)力認(rèn)可度將不局限于服務(wù)京東生態(tài)，可以延伸到行業(yè)層面。
然而春晚這個(gè)場(chǎng)景京東是第一次遇到，只有19天的備戰(zhàn)時(shí)間讓搞定這場(chǎng)硬仗多了一些緊迫。
從技術(shù)方面來(lái)看，往屆合作廠商應(yīng)對(duì)高并發(fā)場(chǎng)景的萬(wàn)無(wú)一失的辦法是增加服務(wù)器做到超級(jí)冗余。但如果僅僅靠此拿下大考，則技術(shù)含量大打折扣，因此京東云內(nèi)部有了一個(gè)戰(zhàn)略性決定：在零增加服務(wù)器資源的情況下獨(dú)自支持春晚，而整體方案的設(shè)計(jì)上，將計(jì)算資源在搖紅包和購(gòu)物兩個(gè)場(chǎng)景間來(lái)回切換。
也就是說(shuō)，在虎年春晚紅包互動(dòng)活動(dòng)中，京東云需要高度彈性的控制著近300萬(wàn)的容器、超過(guò)千萬(wàn)核的資源，在購(gòu)物和紅包互動(dòng)的場(chǎng)景中來(lái)回切換，一個(gè)場(chǎng)景結(jié)束后，需要馬上把部分資源釋放到下個(gè)場(chǎng)景的應(yīng)用上，也就是在不影響常規(guī)業(yè)務(wù)的前提下，將底層空間騰出來(lái)重構(gòu)。
京東云敢這樣做是有底氣的。
在多年618、雙十一大促的歷練下，京東云習(xí)慣了用“備戰(zhàn)常態(tài)化”來(lái)降低大型活動(dòng)對(duì)IT計(jì)算資源的集中消耗。也就是，京東一直通過(guò)大促的技術(shù)標(biāo)準(zhǔn)來(lái)提高日常技術(shù)標(biāo)準(zhǔn)，逐漸縮短研發(fā)的備戰(zhàn)時(shí)長(zhǎng)，提高備戰(zhàn)的效率，還能以更少的人力、資源，達(dá)到更好的科學(xué)備戰(zhàn)效果。
因此，京東不缺高并發(fā)的業(yè)務(wù)場(chǎng)景，而云艦又能幫助京東云在不需要購(gòu)置大量服務(wù)器的前提，能實(shí)現(xiàn)敏捷調(diào)度、平穩(wěn)運(yùn)行和高效協(xié)同，最終，如果順利的話(huà)，京東云能采用快速通過(guò)積木拆解和重組的方式搭建基礎(chǔ)設(shè)施，進(jìn)而讓業(yè)務(wù)得以快速研發(fā)和部署。
京東云的信心來(lái)源之一，是作為電商巨頭而擁有超過(guò)1000萬(wàn)種自營(yíng)商品、幾十萬(wàn)品牌商和制造企業(yè)，并服務(wù)了超過(guò)5.5億消費(fèi)者的超級(jí)供應(yīng)鏈，已經(jīng)實(shí)現(xiàn)了全棧式的數(shù)智化技術(shù)連接，因此此次備戰(zhàn)春晚，京東將依靠豐富的經(jīng)驗(yàn)和系列運(yùn)營(yíng)保障機(jī)制，主要依靠系統(tǒng)而并非人力來(lái)確保關(guān)鍵節(jié)點(diǎn)的穩(wěn)定性。
“剛接到這個(gè)任務(wù)的時(shí)候，其實(shí)我們是非常激動(dòng)的，都有點(diǎn)發(fā)抖”， 京東云云艦架構(gòu)師趙建星回憶說(shuō)，剛聽(tīng)到要做春晚互動(dòng)項(xiàng)目的時(shí)候，瞬間想起多年前京東大促各種告急的時(shí)候，當(dāng)時(shí)大家接到消息后就直接跑到機(jī)房里保障各種業(yè)務(wù)。
的確，京東是在大促環(huán)節(jié)結(jié)結(jié)實(shí)實(shí)摔過(guò)幾跤的，而電商節(jié)大促不僅檢驗(yàn)企業(yè)的科技實(shí)力，也在考驗(yàn)技術(shù)團(tuán)隊(duì)。
2011年11月1日，京東做圖書(shū)限時(shí)促銷(xiāo)的活動(dòng)，“秒殺”活動(dòng)讓流量瞬間達(dá)到每秒10萬(wàn)單，然而系統(tǒng)癱瘓了，總指揮直接請(qǐng)來(lái)負(fù)責(zé)當(dāng)時(shí)IT前端的和后端的兩位副總裁到辦公室“喝茶”。
其實(shí)，這個(gè)段子并不是真的，但對(duì)于相關(guān)的負(fù)責(zé)人，還是有批評(píng)但也有寬容的。
和當(dāng)年比起來(lái)，京東無(wú)論技術(shù)、體量、規(guī)模、用戶(hù)群體和現(xiàn)在都不是一個(gè)等級(jí)，如今接到如此重磅的任務(wù)對(duì)趙建星來(lái)說(shuō)，意味著升級(jí)了武器再挑戰(zhàn)終極BOSS，他內(nèi)心的感觸頗深。
趙建星團(tuán)隊(duì)的任務(wù)之一，是在不降低日常商城業(yè)務(wù)模式的前提，保障年貨節(jié)和冬奧期間物流配送的資源支持，從資源角度對(duì)京東云來(lái)說(shuō)，是歷年挑戰(zhàn)最大，對(duì)底層的資源調(diào)度和分發(fā)的壓力也是巨大的。
整體活動(dòng)來(lái)看，是隨著春晚?yè)u紅包的節(jié)奏，將整個(gè)資源在購(gòu)物應(yīng)用和搖紅包之間來(lái)回做切換，而這個(gè)切換核心是云艦對(duì)底層資源調(diào)度的能力。而且調(diào)度方面，搖紅包時(shí)間上是一分鐘，而很多資源的調(diào)度要求秒級(jí)到位，而后又要釋放給其他應(yīng)用，這涉及到隔離性和容器化管理的精準(zhǔn)調(diào)度能力。
“京東所有的業(yè)務(wù)系統(tǒng)都跑在云艦上，都是容器化的?！壁w建星說(shuō)，“這是我們的底氣?！?/p>
云艦管理的這個(gè)超大資源池，要支持年貨春運(yùn)購(gòu)物交易系統(tǒng)，還有春晚紅包互動(dòng)系統(tǒng)，也有冬奧期間物流保障系統(tǒng)，在這幾個(gè)系統(tǒng)來(lái)回做保障，當(dāng)期的業(yè)務(wù)資源需求量相當(dāng)大。而且春晚的每輪口播產(chǎn)生的搖紅包場(chǎng)景，都伴隨著潮汐式的上億級(jí)流量高峰，因此在備戰(zhàn)春晚的過(guò)程中，趙建星帶著團(tuán)隊(duì)做了很多根據(jù)業(yè)務(wù)場(chǎng)景交替來(lái)回切換資源的技術(shù)保障。
也就是在零增加服務(wù)器的情況下，通過(guò)快速調(diào)度資源支持業(yè)務(wù)場(chǎng)景的切換，得以短暫且高效地為春晚提供資源保障。
由于資源有限，需要將京東的整個(gè)業(yè)務(wù)進(jìn)行等級(jí)調(diào)整、劃分、保障，針對(duì)不同的優(yōu)先級(jí)和業(yè)務(wù)場(chǎng)景，分別進(jìn)行不同的調(diào)度，有的升級(jí)有的降級(jí)。
趙建星表示，團(tuán)隊(duì)幾乎每?jī)商煲淮螇簻y(cè)，不停地?cái)U(kuò)充和保障資源，再根據(jù)業(yè)務(wù)的協(xié)同和整個(gè)項(xiàng)目組的溝通，保障資源來(lái)回按需降級(jí)和恢復(fù)正常。
以春晚口播這個(gè)場(chǎng)景為例，首先口播紅包業(yè)務(wù)場(chǎng)景的優(yōu)先級(jí)是最高的。
那么，該業(yè)務(wù)的資源在整個(gè)調(diào)度鏈路層也是最高的，基于“優(yōu)先調(diào)度”將這些資源進(jìn)行快速調(diào)度并擴(kuò)充。資源調(diào)度完了之后是切換，將離線(xiàn)、離在線(xiàn)等任務(wù)的資源進(jìn)行秒級(jí)快速壓制，騰出來(lái)更多的資源，此時(shí)其他業(yè)務(wù)的資源也適當(dāng)縮容，這樣能騰出更多的資源空間保障重點(diǎn)業(yè)務(wù)。
“每次口播都會(huì)來(lái)回切換?！碑?dāng)口播紅包的頂峰流量下來(lái)后，再將這些資源歸還到正常的業(yè)務(wù)系統(tǒng)中去。因此，在調(diào)度的過(guò)程中業(yè)務(wù)系統(tǒng)數(shù)量相當(dāng)龐大，調(diào)度的過(guò)程也需要針對(duì)所有的業(yè)務(wù)系統(tǒng)進(jìn)行一些定級(jí)精致化的分類(lèi)。
盡管多年618、雙十一大促的經(jīng)驗(yàn)下京東不缺高并發(fā)的場(chǎng)景，然而從來(lái)沒(méi)做過(guò)如此大規(guī)模、高密度、高精度的調(diào)度，同時(shí)需要在秒級(jí)完成調(diào)度，這無(wú)疑來(lái)說(shuō)對(duì)京東云具有極高的挑戰(zhàn)。
“整體來(lái)說(shuō)，規(guī)模量、快速調(diào)度的精準(zhǔn)性、高密度隔離性，對(duì)我們來(lái)說(shuō)都是極大的挑戰(zhàn)。”趙建星表示。
其中，穩(wěn)定性是最高優(yōu)先級(jí)，資源的騰挪必須高效，同時(shí)，各業(yè)務(wù)間還要具有很高的隔離性。由于盡可能全部由自動(dòng)化實(shí)現(xiàn)，總體超過(guò)80%的調(diào)度速度都在秒級(jí)，S級(jí)項(xiàng)目必須是秒極完成，所有預(yù)案都是分鐘級(jí)完成。
而趙建星帶著團(tuán)隊(duì)，通過(guò)秒極完成全部資源的管理與統(tǒng)一調(diào)度，最終保障了春晚4小時(shí)互動(dòng)項(xiàng)目里系統(tǒng)最穩(wěn)、敏捷度最高、成本最優(yōu)。
“京東云的春晚保障是想把人算做到極致，去迎接天算的考驗(yàn)?！?/p>
常亮是京東云春晚項(xiàng)目組IDC基礎(chǔ)保障1號(hào)位，對(duì)于他們團(tuán)隊(duì)來(lái)說(shuō)，作為整個(gè)項(xiàng)目的基礎(chǔ)建設(shè)部分，從最前端到最后端都要做技術(shù)保障，所有的前中臺(tái)，包括云底座都會(huì)落在數(shù)據(jù)中心、網(wǎng)絡(luò)和硬件上這三大件上，“哪個(gè)部分發(fā)生一丁點(diǎn)的抖動(dòng)，再精彩的內(nèi)容都會(huì)受到影響。”
因此，京東要將所有的需求劃定在可控范圍內(nèi)。
常亮回憶，1月13日?qǐng)F(tuán)隊(duì)就確定不再承接新的需求，盡管資源不夠，但是需求已在可控范圍內(nèi)，有了明確的邊界和框架和天花板，所有的工作就能被精準(zhǔn)、精細(xì)地落地和執(zhí)行下去了。因此，理論上每次的壓測(cè)結(jié)果和十次結(jié)果都一樣，用計(jì)算機(jī)學(xué)的術(shù)語(yǔ)就是系統(tǒng)越趨近于冪等性，所得的結(jié)果都可預(yù)期。
那么天算呢？
面對(duì)突發(fā)的未知情況，靠的是快速響應(yīng)，同時(shí)需要兜底方案、需要預(yù)演，要靠一個(gè)完備的組織和決策機(jī)制，因?yàn)楝F(xiàn)實(shí)情況是，一號(hào)位、核心接口入場(chǎng)可能要在3-5分鐘這樣的極致時(shí)間里做決策，要通過(guò)這種方式應(yīng)對(duì)各個(gè)環(huán)節(jié)發(fā)生的問(wèn)題。
所以說(shuō)，只要在需求確定的情況下，無(wú)論突發(fā)情況是什么，都可以應(yīng)對(duì)自如。
比如，1月6日、1月7日，常亮帶領(lǐng)團(tuán)隊(duì)開(kāi)始做了第一次的壓測(cè)，直到1月22日進(jìn)行了七次壓測(cè)，當(dāng)時(shí)所有的流量模型都固定了，然而在23日預(yù)演的時(shí)候發(fā)現(xiàn)，有諸多需要修改的地方，這會(huì)給CDN帶來(lái)什么直接后果呢？此前做的流量模型全部作廢、重新做。
常亮表示，原始數(shù)據(jù)的由來(lái)，是將所有業(yè)務(wù)線(xiàn)，從前臺(tái)，包括從零售、健康、物流、科技等所有業(yè)務(wù)線(xiàn)的需求進(jìn)行優(yōu)先級(jí)和主次、分層圈定，因此一旦加了修改，首先遇到的問(wèn)題就是，有些業(yè)務(wù)要犧牲了，舍誰(shuí)保誰(shuí)是個(gè)很大的問(wèn)題。
常亮坦言，一旦出現(xiàn)涉及到資源的臨時(shí)需求，就要看能否人定勝天。具體來(lái)看，如果還有10天的時(shí)間，把相應(yīng)的元素包全部替換、預(yù)置在手機(jī)里就行了，如果只有5天的時(shí)間，重做一款A(yù)PP，審核時(shí)間是不可控的。
而為了更好地解決應(yīng)急挑戰(zhàn)，京東也首創(chuàng)了“應(yīng)急劇本預(yù)案”模式，重點(diǎn)排查和預(yù)防TOP 級(jí)困難。而整個(gè)劇本涉及了從前臺(tái)、中臺(tái)、后臺(tái)，包括安全，包括基礎(chǔ)設(shè)施三大塊，所有涉及到春晚支持的應(yīng)急演練劇本。
常亮分享了一個(gè)有趣的故事，核心劇本里有個(gè)情節(jié)，就是流量峰值的時(shí)候，兩個(gè)機(jī)房間的網(wǎng)絡(luò)專(zhuān)線(xiàn)之間如果出現(xiàn)堵塞或中斷問(wèn)題，系統(tǒng)會(huì)是什么樣子？
“當(dāng)時(shí)我們的劇本很簡(jiǎn)單，就是在這種場(chǎng)景下，誰(shuí)是網(wǎng)絡(luò)組的負(fù)責(zé)人，誰(shuí)做專(zhuān)線(xiàn)切換操作，要多少時(shí)間生效... ...”常亮表示，當(dāng)時(shí)大家按照劇本是執(zhí)行完了，結(jié)果每五分鐘出現(xiàn)一個(gè)掉坑，大家就不理解這種規(guī)律性抖動(dòng)到底是怎么回事。
經(jīng)過(guò)兩個(gè)小時(shí)的排查發(fā)現(xiàn)，其實(shí)是三個(gè)不同的原因恰好卡在了每五分鐘的一個(gè)時(shí)間點(diǎn)上，第一個(gè)坑因?yàn)榫W(wǎng)絡(luò)線(xiàn)路中斷引起了抖動(dòng)，第二次因?yàn)橹信_(tái)的容器在沒(méi)溝通的前提做了local DNS的切換演練，第三次是因?yàn)橹信_(tái)在做壓力測(cè)試的時(shí)候，置換了一部分優(yōu)惠券，所以也就是看起來(lái)像整個(gè)系統(tǒng)出現(xiàn)了規(guī)律的震蕩。
“當(dāng)天晚上大家都長(zhǎng)舒一口氣?！背Ａ粱貞浄Q(chēng)，整體來(lái)看這個(gè)劇本是有效的，“其實(shí)你只要演練一次就可以形成流水線(xiàn)式的操作。”常亮表示，沒(méi)演練劇本的話(huà)，遇到問(wèn)題現(xiàn)溝通十來(lái)分鐘過(guò)去了，離下一輪口播還剩十來(lái)分鐘，怎么辦？所以，通過(guò)劇本演練，能向團(tuán)隊(duì)真實(shí)地展現(xiàn)春晚場(chǎng)景，能對(duì)整個(gè)系統(tǒng)的情況有一個(gè)形象的預(yù)測(cè)認(rèn)知，所以對(duì)于參與春晚的3000的研發(fā)人員來(lái)說(shuō)，能得到整體的經(jīng)驗(yàn)提升。
關(guān)于劇本的撰寫(xiě)，有了總體方向后，還要進(jìn)行不止一次的評(píng)審環(huán)節(jié)。編輯的需求是劇本不能寫(xiě)的太復(fù)雜，得讓大家看得懂。因此到最后，精簡(jiǎn)下去就是三句話(huà)：誰(shuí)、什么場(chǎng)景、多久恢復(fù)。第一輪劇本的評(píng)審環(huán)節(jié)，常亮記得特別清楚，基本沒(méi)幾個(gè)合格的，不是寫(xiě)得多就是寫(xiě)得不精準(zhǔn)，逐漸打磨后就變成一眼就能看出來(lái)能執(zhí)行的劇本，比如：宏飛、趕緊切、一分鐘。
常亮回憶，當(dāng)時(shí)接到這個(gè)項(xiàng)目時(shí)候大家是驕傲的，有一份榮譽(yù)感、使命感，春晚當(dāng)天大家打開(kāi)APP一起參與搖紅包的那刻起，大家心底里都知道，這是身處技術(shù)底層的大家一起奮斗的結(jié)果。
從數(shù)據(jù)可以看到，春晚紅包的互動(dòng)次數(shù)每年都在增加，2019年是208億次，2020年是639億次，2021年是703億次。
春晚紅包互動(dòng)已經(jīng)進(jìn)入第7個(gè)年頭，見(jiàn)證了互聯(lián)網(wǎng)流量的興起和更迭，也從拼資源階發(fā)展到拼更高效敏捷的系統(tǒng)架構(gòu)，目前迎來(lái)了越來(lái)越多實(shí)體經(jīng)濟(jì)的身影。
2022年也是京東連續(xù)第十年的“春節(jié)也送貨”，在春晚流量的洪峰背后，還有龐大且繁雜的供應(yīng)鏈，而此次備戰(zhàn)虎年春晚，對(duì)于諸多京東的技術(shù)人員來(lái)說(shuō)，讓大家重燃起激情，激發(fā)出團(tuán)隊(duì)追求極致的技術(shù)精神。
回到虎年春晚，這不僅是全球流量最聚集的場(chǎng)景，極具技術(shù)挑戰(zhàn)的背后，京東云用科技硬實(shí)力告訴大家，京東的技術(shù)體系可以迎接全球最大的互動(dòng)場(chǎng)景以及年貨春運(yùn)場(chǎng)景下的兩重大考，讓“科技京東”帶領(lǐng)著全球的觀眾共享春晚的視覺(jué)盛宴，切身感受更快更好的配送體驗(yàn)。
雷峰網(wǎng)雷峰網(wǎng)雷峰網(wǎng)
雷峰網(wǎng)原創(chuàng)文章，未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見(jiàn)轉(zhuǎn)載須知。
