前言：不可否認(rèn)，開(kāi)工這幾天，已成為在線(xiàn)辦公服務(wù)商們的“雙十一”，僅釘釘?shù)牧髁烤驮庥隽耸畮妆兜谋q。隨著釘釘在2月3日通過(guò)阿里云緊急擴(kuò)容1萬(wàn)臺(tái)服務(wù)器后、4日再度擴(kuò)容1萬(wàn)臺(tái)云服務(wù)器，其流量大考還將繼續(xù)。企業(yè)微信、騰訊會(huì)議、華為云WeLink們都還扛得住么？

契機(jī)之下，雷鋒網(wǎng)獨(dú)家對(duì)話(huà)了這些在線(xiàn)辦公服務(wù)商的技術(shù)團(tuán)隊(duì)以及背后的云廠商，還原“集體崩潰”后緊急擴(kuò)容的“瘋狂一夜”。

2月3日上午9時(shí)許，誰(shuí)都沒(méi)有預(yù)料到，阿里釘釘、企業(yè)微信集體遭遇開(kāi)工視頻即崩潰的消息突然出現(xiàn)，網(wǎng)絡(luò)上滿(mǎn)屏都是使用者的吐槽。 

“卡頓？延遲？消息發(fā)不出去？不不，這是不應(yīng)該存在的?！?/p>

顯然，由于受疫情影響無(wú)法正常運(yùn)轉(zhuǎn)，企業(yè)用戶(hù)對(duì)在線(xiàn)辦公系統(tǒng)提出了更高的要求。許多人深刻意識(shí)到，流量暴增帶來(lái)的云服務(wù)器宕機(jī)問(wèn)題嚴(yán)重性，還是在此前的微博“明星熱搜”時(shí)代。盡管服務(wù)商隨后緊急對(duì)云服務(wù)器進(jìn)行擴(kuò)容，但這場(chǎng)上億人同時(shí)協(xié)作的流量高峰還是讓整個(gè)在線(xiàn)辦公服務(wù)商有些超出預(yù)想。

實(shí)際上，從正月開(kāi)始，國(guó)內(nèi)數(shù)十家在線(xiàn)辦公服務(wù)商就已經(jīng)進(jìn)行了免費(fèi)開(kāi)放、擴(kuò)容等調(diào)整，激發(fā)了用戶(hù)數(shù)量和視頻并發(fā)量的不斷上漲，基于PC端、移動(dòng)端的視頻調(diào)用服務(wù)器性能和穩(wěn)定性正經(jīng)受非常大的考驗(yàn)。 

如果未來(lái)這種緊急時(shí)刻的流量暴增成為常態(tài)，那云服務(wù)器宕機(jī)就決不能成為常態(tài)。

暴漲的用戶(hù)量

遠(yuǎn)程辦公有多火？據(jù)釘釘透露，開(kāi)工首日，全國(guó)就有上千萬(wàn)企業(yè)、近2億人開(kāi)啟在家辦公模式，“跟雙11之于平時(shí)差不多，暴漲十幾倍”。據(jù)了解，釘釘將免費(fèi)視頻會(huì)議全量升級(jí)至302方免費(fèi)。 

這一天，企業(yè)微信平臺(tái)上也同時(shí)涌入了數(shù)百萬(wàn)企業(yè)，是去年同期的3倍，數(shù)千萬(wàn)用戶(hù)使用企業(yè)微信遠(yuǎn)程辦公，同時(shí)幾十萬(wàn)場(chǎng)會(huì)議在企業(yè)微信召開(kāi)。

這種勢(shì)頭也帶動(dòng)了年前剛開(kāi)放的華為云WeLink。數(shù)據(jù)顯示，WeLink每日新注冊(cè)企業(yè)數(shù)增長(zhǎng)50%，每日會(huì)議數(shù)增長(zhǎng)100%；春節(jié)期間新增企業(yè)數(shù)數(shù)十萬(wàn)，新增日活用戶(hù)數(shù)超100萬(wàn)，業(yè)務(wù)流量增長(zhǎng)50倍。

金山辦公旗下WPS+也免費(fèi)提供了遠(yuǎn)程辦公及音頻會(huì)議服務(wù)，從正月初一開(kāi)始用戶(hù)就開(kāi)始快速增長(zhǎng)?！敖刂鼓壳?，金山文檔的協(xié)作用戶(hù)增長(zhǎng)超過(guò)400%，表單、會(huì)議等場(chǎng)景化服務(wù)增長(zhǎng)超過(guò)15倍，企業(yè)用戶(hù)入住增長(zhǎng)超過(guò)300%?！?/p>

而小魚(yú)易連也承諾直到疫情結(jié)束，將免費(fèi)開(kāi)放100方的實(shí)時(shí)在線(xiàn)會(huì)議服務(wù)。

城云云際則另辟蹊徑，在開(kāi)工前兩天，使用抖音快手微視推送免費(fèi)開(kāi)放100方云視頻會(huì)議消息，導(dǎo)致了用戶(hù)使用量激增?！?月3日當(dāng)天，數(shù)千會(huì)議同時(shí)召開(kāi)，萬(wàn)級(jí)的參會(huì)者使用云際會(huì)議開(kāi)會(huì)，這給原來(lái)我們以視頻會(huì)議室為主的模式帶來(lái)較大挑戰(zhàn)?！?nbsp;

阿里釘釘

視頻美顏需求過(guò)旺，2天擴(kuò)容2萬(wàn)臺(tái)云服務(wù)器

簡(jiǎn)單來(lái)說(shuō)，開(kāi)工第一天，釘釘遇到了相當(dāng)于微博上3個(gè)明星同時(shí)官宣戀情的流量。

盡管提前有所準(zhǔn)備，但還是有點(diǎn)始料未及。3號(hào)當(dāng)天早上9點(diǎn)的流量確實(shí)有點(diǎn)超出想象，但在緊急調(diào)整之后，就穩(wěn)定下來(lái)了。

預(yù)案，其實(shí)是一切按計(jì)劃在走。緊接著當(dāng)天中午時(shí)分，阿里云放出消息，2小時(shí)內(nèi)緊急擴(kuò)容1萬(wàn)臺(tái)服務(wù)器。

但這并不意味著釘釘后臺(tái)的壓力就完全沒(méi)有了，相反，一場(chǎng)大考才剛剛拉開(kāi)帷幕。 

4日，釘釘再度通過(guò)阿里云擴(kuò)容1萬(wàn)臺(tái)云服務(wù)器，以應(yīng)對(duì)群直播和語(yǔ)音視頻會(huì)議的流量洪峰，原來(lái)，能夠堅(jiān)持洗頭、洗臉、化妝的人數(shù)較少，導(dǎo)致視頻會(huì)議美顏功能需求激增。

擴(kuò)容是按每天的用量來(lái)預(yù)估的，現(xiàn)在每天都是暴漲流量，要根據(jù)每天增長(zhǎng)的情況進(jìn)行擴(kuò)容；對(duì)阿里云來(lái)說(shuō)，擴(kuò)1萬(wàn)臺(tái)和擴(kuò)2萬(wàn)臺(tái)，用的時(shí)間是一樣的。

如今，釘釘和阿里云成立專(zhuān)項(xiàng)團(tuán)隊(duì)，24小時(shí)輪班倒，全力保障平臺(tái)穩(wěn)定。

企業(yè)微信

從正月初一就開(kāi)始擴(kuò)容，從幾十到幾百倍

如果說(shuō)此前遠(yuǎn)程辦公只是企業(yè)辦公的一項(xiàng)充分條件，那么疫情期間的遠(yuǎn)程協(xié)作已經(jīng)成為一種用戶(hù)剛需。以云服務(wù)本身彈性伸縮能力為支撐，才得以保障高峰突發(fā)需求的滿(mǎn)足。

在延長(zhǎng)假期的政策確定后，我們就做了緊急預(yù)備方案，但第一天返工高峰期的峰值還是有些超出預(yù)期。針對(duì)開(kāi)工當(dāng)天的突發(fā)狀況，我們?cè)诎雮€(gè)小時(shí)內(nèi)做出了緊急修復(fù)。

用戶(hù)遠(yuǎn)程辦公需求很大，并發(fā)量進(jìn)入一個(gè)很高的量級(jí)，擴(kuò)容是每天都在做的事情。從正月初一開(kāi)始，企業(yè)微信就一直持續(xù)從幾十倍到幾百倍的擴(kuò)容。

為了滿(mǎn)足高并發(fā)以支撐用戶(hù)需求，騰訊云團(tuán)隊(duì)提出了兩個(gè)策略：一是在加入、發(fā)起會(huì)議重要節(jié)點(diǎn)保證用戶(hù)核心需求，在其他用戶(hù)使用頻率不是很高的功能上靈活變化；二是就近接入，分發(fā)到邊緣節(jié)點(diǎn)，用戶(hù)可就近獲得視頻資源。

現(xiàn)如今，團(tuán)隊(duì)每天晚上都要改代碼，進(jìn)行產(chǎn)品灰度發(fā)布和壓力測(cè)試，以滿(mǎn)足第二天用戶(hù)開(kāi)會(huì)的需求。

除了企業(yè)微信、騰訊會(huì)議，騰訊還提供了像文檔、思維導(dǎo)圖、代碼存儲(chǔ)庫(kù)、云盤(pán)等工具，疫情下的用戶(hù)可能更為集中、流量更為龐大。 

在資源不夠時(shí)，樂(lè)享可隨時(shí)調(diào)用騰訊云的資源，騰訊樂(lè)享技術(shù)負(fù)責(zé)人李立博表示。騰訊TAPD技術(shù)負(fù)責(zé)人楊曉俊則指出，在騰訊云TKE容器彈性伸縮、動(dòng)態(tài)帶寬、COS存儲(chǔ)自動(dòng)擴(kuò)容的能力上，TAPD還對(duì)TDSQL、Redis、Socket等服務(wù)進(jìn)行了擴(kuò)容。 

華為云WeLink

整體功能正常，并未出現(xiàn)崩潰 

我們預(yù)測(cè)到由于在家辦公的場(chǎng)景下會(huì)導(dǎo)致業(yè)務(wù)量大幅度增加，但實(shí)事求是的講，現(xiàn)在的增長(zhǎng)速度超出了我們的預(yù)期。

業(yè)務(wù)同樣也遇到了浪涌時(shí)的擁塞情況，但整體功能正常，并未出現(xiàn)崩潰的問(wèn)題。核心在于云計(jì)算本身的彈性伸縮能力和WeLink分布式的服務(wù)架構(gòu)，得以經(jīng)受住浪涌業(yè)務(wù)量的壓力。

 

圖注：廣東省委書(shū)記李希在東莞調(diào)研疫情與醫(yī)生用WeLink視頻會(huì)議截圖

現(xiàn)在，華為云WeLink可支持最大1000方同時(shí)視頻會(huì)議接入。

金山云/WPS+

準(zhǔn)備了近一倍的冗余都不夠用

值得一提的是，金山WPS+的云辦公系統(tǒng)底層資源由金山云提供，主要支持遠(yuǎn)程和協(xié)同辦公過(guò)程中涉及的海量文件存儲(chǔ)和分發(fā)。 

1月26日（正月初二）WPS+表單服務(wù)出現(xiàn)了短暫的反應(yīng)慢，大概持續(xù)了45分鐘。主要原因是我們沒(méi)有預(yù)計(jì)到過(guò)年期間還會(huì)有這么高增長(zhǎng)，準(zhǔn)備了近一倍的冗余都不夠用。事發(fā)后，團(tuán)隊(duì)緊急申請(qǐng)擴(kuò)容。 

期間，北京各機(jī)房因疫情面臨封網(wǎng)，人員進(jìn)出受控，金山云連夜緊急安排線(xiàn)上存量資源調(diào)度，整合北京、上海、廣州各地的BGP帶寬資源。同時(shí)遷移整合線(xiàn)上計(jì)算資源，以滿(mǎn)足遠(yuǎn)程辦公的業(yè)務(wù)突發(fā)和彈性擴(kuò)容需求，支持海量文件存儲(chǔ)和分發(fā)。金山云可一小時(shí)內(nèi)完成擴(kuò)容，其背后最大的挑戰(zhàn)是并發(fā)處理能力。

從這起事件可以看出，正是因?yàn)樘崆斑m應(yīng)了用戶(hù)激增帶來(lái)的問(wèn)題，反而讓金山云在2月3日開(kāi)工當(dāng)天并未出現(xiàn)太大問(wèn)題。

小魚(yú)易連、城云云際

新老客戶(hù)如何兩手抓？

盡管多數(shù)服務(wù)商技術(shù)團(tuán)隊(duì)對(duì)疫情影響下遠(yuǎn)程辦公業(yè)務(wù)量的增長(zhǎng)有所預(yù)感，但與現(xiàn)實(shí)情況相比，還是有些措手不及。

開(kāi)工上午，曾有用戶(hù)反饋小魚(yú)易連暫時(shí)不能正常運(yùn)行，可能與免費(fèi)帶來(lái)的訪(fǎng)問(wèn)量激增有關(guān)。針對(duì)當(dāng)天呼叫量數(shù)十倍的增長(zhǎng)，我們采取了限流措施，優(yōu)先保障付費(fèi)用戶(hù)群體使用。小魚(yú)易連CEO袁文輝解釋。

除了緊急擴(kuò)容、協(xié)調(diào)數(shù)據(jù)中心與運(yùn)營(yíng)商帶寬資源外，城云云際還對(duì)用戶(hù)激增問(wèn)題進(jìn)行了強(qiáng)制維護(hù)。

城云云際提前在多個(gè)數(shù)據(jù)中心進(jìn)行擴(kuò)容，對(duì)老客戶(hù)與新增客戶(hù)正常使用進(jìn)行保障———我們先后做了兩項(xiàng)重要工作：一是為新用戶(hù)制作了快速入會(huì)的短視頻指南；二是在緊急擴(kuò)容的同時(shí)，也在引導(dǎo)部分企業(yè)客戶(hù)使用電話(huà)、語(yǔ)音會(huì)議等功能。

圖注：溫州醫(yī)科大學(xué)附屬醫(yī)院使用城云云際會(huì)議

流量激增背后

整體來(lái)看，其實(shí)在全國(guó)多數(shù)企業(yè)復(fù)工之前，視頻會(huì)議的調(diào)用量就已經(jīng)開(kāi)始上升，尤其以政企疫情工作和在線(xiàn)教育場(chǎng)景最為突出。

“最早在疫情開(kāi)始后，各級(jí)政府、醫(yī)院、衛(wèi)計(jì)委等機(jī)關(guān)單位，需要一個(gè)系統(tǒng)能將各地醫(yī)院連接起來(lái)，用于疫情的管控部署”，小魚(yú)易連告訴雷鋒網(wǎng)，“但從正月初一開(kāi)始，用戶(hù)量就開(kāi)始每天翻倍。尤其是教育，用我們的產(chǎn)品做互動(dòng)教學(xué)，特別是針對(duì)初高三的學(xué)生，這其實(shí)是第二波用戶(hù)?！?/p>

值得一提的是，早在釘釘對(duì)外開(kāi)放在線(xiàn)直播課堂時(shí)，就曾有用戶(hù)調(diào)侃：“就等大家在釘釘群里直播上課，以后把釘釘都搞崩?！辈浑y看出，前后多重用戶(hù)訪(fǎng)問(wèn)量的疊加沖擊，才是最終引爆視頻卡頓問(wèn)題的關(guān)鍵。

針對(duì)疫情期間用戶(hù)比較集中的場(chǎng)景上，華為云WeLink也從自身角度進(jìn)行了說(shuō)明：

“一是政府及衛(wèi)生主管部門(mén)疫情工作布置、信息收集、上傳下達(dá)，陸續(xù)有各地政府部門(mén)專(zhuān)門(mén)下文使用視頻會(huì)議進(jìn)行工作布置和工作協(xié)同。

二是醫(yī)療衛(wèi)生單位，針對(duì)當(dāng)前非發(fā)熱病人盡量不去醫(yī)院就診情況，開(kāi)展遠(yuǎn)程診療、家庭病房關(guān)懷、醫(yī)院住院病患進(jìn)行遠(yuǎn)程探視等。

三是學(xué)校，針對(duì)學(xué)生進(jìn)行健康打卡、在線(xiàn)學(xué)習(xí)、知識(shí)推送等，停課不停學(xué)。

四是大企業(yè)，利用最大支持1000方并發(fā)會(huì)議接入進(jìn)行工作布置，人雖然不能在一起，但企業(yè)還要做好應(yīng)對(duì)后續(xù)業(yè)務(wù)開(kāi)展的準(zhǔn)備。”

例如，釘釘為甘肅疫情聯(lián)防聯(lián)控進(jìn)行部署，企業(yè)微信提供的在線(xiàn)問(wèn)診、在線(xiàn)教育群直播服務(wù)，城云云際為浙江大學(xué)、溫州醫(yī)科大學(xué)提供視頻會(huì)議系統(tǒng)。

這或許也是當(dāng)前在線(xiàn)辦公企業(yè)在提供視頻會(huì)議服務(wù)時(shí)所面臨的共同考量。采訪(fǎng)中，類(lèi)似的說(shuō)法被不同的服務(wù)商或多或少地提及。

線(xiàn)上能否成為未來(lái)企業(yè)辦公的主流方式？疫情終會(huì)過(guò)去，在線(xiàn)辦公市場(chǎng)最終會(huì)迎來(lái)什么樣的變化？其實(shí)，經(jīng)歷了緊急擴(kuò)容的瘋狂一夜，云作為底層資源的重要性被更加凸顯出來(lái)，基于云的在線(xiàn)辦公正打開(kāi)行業(yè)的新局面。你心中，誰(shuí)又將是這場(chǎng)賽跑的獲勝者？（雷鋒網(wǎng)）

這個(gè)春節(jié)你們?nèi)绾伍_(kāi)工？如果你們也有遠(yuǎn)程辦公產(chǎn)品，歡迎留言或添加作者微信交流：15135116989

雷峰網(wǎng)原創(chuàng)文章，未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見(jiàn)轉(zhuǎn)載須知。