前言：不可否認，開工這幾天，已成為在線辦公服務商們的“雙十一”，僅釘釘?shù)牧髁烤驮庥隽耸畮妆兜谋q。隨著釘釘在2月3日通過阿里云緊急擴容1萬臺服務器后、4日再度擴容1萬臺云服務器，其流量大考還將繼續(xù)。企業(yè)微信、騰訊會議、華為云WeLink們都還扛得住么？

契機之下，雷鋒網(wǎng)獨家對話了這些在線辦公服務商的技術團隊以及背后的云廠商，還原“集體崩潰”后緊急擴容的“瘋狂一夜”。

2月3日上午9時許，誰都沒有預料到，阿里釘釘、企業(yè)微信集體遭遇開工視頻即崩潰的消息突然出現(xiàn)，網(wǎng)絡上滿屏都是使用者的吐槽。 

“卡頓？延遲？消息發(fā)不出去？不不，這是不應該存在的。”

顯然，由于受疫情影響無法正常運轉(zhuǎn)，企業(yè)用戶對在線辦公系統(tǒng)提出了更高的要求。許多人深刻意識到，流量暴增帶來的云服務器宕機問題嚴重性，還是在此前的微博“明星熱搜”時代。盡管服務商隨后緊急對云服務器進行擴容，但這場上億人同時協(xié)作的流量高峰還是讓整個在線辦公服務商有些超出預想。

實際上，從正月開始，國內(nèi)數(shù)十家在線辦公服務商就已經(jīng)進行了免費開放、擴容等調(diào)整，激發(fā)了用戶數(shù)量和視頻并發(fā)量的不斷上漲，基于PC端、移動端的視頻調(diào)用服務器性能和穩(wěn)定性正經(jīng)受非常大的考驗。 

如果未來這種緊急時刻的流量暴增成為常態(tài)，那云服務器宕機就決不能成為常態(tài)。

暴漲的用戶量

遠程辦公有多火？據(jù)釘釘透露，開工首日，全國就有上千萬企業(yè)、近2億人開啟在家辦公模式，“跟雙11之于平時差不多，暴漲十幾倍”。據(jù)了解，釘釘將免費視頻會議全量升級至302方免費。 

這一天，企業(yè)微信平臺上也同時涌入了數(shù)百萬企業(yè)，是去年同期的3倍，數(shù)千萬用戶使用企業(yè)微信遠程辦公，同時幾十萬場會議在企業(yè)微信召開。

這種勢頭也帶動了年前剛開放的華為云WeLink。數(shù)據(jù)顯示，WeLink每日新注冊企業(yè)數(shù)增長50%，每日會議數(shù)增長100%；春節(jié)期間新增企業(yè)數(shù)數(shù)十萬，新增日活用戶數(shù)超100萬，業(yè)務流量增長50倍。

金山辦公旗下WPS+也免費提供了遠程辦公及音頻會議服務，從正月初一開始用戶就開始快速增長。“截止目前，金山文檔的協(xié)作用戶增長超過400%，表單、會議等場景化服務增長超過15倍，企業(yè)用戶入住增長超過300%?！?/p>

而小魚易連也承諾直到疫情結束，將免費開放100方的實時在線會議服務。

城云云際則另辟蹊徑，在開工前兩天，使用抖音快手微視推送免費開放100方云視頻會議消息，導致了用戶使用量激增。“2月3日當天，數(shù)千會議同時召開，萬級的參會者使用云際會議開會，這給原來我們以視頻會議室為主的模式帶來較大挑戰(zhàn)?！?nbsp;

阿里釘釘

視頻美顏需求過旺，2天擴容2萬臺云服務器

簡單來說，開工第一天，釘釘遇到了相當于微博上3個明星同時官宣戀情的流量。

盡管提前有所準備，但還是有點始料未及。3號當天早上9點的流量確實有點超出想象，但在緊急調(diào)整之后，就穩(wěn)定下來了。

預案，其實是一切按計劃在走。緊接著當天中午時分，阿里云放出消息，2小時內(nèi)緊急擴容1萬臺服務器。

但這并不意味著釘釘后臺的壓力就完全沒有了，相反，一場大考才剛剛拉開帷幕。 

4日，釘釘再度通過阿里云擴容1萬臺云服務器，以應對群直播和語音視頻會議的流量洪峰，原來，能夠堅持洗頭、洗臉、化妝的人數(shù)較少，導致視頻會議美顏功能需求激增。

擴容是按每天的用量來預估的，現(xiàn)在每天都是暴漲流量，要根據(jù)每天增長的情況進行擴容；對阿里云來說，擴1萬臺和擴2萬臺，用的時間是一樣的。

如今，釘釘和阿里云成立專項團隊，24小時輪班倒，全力保障平臺穩(wěn)定。

企業(yè)微信

從正月初一就開始擴容，從幾十到幾百倍

如果說此前遠程辦公只是企業(yè)辦公的一項充分條件，那么疫情期間的遠程協(xié)作已經(jīng)成為一種用戶剛需。以云服務本身彈性伸縮能力為支撐，才得以保障高峰突發(fā)需求的滿足。

在延長假期的政策確定后，我們就做了緊急預備方案，但第一天返工高峰期的峰值還是有些超出預期。針對開工當天的突發(fā)狀況，我們在半個小時內(nèi)做出了緊急修復。

用戶遠程辦公需求很大，并發(fā)量進入一個很高的量級，擴容是每天都在做的事情。從正月初一開始，企業(yè)微信就一直持續(xù)從幾十倍到幾百倍的擴容。

為了滿足高并發(fā)以支撐用戶需求，騰訊云團隊提出了兩個策略：一是在加入、發(fā)起會議重要節(jié)點保證用戶核心需求，在其他用戶使用頻率不是很高的功能上靈活變化；二是就近接入，分發(fā)到邊緣節(jié)點，用戶可就近獲得視頻資源。

現(xiàn)如今，團隊每天晚上都要改代碼，進行產(chǎn)品灰度發(fā)布和壓力測試，以滿足第二天用戶開會的需求。

除了企業(yè)微信、騰訊會議，騰訊還提供了像文檔、思維導圖、代碼存儲庫、云盤等工具，疫情下的用戶可能更為集中、流量更為龐大。 

在資源不夠時，樂享可隨時調(diào)用騰訊云的資源，騰訊樂享技術負責人李立博表示。騰訊TAPD技術負責人楊曉俊則指出，在騰訊云TKE容器彈性伸縮、動態(tài)帶寬、COS存儲自動擴容的能力上，TAPD還對TDSQL、Redis、Socket等服務進行了擴容。 

華為云WeLink

整體功能正常，并未出現(xiàn)崩潰 

我們預測到由于在家辦公的場景下會導致業(yè)務量大幅度增加，但實事求是的講，現(xiàn)在的增長速度超出了我們的預期。

業(yè)務同樣也遇到了浪涌時的擁塞情況，但整體功能正常，并未出現(xiàn)崩潰的問題。核心在于云計算本身的彈性伸縮能力和WeLink分布式的服務架構，得以經(jīng)受住浪涌業(yè)務量的壓力。

 

圖注：廣東省委書記李希在東莞調(diào)研疫情與醫(yī)生用WeLink視頻會議截圖

現(xiàn)在，華為云WeLink可支持最大1000方同時視頻會議接入。

金山云/WPS+

準備了近一倍的冗余都不夠用

值得一提的是，金山WPS+的云辦公系統(tǒng)底層資源由金山云提供，主要支持遠程和協(xié)同辦公過程中涉及的海量文件存儲和分發(fā)。 

1月26日（正月初二）WPS+表單服務出現(xiàn)了短暫的反應慢，大概持續(xù)了45分鐘。主要原因是我們沒有預計到過年期間還會有這么高增長，準備了近一倍的冗余都不夠用。事發(fā)后，團隊緊急申請擴容。 

期間，北京各機房因疫情面臨封網(wǎng)，人員進出受控，金山云連夜緊急安排線上存量資源調(diào)度，整合北京、上海、廣州各地的BGP帶寬資源。同時遷移整合線上計算資源，以滿足遠程辦公的業(yè)務突發(fā)和彈性擴容需求，支持海量文件存儲和分發(fā)。金山云可一小時內(nèi)完成擴容，其背后最大的挑戰(zhàn)是并發(fā)處理能力。

從這起事件可以看出，正是因為提前適應了用戶激增帶來的問題，反而讓金山云在2月3日開工當天并未出現(xiàn)太大問題。

小魚易連、城云云際

新老客戶如何兩手抓？

盡管多數(shù)服務商技術團隊對疫情影響下遠程辦公業(yè)務量的增長有所預感，但與現(xiàn)實情況相比，還是有些措手不及。

開工上午，曾有用戶反饋小魚易連暫時不能正常運行，可能與免費帶來的訪問量激增有關。針對當天呼叫量數(shù)十倍的增長，我們采取了限流措施，優(yōu)先保障付費用戶群體使用。小魚易連CEO袁文輝解釋。

除了緊急擴容、協(xié)調(diào)數(shù)據(jù)中心與運營商帶寬資源外，城云云際還對用戶激增問題進行了強制維護。

城云云際提前在多個數(shù)據(jù)中心進行擴容，對老客戶與新增客戶正常使用進行保障———我們先后做了兩項重要工作：一是為新用戶制作了快速入會的短視頻指南；二是在緊急擴容的同時，也在引導部分企業(yè)客戶使用電話、語音會議等功能。

圖注：溫州醫(yī)科大學附屬醫(yī)院使用城云云際會議

流量激增背后

整體來看，其實在全國多數(shù)企業(yè)復工之前，視頻會議的調(diào)用量就已經(jīng)開始上升，尤其以政企疫情工作和在線教育場景最為突出。

“最早在疫情開始后，各級政府、醫(yī)院、衛(wèi)計委等機關單位，需要一個系統(tǒng)能將各地醫(yī)院連接起來，用于疫情的管控部署”，小魚易連告訴雷鋒網(wǎng)，“但從正月初一開始，用戶量就開始每天翻倍。尤其是教育，用我們的產(chǎn)品做互動教學，特別是針對初高三的學生，這其實是第二波用戶?！?/p>

值得一提的是，早在釘釘對外開放在線直播課堂時，就曾有用戶調(diào)侃：“就等大家在釘釘群里直播上課，以后把釘釘都搞崩。”不難看出，前后多重用戶訪問量的疊加沖擊，才是最終引爆視頻卡頓問題的關鍵。

針對疫情期間用戶比較集中的場景上，華為云WeLink也從自身角度進行了說明：

“一是政府及衛(wèi)生主管部門疫情工作布置、信息收集、上傳下達，陸續(xù)有各地政府部門專門下文使用視頻會議進行工作布置和工作協(xié)同。

二是醫(yī)療衛(wèi)生單位，針對當前非發(fā)熱病人盡量不去醫(yī)院就診情況，開展遠程診療、家庭病房關懷、醫(yī)院住院病患進行遠程探視等。

三是學校，針對學生進行健康打卡、在線學習、知識推送等，停課不停學。

四是大企業(yè)，利用最大支持1000方并發(fā)會議接入進行工作布置，人雖然不能在一起，但企業(yè)還要做好應對后續(xù)業(yè)務開展的準備?！?/p>

例如，釘釘為甘肅疫情聯(lián)防聯(lián)控進行部署，企業(yè)微信提供的在線問診、在線教育群直播服務，城云云際為浙江大學、溫州醫(yī)科大學提供視頻會議系統(tǒng)。

這或許也是當前在線辦公企業(yè)在提供視頻會議服務時所面臨的共同考量。采訪中，類似的說法被不同的服務商或多或少地提及。

線上能否成為未來企業(yè)辦公的主流方式？疫情終會過去，在線辦公市場最終會迎來什么樣的變化？其實，經(jīng)歷了緊急擴容的瘋狂一夜，云作為底層資源的重要性被更加凸顯出來，基于云的在線辦公正打開行業(yè)的新局面。你心中，誰又將是這場賽跑的獲勝者？（雷鋒網(wǎng)）

這個春節(jié)你們?nèi)绾伍_工？如果你們也有遠程辦公產(chǎn)品，歡迎留言或添加作者微信交流：15135116989

雷峰網(wǎng)原創(chuàng)文章，未經(jīng)授權禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。