前言：不可否認(rèn)，開工這幾天，已成為在線辦公服務(wù)商們的“雙十一”，僅釘釘?shù)牧髁烤驮庥隽耸畮妆兜谋q。隨著釘釘在2月3日通過阿里云緊急擴(kuò)容1萬臺服務(wù)器后、4日再度擴(kuò)容1萬臺云服務(wù)器，其流量大考還將繼續(xù)。企業(yè)微信、騰訊會議、華為云WeLink們都還扛得住么？

契機(jī)之下，雷鋒網(wǎng)獨(dú)家對話了這些在線辦公服務(wù)商的技術(shù)團(tuán)隊(duì)以及背后的云廠商，還原“集體崩潰”后緊急擴(kuò)容的“瘋狂一夜”。

2月3日上午9時(shí)許，誰都沒有預(yù)料到，阿里釘釘、企業(yè)微信集體遭遇開工視頻即崩潰的消息突然出現(xiàn)，網(wǎng)絡(luò)上滿屏都是使用者的吐槽。 

“卡頓？延遲？消息發(fā)不出去？不不，這是不應(yīng)該存在的?！?/p>

顯然，由于受疫情影響無法正常運(yùn)轉(zhuǎn)，企業(yè)用戶對在線辦公系統(tǒng)提出了更高的要求。許多人深刻意識到，流量暴增帶來的云服務(wù)器宕機(jī)問題嚴(yán)重性，還是在此前的微博“明星熱搜”時(shí)代。盡管服務(wù)商隨后緊急對云服務(wù)器進(jìn)行擴(kuò)容，但這場上億人同時(shí)協(xié)作的流量高峰還是讓整個(gè)在線辦公服務(wù)商有些超出預(yù)想。

實(shí)際上，從正月開始，國內(nèi)數(shù)十家在線辦公服務(wù)商就已經(jīng)進(jìn)行了免費(fèi)開放、擴(kuò)容等調(diào)整，激發(fā)了用戶數(shù)量和視頻并發(fā)量的不斷上漲，基于PC端、移動(dòng)端的視頻調(diào)用服務(wù)器性能和穩(wěn)定性正經(jīng)受非常大的考驗(yàn)。 

如果未來這種緊急時(shí)刻的流量暴增成為常態(tài)，那云服務(wù)器宕機(jī)就決不能成為常態(tài)。

暴漲的用戶量

遠(yuǎn)程辦公有多火？據(jù)釘釘透露，開工首日，全國就有上千萬企業(yè)、近2億人開啟在家辦公模式，“跟雙11之于平時(shí)差不多，暴漲十幾倍”。據(jù)了解，釘釘將免費(fèi)視頻會議全量升級至302方免費(fèi)。 

這一天，企業(yè)微信平臺上也同時(shí)涌入了數(shù)百萬企業(yè)，是去年同期的3倍，數(shù)千萬用戶使用企業(yè)微信遠(yuǎn)程辦公，同時(shí)幾十萬場會議在企業(yè)微信召開。

這種勢頭也帶動(dòng)了年前剛開放的華為云WeLink。數(shù)據(jù)顯示，WeLink每日新注冊企業(yè)數(shù)增長50%，每日會議數(shù)增長100%；春節(jié)期間新增企業(yè)數(shù)數(shù)十萬，新增日活用戶數(shù)超100萬，業(yè)務(wù)流量增長50倍。

金山辦公旗下WPS+也免費(fèi)提供了遠(yuǎn)程辦公及音頻會議服務(wù)，從正月初一開始用戶就開始快速增長?！敖刂鼓壳?，金山文檔的協(xié)作用戶增長超過400%，表單、會議等場景化服務(wù)增長超過15倍，企業(yè)用戶入住增長超過300%?！?/p>

而小魚易連也承諾直到疫情結(jié)束，將免費(fèi)開放100方的實(shí)時(shí)在線會議服務(wù)。

城云云際則另辟蹊徑，在開工前兩天，使用抖音快手微視推送免費(fèi)開放100方云視頻會議消息，導(dǎo)致了用戶使用量激增?！?月3日當(dāng)天，數(shù)千會議同時(shí)召開，萬級的參會者使用云際會議開會，這給原來我們以視頻會議室為主的模式帶來較大挑戰(zhàn)?！?nbsp;

阿里釘釘

視頻美顏需求過旺，2天擴(kuò)容2萬臺云服務(wù)器

簡單來說，開工第一天，釘釘遇到了相當(dāng)于微博上3個(gè)明星同時(shí)官宣戀情的流量。

盡管提前有所準(zhǔn)備，但還是有點(diǎn)始料未及。3號當(dāng)天早上9點(diǎn)的流量確實(shí)有點(diǎn)超出想象，但在緊急調(diào)整之后，就穩(wěn)定下來了。

預(yù)案，其實(shí)是一切按計(jì)劃在走。緊接著當(dāng)天中午時(shí)分，阿里云放出消息，2小時(shí)內(nèi)緊急擴(kuò)容1萬臺服務(wù)器。

但這并不意味著釘釘后臺的壓力就完全沒有了，相反，一場大考才剛剛拉開帷幕。 

4日，釘釘再度通過阿里云擴(kuò)容1萬臺云服務(wù)器，以應(yīng)對群直播和語音視頻會議的流量洪峰，原來，能夠堅(jiān)持洗頭、洗臉、化妝的人數(shù)較少，導(dǎo)致視頻會議美顏功能需求激增。

擴(kuò)容是按每天的用量來預(yù)估的，現(xiàn)在每天都是暴漲流量，要根據(jù)每天增長的情況進(jìn)行擴(kuò)容；對阿里云來說，擴(kuò)1萬臺和擴(kuò)2萬臺，用的時(shí)間是一樣的。

如今，釘釘和阿里云成立專項(xiàng)團(tuán)隊(duì)，24小時(shí)輪班倒，全力保障平臺穩(wěn)定。

企業(yè)微信

從正月初一就開始擴(kuò)容，從幾十到幾百倍

如果說此前遠(yuǎn)程辦公只是企業(yè)辦公的一項(xiàng)充分條件，那么疫情期間的遠(yuǎn)程協(xié)作已經(jīng)成為一種用戶剛需。以云服務(wù)本身彈性伸縮能力為支撐，才得以保障高峰突發(fā)需求的滿足。

在延長假期的政策確定后，我們就做了緊急預(yù)備方案，但第一天返工高峰期的峰值還是有些超出預(yù)期。針對開工當(dāng)天的突發(fā)狀況，我們在半個(gè)小時(shí)內(nèi)做出了緊急修復(fù)。

用戶遠(yuǎn)程辦公需求很大，并發(fā)量進(jìn)入一個(gè)很高的量級，擴(kuò)容是每天都在做的事情。從正月初一開始，企業(yè)微信就一直持續(xù)從幾十倍到幾百倍的擴(kuò)容。

為了滿足高并發(fā)以支撐用戶需求，騰訊云團(tuán)隊(duì)提出了兩個(gè)策略：一是在加入、發(fā)起會議重要節(jié)點(diǎn)保證用戶核心需求，在其他用戶使用頻率不是很高的功能上靈活變化；二是就近接入，分發(fā)到邊緣節(jié)點(diǎn)，用戶可就近獲得視頻資源。

現(xiàn)如今，團(tuán)隊(duì)每天晚上都要改代碼，進(jìn)行產(chǎn)品灰度發(fā)布和壓力測試，以滿足第二天用戶開會的需求。

除了企業(yè)微信、騰訊會議，騰訊還提供了像文檔、思維導(dǎo)圖、代碼存儲庫、云盤等工具，疫情下的用戶可能更為集中、流量更為龐大。 

在資源不夠時(shí)，樂享可隨時(shí)調(diào)用騰訊云的資源，騰訊樂享技術(shù)負(fù)責(zé)人李立博表示。騰訊TAPD技術(shù)負(fù)責(zé)人楊曉俊則指出，在騰訊云TKE容器彈性伸縮、動(dòng)態(tài)帶寬、COS存儲自動(dòng)擴(kuò)容的能力上，TAPD還對TDSQL、Redis、Socket等服務(wù)進(jìn)行了擴(kuò)容。 

華為云WeLink

整體功能正常，并未出現(xiàn)崩潰 

我們預(yù)測到由于在家辦公的場景下會導(dǎo)致業(yè)務(wù)量大幅度增加，但實(shí)事求是的講，現(xiàn)在的增長速度超出了我們的預(yù)期。

業(yè)務(wù)同樣也遇到了浪涌時(shí)的擁塞情況，但整體功能正常，并未出現(xiàn)崩潰的問題。核心在于云計(jì)算本身的彈性伸縮能力和WeLink分布式的服務(wù)架構(gòu)，得以經(jīng)受住浪涌業(yè)務(wù)量的壓力。

 

圖注：廣東省委書記李希在東莞調(diào)研疫情與醫(yī)生用WeLink視頻會議截圖

現(xiàn)在，華為云WeLink可支持最大1000方同時(shí)視頻會議接入。

金山云/WPS+

準(zhǔn)備了近一倍的冗余都不夠用

值得一提的是，金山WPS+的云辦公系統(tǒng)底層資源由金山云提供，主要支持遠(yuǎn)程和協(xié)同辦公過程中涉及的海量文件存儲和分發(fā)。 

1月26日（正月初二）WPS+表單服務(wù)出現(xiàn)了短暫的反應(yīng)慢，大概持續(xù)了45分鐘。主要原因是我們沒有預(yù)計(jì)到過年期間還會有這么高增長，準(zhǔn)備了近一倍的冗余都不夠用。事發(fā)后，團(tuán)隊(duì)緊急申請擴(kuò)容。 

期間，北京各機(jī)房因疫情面臨封網(wǎng)，人員進(jìn)出受控，金山云連夜緊急安排線上存量資源調(diào)度，整合北京、上海、廣州各地的BGP帶寬資源。同時(shí)遷移整合線上計(jì)算資源，以滿足遠(yuǎn)程辦公的業(yè)務(wù)突發(fā)和彈性擴(kuò)容需求，支持海量文件存儲和分發(fā)。金山云可一小時(shí)內(nèi)完成擴(kuò)容，其背后最大的挑戰(zhàn)是并發(fā)處理能力。

從這起事件可以看出，正是因?yàn)樘崆斑m應(yīng)了用戶激增帶來的問題，反而讓金山云在2月3日開工當(dāng)天并未出現(xiàn)太大問題。

小魚易連、城云云際

新老客戶如何兩手抓？

盡管多數(shù)服務(wù)商技術(shù)團(tuán)隊(duì)對疫情影響下遠(yuǎn)程辦公業(yè)務(wù)量的增長有所預(yù)感，但與現(xiàn)實(shí)情況相比，還是有些措手不及。

開工上午，曾有用戶反饋小魚易連暫時(shí)不能正常運(yùn)行，可能與免費(fèi)帶來的訪問量激增有關(guān)。針對當(dāng)天呼叫量數(shù)十倍的增長，我們采取了限流措施，優(yōu)先保障付費(fèi)用戶群體使用。小魚易連CEO袁文輝解釋。

除了緊急擴(kuò)容、協(xié)調(diào)數(shù)據(jù)中心與運(yùn)營商帶寬資源外，城云云際還對用戶激增問題進(jìn)行了強(qiáng)制維護(hù)。

城云云際提前在多個(gè)數(shù)據(jù)中心進(jìn)行擴(kuò)容，對老客戶與新增客戶正常使用進(jìn)行保障———我們先后做了兩項(xiàng)重要工作：一是為新用戶制作了快速入會的短視頻指南；二是在緊急擴(kuò)容的同時(shí)，也在引導(dǎo)部分企業(yè)客戶使用電話、語音會議等功能。

圖注：溫州醫(yī)科大學(xué)附屬醫(yī)院使用城云云際會議

流量激增背后

整體來看，其實(shí)在全國多數(shù)企業(yè)復(fù)工之前，視頻會議的調(diào)用量就已經(jīng)開始上升，尤其以政企疫情工作和在線教育場景最為突出。

“最早在疫情開始后，各級政府、醫(yī)院、衛(wèi)計(jì)委等機(jī)關(guān)單位，需要一個(gè)系統(tǒng)能將各地醫(yī)院連接起來，用于疫情的管控部署”，小魚易連告訴雷鋒網(wǎng)，“但從正月初一開始，用戶量就開始每天翻倍。尤其是教育，用我們的產(chǎn)品做互動(dòng)教學(xué)，特別是針對初高三的學(xué)生，這其實(shí)是第二波用戶?！?/p>

值得一提的是，早在釘釘對外開放在線直播課堂時(shí)，就曾有用戶調(diào)侃：“就等大家在釘釘群里直播上課，以后把釘釘都搞崩?！辈浑y看出，前后多重用戶訪問量的疊加沖擊，才是最終引爆視頻卡頓問題的關(guān)鍵。

針對疫情期間用戶比較集中的場景上，華為云WeLink也從自身角度進(jìn)行了說明：

“一是政府及衛(wèi)生主管部門疫情工作布置、信息收集、上傳下達(dá)，陸續(xù)有各地政府部門專門下文使用視頻會議進(jìn)行工作布置和工作協(xié)同。

二是醫(yī)療衛(wèi)生單位，針對當(dāng)前非發(fā)熱病人盡量不去醫(yī)院就診情況，開展遠(yuǎn)程診療、家庭病房關(guān)懷、醫(yī)院住院病患進(jìn)行遠(yuǎn)程探視等。

三是學(xué)校，針對學(xué)生進(jìn)行健康打卡、在線學(xué)習(xí)、知識推送等，停課不停學(xué)。

四是大企業(yè)，利用最大支持1000方并發(fā)會議接入進(jìn)行工作布置，人雖然不能在一起，但企業(yè)還要做好應(yīng)對后續(xù)業(yè)務(wù)開展的準(zhǔn)備?！?/p>

例如，釘釘為甘肅疫情聯(lián)防聯(lián)控進(jìn)行部署，企業(yè)微信提供的在線問診、在線教育群直播服務(wù)，城云云際為浙江大學(xué)、溫州醫(yī)科大學(xué)提供視頻會議系統(tǒng)。

這或許也是當(dāng)前在線辦公企業(yè)在提供視頻會議服務(wù)時(shí)所面臨的共同考量。采訪中，類似的說法被不同的服務(wù)商或多或少地提及。

線上能否成為未來企業(yè)辦公的主流方式？疫情終會過去，在線辦公市場最終會迎來什么樣的變化？其實(shí)，經(jīng)歷了緊急擴(kuò)容的瘋狂一夜，云作為底層資源的重要性被更加凸顯出來，基于云的在線辦公正打開行業(yè)的新局面。你心中，誰又將是這場賽跑的獲勝者？（雷鋒網(wǎng)）

這個(gè)春節(jié)你們?nèi)绾伍_工？如果你們也有遠(yuǎn)程辦公產(chǎn)品，歡迎留言或添加作者微信交流：15135116989

雷峰網(wǎng)原創(chuàng)文章，未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。