新聞資訊
了解金山云最新資訊
2021-03-10 00:00:00
“關鍵時刻來了！”
接近零點，北京小米科技園金山E棟9樓的工作區(qū)忽然變得無比安靜，大家目光不約而同地看向了前方的倒計時。
除夕之夜，本該闔家團圓，但金山云的工程師們卻要面臨一場艱巨的戰(zhàn)役。
在2021年金山云春晚項目保障中心的現(xiàn)場，一群人屏氣凝神，濃重的“熊貓眼”緊盯著電腦屏幕上陡峭上升的曲線，準備迎來今晚最后一輪流量洪峰。
“精心準備了半年，最后時刻千萬不能掉鏈子！”大家雖然都面露疲憊，但依然不忘給彼此打氣。
此時，已是這支數十人組成的重保團隊“連續(xù)作戰(zhàn)”的第6個月。
“一個前所未有的挑戰(zhàn)”
時間撥回到去年9月，金山云視頻云團隊再次接到央視春晚的重保邀請。一開始，金山云副總裁鮑宇昕并未覺得意外?！拔覀兒痛和硎抢吓笥蚜?，過去三年金山云一直都在為春晚直播提供服務，表現(xiàn)有目共睹。”
但這次，央視方面提出了很多全新的需求。
原來，由于疫情影響，2021央視春晚將首次采用“云”傳播、“云”互動形式，將現(xiàn)場觀眾互動和“云觀眾”融入現(xiàn)場。此外，還首次引入AI+VR裸眼3D形式。而這些，無疑對廠商技術有著更高的要求。
接到需求的研發(fā)團隊開始火速集結，商討應對策略。有位同事的工位距離會議室比較遠，當他急忙趕到的時候，驚訝地發(fā)現(xiàn)里面擠滿了人：過去幾年參與過直播重保的骨干成員幾乎全部到場。
當大家得知這次春晚的需求后，會議室陷入了短暫的安靜。由于是史上首次采用“云”傳播、“云”互動形式，除了可預見的觀看人數，除夕還有不可預見的峰值流量會瞬間涌入，一旦沒扛住，后果不堪設想。
在沒有先例的情況下，金山云要克服的困難不少，沒有人敢當場打包票。
陳海彪率先打破了沉默：“總要有人吃螃蟹，為什么不能是我們？”
陳海彪是春晚重保的老將了，金山云第一次參與春晚項目時，他就是成員之一。三年來，每個除夕夜，他都是在公司和重保團隊一起度過。
對于今年春晚的需求難度，或許他心里比在場大多數人都要更清楚。
但是，“敢為人先”正是金山云技術團隊的底色。
他的話音剛落，原本寂靜的會議室瞬間熱鬧起來，大家紛紛獻計獻策，并主動報名要求加入春晚項目。
兵貴神速，經過快速討論，金山云立馬成立了50多人的精英團隊，橫跨產品、研發(fā)、運營等，重點突破技術壁壘。
這場“春晚保衛(wèi)戰(zhàn)”，就此打響第一槍。
“技術是定心丸”
兵馬未動，糧草先行。
項目籌備開始后，運維團隊就率先對直播所需帶寬進行了詳細全面地評估，提前為春晚協(xié)調資源，前后動員了200余人提供支持。在極短時間內，調動了大量云服務器、CDN帶寬、COS存儲以及EBS存儲等資源，這種資源儲備能力在國內廠商位居前列。
籌集完“糧草”，接力棒正式交到了重保團隊手中，不過責任感和壓力也隨之而來。
此時雖然距離春晚還有幾個月時間，團隊可以進行充分的準備。但是面對“萬無一失”的目標，每個成員都不敢掉以輕心。
因為幾個月時間看起來“從容不迫”，但其實提前準備的內容并沒有外界想象中那么簡單。
畢竟，即便年輕一代再怎么吐槽不看春晚，這仍然是除夕夜難以避開的，堪比“年夜飯”的傳統(tǒng)。
近5個小時直播時長，全球10億+級別的流量涌入，這對架構和技術的穩(wěn)定性考驗極高。
金山云的直播重保一直以“穩(wěn)”著稱，為了保證直播不出差池，事先的壓力測試就顯得至關重要。
得益于金山云非常成熟的壓測工具集和流程規(guī)范，阿彬帶領的測試團隊雖然擔子很重，但各項工作推進有條不紊。
按照春晚方面的業(yè)務需求，測試團隊迅速抽象出相應的測試用例和性能指標。為了保證直播的穩(wěn)定流暢，阿彬在內部發(fā)起了多次壓力測試。1月15日至2月1日，每天凌晨，金山云通過模擬海量用戶訪問，從業(yè)務最低峰期到最高峰期的多輪測試來確保系統(tǒng)的能力，不斷發(fā)現(xiàn)潛在風險問題，并針對性優(yōu)化。
但是大家心里明白：對于春晚直播，這還遠遠不夠。
根據歷年春晚數據分析，在晚上8點晚會開始后的每個整點時刻，都會進入流量的高峰時段，同時伴隨搶紅包等活動會導致的用戶訪問高潮。這是最為考驗穩(wěn)定性的時候，訪問量過大會引起局部過載的問題，導致信號無法穩(wěn)定傳輸。
在例行周會上，團隊里的年輕人透露出自己的擔憂。但作為春晚項目的掌舵人，金山云CDN及視頻云產品中心總經理宗劼顯得氣定神閑，亮出了兩張“技術牌”：智能調度系統(tǒng)+多流擇優(yōu)。
這是金山云團隊自主研發(fā)的“殺手锏”，在業(yè)界也屬首創(chuàng)，能夠扛住千萬級別高并發(fā)、高QPS的數據流量訪問，確保直播信號在CDN內部穩(wěn)定傳輸。
伴隨著春晚腳步的臨近，技術難題正在逐一被解決。
“TOP級的重點保障”
2021年1月1日，新年第一天。
雖然正值元旦假期，但是對于春晚重保團隊來說，真正的挑戰(zhàn)才剛剛開始。隨著疫情形勢的再度緊張，各地號召群眾就地過年，因此對于春晚帶寬的壓力勢必也將激增。
一大早，工程師們陸陸續(xù)續(xù)來到辦公區(qū)。在最后沖刺的一個多月里，他們將把這里當做自己的第二個家。“毫無疑問，春晚項目就是TOP級重點保障”。
金山云在視頻云領域多年累積的能力，成為護航春晚直播的技術基礎。
比如，AI+VR裸眼3D技術正在被各大直播活動所采用，因為它可以突破傳統(tǒng)舞臺空間呈現(xiàn)形態(tài)，新穎炫酷、科技感更足。
但是如何提供良好的三維立體觀看體驗，成為了行業(yè)內必須面對的現(xiàn)實問題。
早在去年，金山云就已經支持8K與VR的配合，360度高清視頻傳輸渲染，提供端到端一體化的完整VR點/直播解決方案。此外，金山云VR FOV技術將視角切換延遲控制在30-60毫秒，有效消除暈動。同時借助AI能力，可讓數億觀眾體會身臨其境的三維立體觀看體驗。
再比如，編解碼技術是視頻云的核心之一。
目前，金山云廣泛支持H264/265、AVS2、AV1等主流編碼方式，并提供基于此的視頻轉碼服務，同時擁有集智高清、KIE等多組產品。
“不積跬步無以至千里，我們在視頻領域的研發(fā)動作一直很超前?！?/strong>宗劼總結說。
2021年2月11日晚8點，春晚直播正式開始。
前幾波流量峰值與事先計劃的一樣，均未超出大家的預料。
負責運維的大華如釋重負，準備起身去倒杯咖啡提提神。這時他突然發(fā)現(xiàn)春晚直播的一路流出現(xiàn)回源連接數超限的隱患。
經驗豐富的大華立馬意識到：這是某股不可預見的流量突然涌入，可能即將出現(xiàn)網絡異常！但是由于客戶采用了非標準配置，修復回源連接數配置需要手動下發(fā)配置。
大華當機立斷向上請示，在得到客戶授權之后，他火速下令：“給客戶下發(fā)配置，”過了一秒他補充說，“嚴格按照流程！”
運維同學們仿佛是下意識地在進行操作：配置修改、測試、灰度、上線。在四個步驟嚴格執(zhí)行的前提下，僅耗時20分鐘就將配置變更完畢，保證了良好的直播體驗。
看著監(jiān)測器上的數據恢復正常，大家都長舒了一口氣?！笆孪妊菥毺啻危@幾乎已經形成了肌肉記憶?！贝笕A事后回憶說。
零點即將到來，這是最后一波流量高峰。
幾十位工程師緊盯著大屏上的各個指數。最終，QPS和PCU峰值達到了某一個數值，但金山云穩(wěn)穩(wěn)扛住了壓力，就像之前經歷的無數次壓測一樣，順利，且平靜。
當春晚按時播放，當年夜飯上桌，當煙花綻放，沉浸在團聚喜悅中的你或許不會知道，有這樣一群人依然在堅守崗位，保證互聯(lián)網世界的有序運作。
隨風潛入夜,潤物細無聲。