技術(shù)
導(dǎo)讀:今年的春晚也是百度云的一次大練兵,此前從未經(jīng)歷過(guò)如此大規(guī)模的流量峰值,簡(jiǎn)單的“搶紅包”背后存在三個(gè)技術(shù)挑戰(zhàn):如何處理極大的臨時(shí)用戶登錄量,如何應(yīng)對(duì)瞬時(shí)出現(xiàn)的流量峰值,以及如何解決短期的巨大資源需求?
春晚紅包就像是一只推門(mén)的手,門(mén)外是未知,門(mén)內(nèi)是創(chuàng)新。
2015年,微信成為央視春晚的座上賓,全民“搖一搖”的紅包雨,讓電子紅包成為春節(jié)的新習(xí)俗;
2016年,支付寶成為春晚紅包的合作方,往年討論的是有什么新節(jié)目,那一年的話題是敬業(yè)福和“咻一咻”。
2019年,百度“承包”起豬年春晚的紅包,全球觀眾參與互動(dòng)紅包次數(shù)達(dá)208億次,百度系A(chǔ)pp成為今年紅包大戰(zhàn)的最大贏家。
今年的春晚也是百度云的一次大練兵,此前從未經(jīng)歷過(guò)如此大規(guī)模的流量峰值,簡(jiǎn)單的“搶紅包”背后存在三個(gè)技術(shù)挑戰(zhàn):如何處理極大的臨時(shí)用戶登錄量,如何應(yīng)對(duì)瞬時(shí)出現(xiàn)的流量峰值,以及如何解決短期的巨大資源需求?
在四個(gè)多小時(shí)的春晚過(guò)程中,一些第三方應(yīng)用商店紛紛崩潰,百度App沒(méi)有出現(xiàn)宕機(jī)現(xiàn)象,成為第一個(gè)扛住春晚紅包沖擊的互聯(lián)網(wǎng)公司,百度云近乎完美的結(jié)束了這場(chǎng)戰(zhàn)役。
搶紅包的“絲滑”體驗(yàn)
在海量業(yè)務(wù)并發(fā)的場(chǎng)景里,任何小問(wèn)題都可能成為大隱患,原生的技術(shù)難點(diǎn)無(wú)疑是運(yùn)維的深淵。
不同于往年的是,百度還推出了AI新玩法,語(yǔ)音搜一搜、與明星同框拜年等,多樣性的玩法也在考驗(yàn)百度云的AI能力。所幸,在整個(gè)春晚的過(guò)程中,百度系A(chǔ)pp的體驗(yàn)足以用“絲滑”來(lái)形容:
晚上8點(diǎn)40分,主持人喊出“搶紅包開(kāi)始”的口令時(shí),參與“搖一搖”得紅包的用戶數(shù)迅速過(guò)億,3億元紅包隨后被搶光。僅在第一輪“搖一搖”紅包中,參與紅包互動(dòng)就多達(dá)92億次。
為了應(yīng)對(duì)第一波流量高峰,百度春晚技術(shù)保障部門(mén)對(duì)登錄時(shí)的內(nèi)容加載進(jìn)行了優(yōu)化。對(duì)于搶紅包活動(dòng)中的出現(xiàn)的瞬間流量洪峰,后臺(tái)會(huì)自動(dòng)檢測(cè)變化,快速計(jì)算資源需求,智能調(diào)度增加系統(tǒng)容量,進(jìn)行合理的帶寬分配。除此之外,百度云在20天的項(xiàng)目籌備期內(nèi)將短信承接能力至少提升了數(shù)十倍。還與運(yùn)營(yíng)商合作,在云上部署了一鍵登錄功能,減輕大量用戶在第一輪對(duì)登錄系統(tǒng)的壓力。
晚上21點(diǎn)18分,第二輪小視頻紅包開(kāi)始,互動(dòng)次數(shù)隨即增加到115億次,對(duì)服務(wù)器帶寬有著極為苛刻的考驗(yàn)。
為了保證小視頻紅包的用戶體驗(yàn),百度進(jìn)行了兩手準(zhǔn)備:一是技術(shù)上的優(yōu)化,對(duì)視頻、圖片進(jìn)行極致壓縮,盡可能降低帶寬壓力;二是提前規(guī)劃布局和建設(shè)網(wǎng)絡(luò)資源,比如IDC和CDN在三個(gè)禮拜的時(shí)間內(nèi)完成了相當(dāng)于2018年全年的建設(shè)量。此外通過(guò)智能調(diào)度系統(tǒng),分鐘感知不同地區(qū)資源緊張程度,進(jìn)行相應(yīng)的資源調(diào)度和補(bǔ)給。
晚上22點(diǎn)40分,第三輪的搜索的得紅包正式啟動(dòng),此輪互動(dòng)還加入了語(yǔ)音搜索的互動(dòng)玩法。截至23:00,全球觀眾參與百度APP紅包互動(dòng)次數(shù)累計(jì)增加到137億次。
晚上23點(diǎn)30分,最后一輪搖一搖得紅包活動(dòng)開(kāi)啟,用戶積極性較第一輪有所削弱,依然有超過(guò)70億次互動(dòng)產(chǎn)生。
最終統(tǒng)計(jì)數(shù)據(jù)顯示,除夕當(dāng)天百度提供了4輪9億紅包,全球觀眾參與互動(dòng)活動(dòng)次數(shù)達(dá)208億次,APP的DAU峰值突破3億。
春晚紅包不宕機(jī)的背后是百度春晚技術(shù)保障部門(mén)提前一個(gè)多月的周密規(guī)劃和準(zhǔn)備,每個(gè)風(fēng)險(xiǎn)點(diǎn)都匹配了相應(yīng)的技術(shù)解決方案。
比如在擴(kuò)容IT資源方面,提前規(guī)劃布局和建設(shè)網(wǎng)絡(luò)資源。而且在時(shí)間緊任務(wù)重的壓力下,北京順義華威機(jī)房在8小時(shí)內(nèi)完成了10000臺(tái)服務(wù)器的物理上架,16小時(shí)完成自動(dòng)化上線交付業(yè)務(wù)使用,創(chuàng)造了業(yè)界服務(wù)器交付速度的新紀(jì)錄。在技術(shù)實(shí)力之外,體現(xiàn)了百度工程師們高效的執(zhí)行能力。
智能架構(gòu)戰(zhàn)勝“人肉”
從2015年央視春晚引入紅包的玩法開(kāi)始,幾乎所有的互聯(lián)網(wǎng)巨頭都在搶奪紅包活動(dòng)的承辦權(quán),但并非所有玩家都似百度這般“幸運(yùn)”。
站在春晚紅包身后的“惡魔”正是宕機(jī),以至于流傳著這樣一個(gè)說(shuō)法:在春晚上投廣告的最低門(mén)檻是日活過(guò)億,否則服務(wù)器很可能會(huì)瞬間崩掉。
早在2015年微信和春晚的合作中,就出現(xiàn)了多次宕機(jī)的情況:當(dāng)晚九點(diǎn)左右微信出現(xiàn)了短暫的宕機(jī),春晚過(guò)程中有1.2億個(gè)紅包送出,但也有不少網(wǎng)友在社交網(wǎng)絡(luò)上反映卡頓、消息無(wú)法接收、紅包發(fā)不出去等等。
2016年支付寶拿下春晚合作機(jī)會(huì),除夕夜紅包活動(dòng)的總參與人數(shù)達(dá)到3245億次,達(dá)到2015年春晚互動(dòng)次數(shù)的29.5倍,同樣也出現(xiàn)了宕機(jī)時(shí)刻。
到了2018年,春晚宕機(jī)事件已經(jīng)多次告警,合作方淘寶也提前推導(dǎo)了各自極端情況,并且在2017年雙11的基礎(chǔ)上擴(kuò)容三倍。結(jié)果卻是,不少網(wǎng)友吐槽無(wú)法登錄注冊(cè)、綁定親情號(hào)失敗、不能組團(tuán)搶紅包等,經(jīng)歷過(guò)數(shù)次雙11挑戰(zhàn)的阿里云,也倒在了春晚的流量高峰面前。后來(lái)公布的數(shù)據(jù)顯示,春晚當(dāng)晚的流量峰值是2017年雙11的15倍。
宕機(jī)的頻繁發(fā)生,并非是騰訊、阿里沒(méi)有“一級(jí)警備”,相反往往要投入幾百人的技術(shù)保障團(tuán)隊(duì)。春晚紅包是互聯(lián)網(wǎng)巨頭們爭(zhēng)奪的對(duì)象,也是云計(jì)算的春節(jié)戰(zhàn)場(chǎng),所謂的宕機(jī)史,也是云計(jì)算的進(jìn)化史。
坊間流傳最廣的無(wú)疑是阿里雙11的故事,早幾年的后臺(tái)保障也普遍被戲稱為“人肉”計(jì)算。比如2010年以前,互聯(lián)網(wǎng)公司普遍采用的是IOE系統(tǒng),IBM的小型機(jī)配合Oracle數(shù)據(jù)庫(kù)和EMC的存儲(chǔ)設(shè)備。為了一場(chǎng)雙11大考,從年初準(zhǔn)備到年尾,可憐最后可能連及格的分?jǐn)?shù)都沒(méi)有。
一位經(jīng)歷過(guò)雙11的程序員,形象的還原了那個(gè)運(yùn)維全靠吼、擴(kuò)容全靠“殺掉”非關(guān)鍵系統(tǒng)的年代:“雙11那一天,每個(gè)人看自己服務(wù)器的系統(tǒng)水位,出現(xiàn)問(wèn)題吼一嗓子,哪里有空閑的資源調(diào)過(guò)來(lái),后來(lái)容量不夠,又把一些非關(guān)鍵系統(tǒng)殺掉?!?/p>
再來(lái)看百度云在今年春晚的保障,系統(tǒng)隨時(shí)響應(yīng)每秒數(shù)千萬(wàn)的請(qǐng)求,并支持快速擴(kuò)展支持更多請(qǐng)求處理,智能取代了“人肉”。有百度技術(shù)人員打了一個(gè)形象的比方:“整個(gè)體系就像一個(gè)彈性容器,全自動(dòng)自如擴(kuò)容縮容。當(dāng)遇到流量洪峰時(shí),系統(tǒng)會(huì)智能調(diào)度,快速接入帶寬資源,按照用戶任務(wù)的不同,匹配適應(yīng)的容量?!?/p>
同時(shí)在基礎(chǔ)設(shè)施層面,百度云的大放異彩與百度早已成熟的網(wǎng)絡(luò)架構(gòu)有關(guān)。過(guò)去十多年,百度網(wǎng)絡(luò)架構(gòu)經(jīng)歷了自有業(yè)務(wù)規(guī)??焖僭鲩L(zhǎng)和To B業(yè)務(wù)多樣需求的考驗(yàn),具有很好的高可擴(kuò)展性和靈活性,可以快速調(diào)配服務(wù)器,支撐快速接入帶寬資源,調(diào)度系統(tǒng)可以很好的支撐節(jié)點(diǎn)的快速擴(kuò)容,極大的提升了保障服務(wù)的可用性和運(yùn)維效率。
任何奇跡的出現(xiàn)都離不開(kāi)背后的努力,春晚紅包也不例外。
AI To B 小試牛刀
每一場(chǎng)實(shí)戰(zhàn),都是對(duì)互聯(lián)網(wǎng)基礎(chǔ)設(shè)施的一個(gè)大考,也是技術(shù)迭代的跳板。
正如很多人的觀點(diǎn),沒(méi)有“黑五”過(guò)剩的計(jì)算資源,就沒(méi)有亞馬遜押注云計(jì)算的決心,沒(méi)有雙11、618這樣的電商狂歡節(jié),或許中國(guó)云計(jì)算的爆發(fā)還需要多等幾年。同樣的例子也出現(xiàn)在云計(jì)算的春節(jié)戰(zhàn)場(chǎng)上,首次迎戰(zhàn)的百度云就交出了百分答卷,印證了百度躋身云計(jì)算一線陣營(yíng)的地位,也讓百度的對(duì)話式搜索、自然語(yǔ)言處理等AI能力曝光在鎂光燈下。
我想,其中的受益者不會(huì)局限在百度系A(chǔ)pp,2018年9月份的百度云智峰會(huì)上,正式對(duì)外推出了兼具深度學(xué)習(xí)、對(duì)話式搜索、自然語(yǔ)言處理等全面AI能力的AI to B平臺(tái),并通過(guò)云服務(wù)框架集成在AI、大數(shù)據(jù)、云計(jì)算方面的能力,幫助企業(yè)快速接入云端獲取AI能力。
中國(guó)互聯(lián)網(wǎng)上有很多流派,百度恰恰是技術(shù)派的典型代表,不宕機(jī)的春晚紅包,將百度的技術(shù)能力完美呈現(xiàn)。而在技術(shù)層面的較量背后,一場(chǎng)春晚紅包讓百度云的AI To B 小試牛刀,注定是整個(gè)行業(yè)的紅利。