財經(jīng)燃燒(ID:rancaijing)原創(chuàng)

作者|張?zhí)m女

編輯|索契

微博歷史上的三大戰(zhàn)役：范冰冰李晨、王寶強、魯漢。

“微博技術(shù)專家胡忠想2017年在微博上調(diào)侃道。

李晨發(fā)長文表示“珍惜范冰冰”、王寶強發(fā)布離婚聲明，鹿晗公布戀情，都一度讓微博宕機，短則十分鐘，長則持續(xù)了1個多小時。對此微博回應(yīng)稱流量瞬間暴增，超出服務(wù)器最大訪問閥值，將加強技術(shù)儲備，完善應(yīng)對方案。

6月27日晚間，范冰冰李晨宣布分手，瞬間億級的訪問量，讓微博再一次“崩潰”：范冰冰賬號評論區(qū)無法加載，搜索“范冰冰李晨”顯示失敗。

為什么微博總是宕機？隨著5G時代來臨，邊緣計算廣泛應(yīng)用后，宕機情況還會繼續(xù)發(fā)生嗎？

衡量明星火不火,就看微博是否為他宕機過

不得不承認(rèn)，明星的內(nèi)容與流量支撐起了微博的大半江山。每次明星爆出熱點事件，觀眾都會第一時間奔向微博吃瓜，瞬間涌入的流量也直接導(dǎo)致了微博宕機。

2015年6月1日，在李晨和范冰冰承認(rèn)兩人正在熱戀中的兩天后，李晨又深夜發(fā)長文證實張馨予出軌導(dǎo)致分手并稱珍惜范冰冰。微博瞬間陷入崩潰，十幾分鐘后才恢復(fù)正常。

2016年5月20日，霍建華工作室官方微博發(fā)消息稱：“華說：希望得到大家的祝福，@林心如?！绷中娜绻ぷ魇覄t轉(zhuǎn)發(fā)了該微博并加了一顆愛心，默認(rèn)了戀情，微博系統(tǒng)一度崩潰。

但這兩次微博宕機還算小范圍，王寶強馬蓉事件曾讓微博一天內(nèi)“癱瘓”了數(shù)次。

2016年8月14日，王寶強深夜發(fā)布離婚聲明稱妻子馬蓉與經(jīng)紀(jì)人存在婚外不正當(dāng)兩性關(guān)系。微博瞬間爆掉，僅五秒內(nèi)該條微博的評論數(shù)就已過萬。緊接著微博服務(wù)器崩潰，無法刷出新內(nèi)容。

微博修復(fù)好后，幾條相關(guān)微博的點贊數(shù)和評論數(shù)都超過了100萬，有網(wǎng)友表示，凌晨兩點，微博很多內(nèi)容還是加載不出來。第二天一早，不僅微博熱搜無法進入，部分地區(qū)微博的評論點贊提示功能更是失靈，用戶關(guān)注頁面出現(xiàn)bug，feed流出現(xiàn)問題，最新內(nèi)容無法刷出。

僅僅一個月后，網(wǎng)上突然出現(xiàn)大批爆料，稱演員喬任梁在上海桃浦離世。晚上10點許，上海警方微博發(fā)布消息，稱9月16日晚18時21分，普陀公安接到報警稱桃浦地區(qū)祁順路某住宅樓內(nèi)有一男子死亡。該微博發(fā)布15分鐘后，新浪微博開始宕機。

微博界面顯示網(wǎng)絡(luò)出錯

2017年10月8日下午，國慶節(jié)假期的最后一天，演員鹿晗和關(guān)曉彤公開戀情。隨后微博出現(xiàn)了無法正常刷新、評論等多個頁面無法正常顯示的問題。此次兩人的戀情公布，微博數(shù)據(jù)也達到了巔峰，兩人互動數(shù)（轉(zhuǎn)評贊）合計1380萬。

微博客服證實客戶端出現(xiàn)了無法正常刷新、評論等多個頁面無法正常顯示的問題，并表示工程師已在排查。

這次癱瘓堪稱微博史上最嚴(yán)重的一次，持續(xù)了1.5個小時，王高飛也在微博上表示，緊急租了1000臺服務(wù)器才解決問題。

2018年10月16日早間，演員趙麗穎和馮紹峰突然在社交平臺微博上發(fā)布婚訊。熟悉的一幕再次上演，搜索相關(guān)關(guān)鍵詞時，系統(tǒng)一度卡頓。微博方面回應(yīng)稱，確實是發(fā)生宕機，原因是流量瞬間暴增，超出服務(wù)器最大訪問閥值。并稱后續(xù)將仔細(xì)復(fù)盤，加強技術(shù)儲備，完善應(yīng)對方案。

發(fā)生了幾次宕機事件后，吃瓜群眾們對此表示已經(jīng)習(xí)慣，甚至很多人認(rèn)為，如果明星突然宣布結(jié)婚或分手微博還沒宕機，只能證明該明星還不夠火。

今年的兩次宕機，發(fā)生在“志玲姐姐”結(jié)婚和“范爺”分手上。

6月6日，林志玲結(jié)婚喜訊宣布后，在微博搜索上林志玲的名字顯示搜索失敗，請重試。

6月27日，范冰冰李晨宣布分手，范冰冰賬號評論區(qū)無法加載，搜索“范冰冰李晨”顯示失敗。

此外，朱一龍發(fā)博、沈夢辰賣貨，王思聰公布百萬大抽獎結(jié)果等事件也一度讓微博發(fā)生小范圍故障。

成本和宕機之間,微博選擇前者

都9012年了，微博為何還在不斷宕機？

據(jù)業(yè)內(nèi)技術(shù)人員介紹，服務(wù)器集群都會按照平時流量預(yù)估的峰值來設(shè)置。這幾次宕機事件都是由于突發(fā)熱點事件造成的瞬間流量過大，導(dǎo)致服務(wù)器壓力承受不住客戶請求而崩潰。

微博技術(shù)專家演講截圖

據(jù)微博技術(shù)專家在演講時引用的數(shù)據(jù)圖顯示，鹿晗關(guān)曉彤宣布戀情的瞬間，搜索流量激增3倍有余。

為了成本考慮，目前微博都是在熱點事件爆發(fā)后才會去阿里云緊急擴容。

微博CEO王高飛微博截圖

幾年前，微博建設(shè)了一套全自動化運維平臺，新浪微博技術(shù)專家介紹，微博的自動化運維平臺是借助公有云彈性計算資源平臺應(yīng)對爆發(fā)式峰值流量，基于Docker、Swarm等容器云技術(shù)體系實現(xiàn)分鐘級千臺規(guī)模機器創(chuàng)建及服務(wù)部署自動化運維體系。

架構(gòu)內(nèi)部主要采用私有云，早期采用物理機部署，通過化零為整建立冗余池；此外通過OpenStack+KVM的虛擬化方式進行資源整合，建立VM池。在公有云方面，通過采用阿里云等設(shè)施進行多云對接。

微博遇到的流量挑戰(zhàn)是瞬間峰值高但持續(xù)時間短，當(dāng)流量激增形成脈沖計算時，保證系統(tǒng)穩(wěn)定性的唯一辦法就是快速擴容甚至是實時擴容，通過引入阿里云的彈性計算資源來應(yīng)對流量短時高峰的情況。目前微博混合云DCP平臺，具備15分鐘內(nèi)擴容1000+服務(wù)器的能力。

這為微博省去了大量的成本，畢竟平時如果征用這么多服務(wù)器，也都基本處于閑置狀態(tài)，實在過于浪費。阿里云官微曾表示，一臺機器租用1小時只要1.86元，但事實上這只是華北3區(qū)一臺低配版機器的價格。就按這個低配價來算，每天使用1臺機器將產(chǎn)生45元錢左右的費用，1000臺就要45000元，一月就是135萬元，一年將近為微博帶來1620萬元的成本。粗略算來，動態(tài)擴容一年或許可以為微博省下超過1000萬的費用。

微博技術(shù)專家胡忠想也曾在微博上吐過苦水：擴容少了沒扛住，掛了；擴容多了沒流量，虧了。

微博技術(shù)專家胡忠想微博截圖

面對這種“里外不是人”的兩難狀態(tài)，熱點發(fā)生時再動態(tài)擴容來應(yīng)對，或許才是微博最佳的選擇，畢竟誰也無法預(yù)估當(dāng)天會有哪對明星情侶宣布分手。

如果發(fā)生宕機，阿里云目前技術(shù)可以做到在1分半鐘內(nèi)解決。在2018杭州云棲大會主論壇上，阿里云測試混合云容災(zāi)方案，在服務(wù)器宕機、業(yè)務(wù)中斷的幾秒后，監(jiān)控系統(tǒng)探測到服務(wù)不可連接，在1分半鐘之內(nèi)，業(yè)務(wù)在云上恢復(fù)了運行。

除了擴容外，“降級”也是一種合理的控制手段。將應(yīng)用服務(wù)器進行業(yè)務(wù)拆分，每個業(yè)務(wù)應(yīng)用負(fù)責(zé)相對獨立的業(yè)務(wù)運作，業(yè)務(wù)之間通過同享數(shù)據(jù)庫來實現(xiàn)。當(dāng)服務(wù)器負(fù)載過重時，平臺可以做降級策略，保證核心業(yè)務(wù)順暢運行。比如當(dāng)微博的熱搜榜癱瘓時，評論、轉(zhuǎn)發(fā)等功能還可以正常使用。

微博技術(shù)專家此前表示，在應(yīng)對流量峰值時，除了彈性伸縮系統(tǒng)，還需要統(tǒng)一的監(jiān)控平臺、核心鏈路服務(wù)自動伸縮、預(yù)案&干預(yù)手段相互配合，以保障峰值服務(wù)正常運行。

熱點無法預(yù)測,“邊緣計算”或?qū)⒔鉀Q宕機難題

其實，出現(xiàn)宕機也不全是微博的錯，畢竟熱點無法預(yù)測。一般像雙十一、春節(jié)這種大型流量節(jié)點，各家都會提前做好充足的準(zhǔn)備工作。

百度為了今年春晚紅包戰(zhàn)事提前準(zhǔn)備一個月，增加了3萬臺服務(wù)器，投入了大幾億的成本。

為了迎接2018年雙十一，阿里云新增了近千萬的彈性計算能力，相當(dāng)于10座大型的數(shù)據(jù)中心，創(chuàng)造了“脈沖計算”的新紀(jì)錄。但扛住了千億級訪問量，維持交易正常進行，卻沒想到大量用戶提交退款，退款頁面瞬時崩潰。

再充足的準(zhǔn)備，也難以抵擋瞬間巨大的流量涌入。今年春節(jié)零點后，微信紅包顯示無法發(fā)送，直到半個小時以后才逐漸恢復(fù)。

在通信博士張峻愷看來，現(xiàn)在服務(wù)器的所有數(shù)據(jù)都放在單點云上，這種情況無論如何擴容，都會有瓶頸。他認(rèn)為，未來“邊緣計算”的成熟可以解決這一問題。

邊緣計算是一種分布式計算，將數(shù)據(jù)資料的處理、應(yīng)用程序的運行和功能服務(wù)的實現(xiàn)，由網(wǎng)絡(luò)中心下放到網(wǎng)絡(luò)邊緣的節(jié)點上。這樣就可以把云打散，就近接入不同節(jié)點，提供最近端服務(wù)。

全國網(wǎng)民在同時訪問微博時，可以就近訪問不同的節(jié)點。各個節(jié)點之間有一定的處理能力，處理完再上報給集中節(jié)點，這就大大減少了數(shù)據(jù)的匯聚和傳輸量，同時就近節(jié)點的訪問延遲也會縮短。

此外，邊緣計算支持?jǐn)?shù)據(jù)本地處理，大流量業(yè)務(wù)本地卸載可以減輕回傳壓力，有效降低成本。

預(yù)計到2020年，每人每天平均將產(chǎn)生1.5GB的數(shù)據(jù)量。5G時代以后，微博、抖音等APP數(shù)據(jù)量會呈幾何性增長，帶寬的擴張卻是線性增長，所以必須利用“邊緣計算”調(diào)整網(wǎng)絡(luò)結(jié)構(gòu)，讓帶寬增長的速度趕上數(shù)據(jù)增長的速度。

目前，“邊緣計算”還在發(fā)展階段，張峻愷認(rèn)為，未來5年內(nèi)將會完成布點建設(shè)。

*題圖來源于視覺中國。