來自冰雪盛會的啟示:大型賽事如何保障IT系統(tǒng)安全有效?
文 | 曾響鈴
來源 | 科技向令說
因為進入技術(shù)工作間要跨過一段雪道,IT工程師化身就地取材的搬運工,用桌子當作雪橇在冰天雪地里搬運重要的設備;
不巧遇上纜車停運,原本要去一個重要場館進行IT檢查維護的工程師不敢耽擱,選擇了在零下10度的嚴寒中冒著寒風徒步爬上高達160米的陡坡;
出現(xiàn)了突發(fā)的設備部署問題,而時間已經(jīng)越來越緊迫,工程師們共同協(xié)商、行動,直到隆冬的深夜徹底解決問題后,才各自散去……
最近,鳳凰網(wǎng)發(fā)布一支關(guān)于冰雪盛會背后的數(shù)字建設者的視頻,引發(fā)廣泛關(guān)注,而這些不斷克服困難、忘我工作的IT運維場景就來自于鳳凰網(wǎng)這支視頻,來自于背后的這個隱形工程,一個看不見的賽場。
冰雪盛會無疑成為當下主要的輿論熱點,無數(shù)運動員和教練團的夢想要在這里找一個答案,而作為一種大型賽事,其背后的IT運維同樣值得業(yè)界關(guān)注,在大型賽事的IT支撐如何有效進行的問題上,這場冰雪盛會或許也在給出自己的答案。
急、難、變,國際大型賽事的IT運營面臨三大挑戰(zhàn)
普通人對大型賽事的直觀印象,往往停留在藝術(shù)大師設計的鋼筋水泥恢弘建筑以及緊張刺激的運動員比賽當中,而事實上,在建筑物之下、在運動員之外,一個能夠提供IT支撐保障賽事順利進行、讓信息及時有效傳播的技術(shù)系統(tǒng)更可以看作是一場賽事的血液和骨架。
作為不為多數(shù)人所能直接察覺而又不可或缺、時刻存在的工程,信息傳播讓賽事精彩在發(fā)生的同時能夠同步傳遞到全世界、為全球觀眾所共享,在很多類似規(guī)模和級別的賽事中,IT運維保障往往面臨急、難、變?nèi)筇魬?zhàn):
一是急,一般大型賽事給予IT系統(tǒng)籌備的時間并不算長,而IT系統(tǒng)往往囊括方方面面,像歷屆奧運會、亞運會都包括注冊系統(tǒng),住宿系統(tǒng),工作人員志愿者管理系統(tǒng),醫(yī)療管理系統(tǒng),抵離系統(tǒng),物流系統(tǒng),火炬?zhèn)鬟f系統(tǒng)等復雜系統(tǒng),要在不長的時間內(nèi)完成搭建——在這場冰雪盛會的前45天,北京和張家口地區(qū)每個場館都還在緊張地進行著最后的技術(shù)調(diào)試。

IT運維工程師持續(xù)堅守(圖源:鳳凰網(wǎng)視頻截圖)
而更不用說在賽事進行期間,由于實時性要求,IT運維必須能在出現(xiàn)問題時做到快速響應甚至即時響應。
二是難,大型賽事對IT系統(tǒng)的要求是洪峰式的,復雜賽事情況、龐大的IT基礎設施系統(tǒng)對IT運營提出了各種難題,很多任務超出通常的IT運維所面臨的狀況。
以世界杯為例,僅判定進球的準確性,就涉及復雜的IT要素,包括門線攝像頭、有線及無線通訊、智能電網(wǎng)、裁判的智能手表、網(wǎng)絡安全,太陽能發(fā)電等,要進行十分精密的設計(本次冰雪賽事上,追蹤短道速滑的快速移動攝像機也成為幫助判罰的功臣)。而在對外傳播上,從2014年起,隨著通信技術(shù)和移動終端的快速發(fā)展,每界世界杯的全球觀眾都超過30億人,給IT系統(tǒng)提出了極高的穩(wěn)定性要求。
三是變,與通常的企業(yè)、政務機構(gòu)IT系統(tǒng)在一個較為標準化的場景中設置不同的是,大型賽事的實際場景多變、個性化強,面臨更復雜的自然條件和更多基礎設施方面的困難,系統(tǒng)方案只能因地制宜,很多經(jīng)驗無法復用,每一次IT系統(tǒng)的建設和運維,都是一次全新的挑戰(zhàn)。
這次賽事就十分典型,場館設置分為永久建筑與臨時建筑,現(xiàn)場情況也較為復雜,IT系統(tǒng)在每個場館都需要單獨考慮,連遇到情況要趕往現(xiàn)場處理也面臨各種變數(shù),開篇提到的工程師自己爬長坡便是如此。

搭建在場地內(nèi)IT支持場所(圖源:鳳凰網(wǎng)視頻截圖)
快、準、狠——冰雪盛會的IT運營是怎么做的?
在鳳凰網(wǎng)的視頻中,為本次賽事提供IT運維服務的團隊,其做法與大型賽事所面臨的IT運維挑戰(zhàn)相對比,可以說主要表現(xiàn)出快、準、狠三大特征,而這些特征一方面固然可以說是聯(lián)想團隊發(fā)揮長期以來IT服務能力的展現(xiàn),而另一方面,也不得不說是這種大型賽事倒逼IT運維的結(jié)果。
首先,在出現(xiàn)任何狀況時,IT運維要做到“快”。
在視頻中,張家口地區(qū)場館出現(xiàn)了技術(shù)故障,必須立刻處理。按通常的IT運維過程,這種設備測試是一種常態(tài),但對賽事來說“常態(tài)”卻并不意味著就是小事,出現(xiàn)任何問題和故障,不僅需要盡快消除故障、恢復服務,更要找到問題出現(xiàn)的根本原因。
此時,崇禮地區(qū)場館的IT負責人沒有耽擱,馬上連同其中一位場館技術(shù)運維負責人前去查看,在必須到場館頂部現(xiàn)場查看時,就出現(xiàn)了開篇一行人在零下10攝氏度的寒風中徒步爬上160米狹窄陡坡的一幕。

為順利完成檢修工作,技術(shù)運維人員徒步走上崇禮地區(qū)場館的陡坡(圖源:鳳凰網(wǎng)視頻截圖))
而當天出現(xiàn)的問題,在最終在深夜得到了圓滿解決。在有限的準備時間里,每一天的耽誤積壓到下一天,試錯空間越來越小,最終會造成IT系統(tǒng)無法在開賽前圓滿搭設完成,“當日事當日畢”這種個人勵志的箴言,在賽事IT運維這里同樣適用。
然后,是在復雜系統(tǒng)的工作中能夠運籌帷幄、找“準”核心目標克服困難。
在通常的政企IT系統(tǒng)運維中,一個設備調(diào)試問題可能不算很復雜,但在這里,由于場館眾多、設備體系龐雜,每一個小問題往往都可能要層層傳遞到技術(shù)運維項目組的各個部門,這時候,系統(tǒng)化調(diào)用來自各方的資源、準確識別問題就變得十分重要。
在鳳凰網(wǎng)的視頻記錄中,面對張家口地區(qū)機房內(nèi)設備網(wǎng)絡調(diào)試問題,一位技術(shù)運行中心的高級顧問開始了技術(shù)團隊人員調(diào)配、協(xié)同各方力量資源“會診”的工作,讓聯(lián)想設備相關(guān)技術(shù)問題得到及時有效的處理和解決。
在匯聚不同組織和公司人員的共同參與下,這個“臨時團隊”明確問題、確切原因,進一步優(yōu)化技術(shù)方案,在復雜的IT系統(tǒng)之下,不能聯(lián)網(wǎng)的問題得到了準確的認知并最終圓滿解決,兩臺機器最終連上了網(wǎng)絡——這個看似簡單的故障,在大型賽事這里必須匯聚多方智力共同定位和準確認識才能得到有效解決。

不同職能的工程師共同協(xié)商解決問題(圖源:鳳凰網(wǎng)視頻截圖)
最后,是在具體執(zhí)行落地方面,要求工程師們在工作理念和方式上足夠“狠”。
如果說為了一個共同的目標,IT團隊在寫字樓里通力協(xié)作只能算是“努力”,那么在冰雪賽場上,為了保障IT系統(tǒng)的有效建設和運行,工作模式某種程度上就更像是“狠”,克服惡劣的自然條件,忍受長期與家人離別的思念,時刻神經(jīng)緊繃甚至可以說是枕戈待旦,這些都成為IT運維工程師們的工作狀態(tài)的真實寫照。

工程師與年幼的女兒通視頻電話(圖源:鳳凰網(wǎng)視頻截圖)
賽場上,運動員們緊張地備戰(zhàn)、參賽,而在看不見的IT運維賽場上,工程師們也在經(jīng)歷一場屬于自己的服務大賽,考驗著他們的技術(shù)能力、業(yè)務水平甚至心理韌勁,而最終能夠成功將IT運維服務做下來,他們以及他們背后的企業(yè)也將收獲自己的金牌。
超越認知,大型賽事的IT運維凸顯IT服務的幾大現(xiàn)實
鳳凰網(wǎng)視頻中對IT運維的展現(xiàn),以工程師個人經(jīng)歷視角表達了大型賽事IT運維要如何去做,而事實上,如果從數(shù)字化轉(zhuǎn)型大時代的視角看,大型賽事的IT運維要求提升恰恰也表現(xiàn)出數(shù)字化在各行各業(yè)的滲透,只不過現(xiàn)在對象由政企組織變成了一次大型活動罷了。
因此,一次高質(zhì)量的大型賽事的IT運維過程,也表達出當下IT服務賽道上一些必須正視的現(xiàn)實。
首先,是長服務周期下,IT服務的價值往往集中在那些緊急、重要、困難的時間片段中。
一個IT項目的建設、服務周期一般都很長,很多人也常常以時間長短、日常性工作的逐步開展來看待IT服務的價值,但實際上,IT服務在很多時候其價值分布不均勻,往往在緊急、重要、困難的時刻凸顯得更為明顯。
而對應的,IT服務也不可避免地分為很多內(nèi)容,實際上不同解決方案、不同供應商提供的服務,在大多數(shù)情況下可能都是類似的,而不同企業(yè)或方案的能力差距,往往只體現(xiàn)在那些處理最困難問題的地方。
在鳳凰網(wǎng)的視頻中,最令普通大眾和業(yè)界感受深刻的,恰恰是工程師著力解決問題的時候,這些時間片段讓IT服務的價值走向高光時刻,也最能體現(xiàn)背后的服務商聯(lián)想的技術(shù)能力、業(yè)務水平與工作態(tài)度。
然后,是所謂高大上的技術(shù)服務,離不開最基本的身體力行。
在大眾甚至業(yè)界眼中,IT服務帶有高端技術(shù)服務的特質(zhì),往往在寫字樓、在計算機上敲敲打打就能掌控全局,但實際一個要良好落地的IT項目一定是身體力行的結(jié)果,場景越是復雜,走到現(xiàn)實場景中甚至干“體力活”就越是重要。
在項目上,聯(lián)想的工程師自己搬設備、寒冷天氣爬高坡,可能只是更多場景下進行IT服務工作的一個典型的寫照。在制造業(yè)、在農(nóng)業(yè)等等更多場景下,下到條件艱苦的車間和農(nóng)田去了解現(xiàn)場實際、解決問題和優(yōu)化方案,必不可少,也只有這樣,才能讓IT系統(tǒng)發(fā)揮最大的價值。

工程師在雪地里搬運設備(圖源:鳳凰網(wǎng)視頻截圖)
最后,前沿技術(shù)概念不是IT服務的底氣,實踐經(jīng)驗才是。
雖然這些年從事IT服務的企業(yè)提出了很多新的概念,但IT服務并非一定需要前沿的技術(shù)概念,一個成功的項目除了技術(shù)能力,更重要的是實踐經(jīng)驗的積累,尤其是在垂直領(lǐng)域的經(jīng)歷十分關(guān)鍵,因此IT服務很難有大眾在這個時代通常期待的黑馬冒出,能夠做得好的、客戶愿意信任的,往往還是那些“老江湖”。
在聯(lián)想支持的背后,是長久以來的技術(shù)和業(yè)務經(jīng)驗的積淀。
正如鳳凰網(wǎng)視頻最后的資料顯示,2006年2月10日,都靈冬奧會開幕,聯(lián)想提供了5000臺臺式電腦、近600臺筆記本、近400臺服務器、600臺桌面打印機以及技術(shù)支持,并派出了100多人的聯(lián)想工程師服務團隊,以高穩(wěn)定、高可靠和高安全性和零故障的表現(xiàn)得到國際奧委會的高度評價。聯(lián)想的奧運技術(shù)運維故事,由此拉開序幕。
2008北京奧運會,聯(lián)想完成了向北京奧組委集成實驗室的第二階段硬件供貨(共三個階段),共提供了包括筆記本電腦、臺式機、打印機等在內(nèi)的700臺IT設備,成為奧運全球頂級贊助商里第一家中國企業(yè)。
這些經(jīng)歷,是聯(lián)想做好本次冰雪賽事的IT服務的重要前提和基礎,或許也是聯(lián)想被選中的重要原因之一。

聯(lián)想工程師正在場地內(nèi)緊張工作(圖源:鳳凰網(wǎng)視頻截圖)
總而言之,大型賽事無疑是IT服務的一次大考,全方位考驗著一個供應商的能力,只有在技術(shù)上具備充分的積淀、在資源協(xié)同上具備系統(tǒng)化協(xié)同能力,以通力配合的團隊才能成功完成,而一旦能夠?qū)⑦@種最困難的IT服務項目做下來,在數(shù)字化時代也就有了最具備權(quán)威性的背書,服務更多政企客戶以及更多地區(qū)性、全球性賽事。
*本文圖片均來源于網(wǎng)絡