極端環(huán)境下的IT運(yùn)維案例
譯文【2013年5月23日 51CTO外電頭條】去年秋天,隨著颶風(fēng)桑迪的步步緊逼,整個(gè)美國(guó)東海岸都開(kāi)始嚴(yán)陣以待;Robertory自然也不能例外,他正盤(pán)算著如何建立并運(yùn)行一整套IT體系。但時(shí)間緊迫,從組織技術(shù)團(tuán)隊(duì)到讓系統(tǒng)投付運(yùn)行,他只剩下幾個(gè)小時(shí)可以支配。
這時(shí)候,盡快選擇正確方向就成了他的第一要?jiǎng)?wù)。
Robertory是美國(guó)紅十字會(huì)災(zāi)難服務(wù)技術(shù)組的負(fù)責(zé)人。他的工作是確保紅十字會(huì)的急救人員在現(xiàn)場(chǎng)工作中擁有必要的技術(shù)支持,即使是在颶風(fēng)肆虐之時(shí)也不例外。
"大多數(shù)IT人士在談到自然災(zāi)害時(shí),第一反應(yīng)都是趕緊卷服務(wù)器跑路。但我們的選擇正好相反。我們關(guān)注的是如何在基礎(chǔ)設(shè)施陷入一團(tuán)糟時(shí)將設(shè)備帶入災(zāi)難現(xiàn)場(chǎng),"他解釋道。
作為一位在設(shè)施部署領(lǐng)域浸淫多年的老手,Robertory擁有一種異于常人的天賦:他能夠在很短的時(shí)間內(nèi)建立并解散一整套IT部門(mén)。
"我們先假定現(xiàn)場(chǎng)已經(jīng)不存在基礎(chǔ)設(shè)施,接下來(lái)要回答的問(wèn)題是:我們?cè)鯓硬拍茏屢磺谢謴?fù)正常?"他表示。
Robertory與其他幾位同樣身處極端環(huán)境下的IT管理者都認(rèn)為,由于自己的工作屬于臨時(shí)性質(zhì),因此必須將注意力集中在主干身上--即只為組織提供最需要的系統(tǒng)方案,以盡可能提高部署效率與效果。他們的經(jīng)驗(yàn)同樣能夠幫助處于其它特殊情況下的IT組織獲得成功,甚至在日常條件中也依然適用。
打包與準(zhǔn)備
對(duì)Robertory來(lái)說(shuō),專(zhuān)注于主干意味著快速為援助工作者提供工作所必需的設(shè)備及連接機(jī)制。有時(shí)候,例如颶風(fēng)桑迪來(lái)襲的情況,他能在一周之前就得到消息并著手準(zhǔn)備,雖然災(zāi)難的具體發(fā)生地點(diǎn)尚不明確。但在其它一些情況下,災(zāi)難則出現(xiàn)得更加突然。
無(wú)論哪種情況,他都能及時(shí)把需要交付的設(shè)備準(zhǔn)備就緒,從Windows筆記本到網(wǎng)絡(luò)裝置一應(yīng)俱全。"大家在普通辦公環(huán)境下能看到的一切設(shè)備都會(huì)被打包整理,牢固的保護(hù)措施使其能第一時(shí)間被送往條件惡劣的災(zāi)害現(xiàn)場(chǎng)。"
Robertory還將多種技術(shù)整合起來(lái)以確保自己的團(tuán)隊(duì)能立即投入工作并快速執(zhí)行任務(wù)。舉例來(lái)說(shuō),如果地面電話(huà)線(xiàn)路無(wú)法接通,他們就能采用蜂窩或者衛(wèi)星線(xiàn)路。在這套模塊化方案當(dāng)中,他不僅將各類(lèi)新技術(shù)添加進(jìn)來(lái),同時(shí)也保留那些在過(guò)去一直表現(xiàn)良好的傳統(tǒng)機(jī)制。
這些包裝箱將被發(fā)往災(zāi)區(qū),并在那里成為由志愿者組成的現(xiàn)場(chǎng)IT團(tuán)隊(duì)手中的利器。在努力對(duì)抗颶風(fēng)桑迪的過(guò)程中,志愿者們?cè)诩~約州的懷特普萊恩斯的集合地建立起IT基礎(chǔ)設(shè)施,并利用衛(wèi)星通信成功實(shí)現(xiàn)數(shù)據(jù)接入。設(shè)置工作后來(lái)轉(zhuǎn)移到了曼哈頓的一棟空置大樓當(dāng)中,在那里紅十字會(huì)終于可以使用現(xiàn)有網(wǎng)絡(luò)基礎(chǔ)設(shè)施進(jìn)行通信。
每臺(tái)設(shè)備都附有詳細(xì)說(shuō)明,幫助志愿者們快速了解其使用方法。Robertory表示應(yīng)急工作的目標(biāo)需要非常明確,這樣才能防止志愿者們陷入越忙越亂的窘境。"我們制定了一條十五分鐘原則--如果某項(xiàng)任務(wù)令執(zhí)行者十五分鐘還搞不清狀況,要么立刻需求幫助、要么干脆放棄。我們需要始終進(jìn)行有意義的嘗試,而不能把時(shí)間浪費(fèi)在結(jié)果未定的工作中,這是我們獲得成功的秘訣,"他解釋道。
最高訴求--速度
這并不奇怪,速度已經(jīng)成為大多數(shù)臨時(shí)IT組織的共同優(yōu)先目標(biāo)。如果大家心中還有懷疑,那請(qǐng)聽(tīng)聽(tīng)Michael Slaby的故事。
Slaby曾擔(dān)任奧巴馬2008年總統(tǒng)競(jìng)選團(tuán)隊(duì)的CTO,并在2012年奧巴馬爭(zhēng)取連任的競(jìng)選中擔(dān)任團(tuán)隊(duì)CIO。在這場(chǎng)為連任而奮斗的戰(zhàn)爭(zhēng)中,他負(fù)責(zé)整個(gè)團(tuán)隊(duì)的IT運(yùn)營(yíng),從分析到安全事務(wù)無(wú)所不包。早在2011年他就已經(jīng)投入工作,且整個(gè)2012年幾乎都在為此努力。他建立起一個(gè)在兩年間為成千上萬(wàn)工作者提供服務(wù)的IT部門(mén)--但他知道這一切都將最終散去。
"挑戰(zhàn)在于,我們需要優(yōu)化的對(duì)象與永久化企業(yè)組織有著顯著區(qū)別,"他表示。"這類(lèi)機(jī)構(gòu)很難提前規(guī)劃,不知道什么時(shí)候會(huì)突然需要擴(kuò)展規(guī)模,但有一點(diǎn)是肯定的--機(jī)構(gòu)會(huì)逐步龐大且所有目標(biāo)需要快速實(shí)現(xiàn),因此我們必須在速度提升方面絞盡腦汁。"
雖然速度如此重要,但Slbay仍然需要嚴(yán)格控制開(kāi)銷(xiāo)。他還需要保證機(jī)構(gòu)中的每個(gè)環(huán)節(jié)都運(yùn)轉(zhuǎn)良好,并為整體組織的任務(wù)提供支持。"這能幫助我們贏得選舉嗎?這是我們衡量一切的重要標(biāo)準(zhǔn),"他告訴我們。
Slaby指出,深入理解這些指標(biāo)能幫助他在制定決策時(shí)始終以組織需求為第一考量。他建立起自己的工程與基礎(chǔ)設(shè)施團(tuán)隊(duì),確保雙方順利協(xié)作并按照需求快速將系統(tǒng)加以整合。他將以云應(yīng)用為代表的各類(lèi)應(yīng)用推廣到幾乎全部Web基礎(chǔ)設(shè)施當(dāng)中,因?yàn)樗鼈兡芴峁┧枰乃俣扰c穩(wěn)定性。
這些準(zhǔn)則還能幫助他決定哪些步驟可以跳過(guò),即使這與標(biāo)準(zhǔn)化IT最佳實(shí)踐有所沖突--畢竟對(duì)于臨時(shí)機(jī)構(gòu)而言,具體執(zhí)行標(biāo)準(zhǔn)應(yīng)當(dāng)有所變動(dòng)。舉例來(lái)說(shuō),Slaby雖然關(guān)注安全事務(wù),"但并沒(méi)有執(zhí)著于拿出一套完美的工具。"他并沒(méi)有設(shè)置全面的災(zāi)難恢復(fù)計(jì)劃,只是為某些關(guān)鍵性系統(tǒng)配備了冗余機(jī)制。另外,他也沒(méi)有為工作人員或志愿者提供培訓(xùn)及發(fā)展規(guī)劃。"我們沒(méi)有時(shí)間處理這些事務(wù),"他表示。他同時(shí)指出,具備廣泛知識(shí)儲(chǔ)備的人才往往比只精通某一方面的專(zhuān)家更具潛力,這是因?yàn)楹笳邿o(wú)法根據(jù)需求隨時(shí)變換角色。
技術(shù)團(tuán)隊(duì)需要具備精深的專(zhuān)業(yè)知識(shí),Slaby與其他幾位領(lǐng)導(dǎo)者達(dá)成了共識(shí),因?yàn)榕R時(shí)性IT機(jī)構(gòu)同樣需要像永久性機(jī)構(gòu)一樣處理運(yùn)營(yíng)事務(wù)。盡管基礎(chǔ)設(shè)施在壽命周期上有所妥協(xié),但在臨時(shí)情況下使其順暢運(yùn)作同樣非常重要。
舉辦奧運(yùn)會(huì)
在擔(dān)任倫敦2012年奧運(yùn)會(huì)及殘奧會(huì)CIO的四年任期當(dāng)中,Gerry Pennell手下匯聚了四百位全職員工、兩千五百位臨時(shí)員工以及三千位志愿者,如此龐大的團(tuán)隊(duì)共同在他的負(fù)責(zé)下為這場(chǎng)體育盛事提供IT支持。
2008年11月,他所領(lǐng)導(dǎo)的團(tuán)隊(duì)剛剛完成北京夏季奧運(yùn)會(huì)的IT服務(wù)工作。當(dāng)時(shí)他手下只有十幾名成員以及一部分由國(guó)際奧委會(huì)提供的人力支持。2012年11月,他終于勝利完成這場(chǎng)緊張激烈的技術(shù)攻堅(jiān)戰(zhàn)。卸任之后,他一手建立起來(lái)的團(tuán)隊(duì)將繼續(xù)為2016年在里約熱內(nèi)盧舉辦的夏季奧運(yùn)會(huì)服務(wù)。
與其他CIO一樣,Pennell需要建立一套典型的辦公基礎(chǔ)設(shè)施,其中包括會(huì)計(jì)、電子郵件以及知識(shí)管理系統(tǒng)等項(xiàng)目。他還負(fù)責(zé)在運(yùn)動(dòng)賽事中實(shí)際使用的系統(tǒng),并為來(lái)自世界各地的運(yùn)動(dòng)員代表團(tuán)、記者、參與者以及狂熱粉絲提供技術(shù)支持。
除此之外,Pennell也貫徹了CIO的通行思路,即根據(jù)豐富經(jīng)驗(yàn)決定何時(shí)將新技術(shù)與更加成熟的應(yīng)用相結(jié)合、何時(shí)購(gòu)置現(xiàn)成設(shè)備以及何時(shí)自主開(kāi)發(fā)任務(wù)工具。
"我的出發(fā)點(diǎn)是盡個(gè)人所能將風(fēng)險(xiǎn)降到最低,因此只要沒(méi)有特殊的理由,我們肯定會(huì)優(yōu)先選擇成熟可靠的技術(shù)方案,"他表示。Pennell還補(bǔ)充道,他可不想在全世界的注視之下鬧出大規(guī)模故障。
然而Pennell也并非一味抗拒新技術(shù)。他的團(tuán)隊(duì)在移動(dòng)系統(tǒng)方面就吸納了大量新生方案,借以在倫敦的奧林匹克公園內(nèi)建立起全世界密度最高的Wi-Fi服務(wù)網(wǎng)絡(luò)。
Pennell還指出,鑒于臨時(shí)性IT基礎(chǔ)設(shè)施短暫的壽命周期,他們幾乎沒(méi)有考慮為其搭配安全系統(tǒng)。"如果一項(xiàng)技術(shù)能夠順利工作一天,也就證明它有能力繼續(xù)工作一年--反過(guò)來(lái)更是如此,"他解釋稱(chēng)。
然而壽命周期的縮短也影響到了項(xiàng)目的實(shí)施進(jìn)度。與Slaby與Robertory相同,他所能支配的時(shí)間也并不充裕。"大多數(shù)機(jī)構(gòu)都能按部就班進(jìn)行設(shè)施部署與調(diào)整,"他表示。"但奧運(yùn)會(huì)卻要求我們?cè)陂_(kāi)幕式當(dāng)天將所有系統(tǒng)都準(zhǔn)備萬(wàn)全,這樣的要求顯然更難實(shí)現(xiàn)。"
為此,他從終端開(kāi)始逆向?qū)嵤┎渴穑⑼ㄟ^(guò)實(shí)時(shí)測(cè)試確保一切組件都能在2011年夏季的初步執(zhí)行中順暢工作。這樣的時(shí)間壓力即使對(duì)于最有經(jīng)驗(yàn)的IT部門(mén)也堪稱(chēng)巨大,Pennell坦言緊張的時(shí)間安排是他所面臨的最大挑戰(zhàn)之一。
"大多數(shù)IT部門(mén)都擁有長(zhǎng)期配合經(jīng)驗(yàn),了解自己該如何完成任務(wù)并具備可資指導(dǎo)的書(shū)面方案。我們則是一窮二白,團(tuán)隊(duì)中的成員也擁有非常復(fù)雜的從業(yè)背景--包括零售、銀行以及公共事業(yè)部門(mén)--完全沒(méi)有真正分享過(guò)處理問(wèn)題的方法。另外,我們也沒(méi)時(shí)間在實(shí)施辦法上慢慢斟酌,由于周期緊迫、我們只能把時(shí)間用在管理與溝通等更重要的方面。"
Pennell告訴我們,在奧運(yùn)會(huì)項(xiàng)目的進(jìn)展過(guò)程中,管理工作涵蓋了階段性進(jìn)展控制、為相關(guān)工作制定嚴(yán)格時(shí)限并需要確保每位參與者都真正理解自己的任務(wù)目標(biāo)與角色定位。
在他看來(lái),為奧運(yùn)會(huì)服務(wù)是一段無(wú)比光榮的重要經(jīng)歷,因此他團(tuán)隊(duì)中的全職員工、臨時(shí)員工以及志愿者都充滿(mǎn)干勁。不過(guò)他仍然需要通過(guò)管理機(jī)制保證IT部門(mén)擁有明確的角色及職責(zé)劃分,并以崗位描述與年度審查作為輔助。他們忽略了遠(yuǎn)期目標(biāo)設(shè)定,這一點(diǎn)完全可以理解,但Pennell和他的團(tuán)隊(duì)的努力昭示了宏大項(xiàng)目如何在四年的執(zhí)行周期中由理論規(guī)劃逐步走向現(xiàn)實(shí),并最終為全世界觀眾呈現(xiàn)出異彩紛呈的夢(mèng)幻賽事。
即使是在團(tuán)隊(duì)解散之后,當(dāng)初的參與者們也得到了有力支持。租賃來(lái)的設(shè)備被送還給供應(yīng)商,采購(gòu)的物品也回到當(dāng)初的賣(mài)家手中,以備日后轉(zhuǎn)售或捐贈(zèng)之用。機(jī)構(gòu)還專(zhuān)門(mén)雇用了人力資源專(zhuān)家,幫助團(tuán)隊(duì)成員將奧運(yùn)會(huì)服務(wù)經(jīng)歷寫(xiě)入簡(jiǎn)歷以找到理想的工作。
對(duì)于習(xí)慣了緊張充實(shí)工作氛圍的團(tuán)隊(duì)成員來(lái)說(shuō),突然回歸平靜可能有點(diǎn)難以接受;但Pennell表示在奧運(yùn)會(huì)中的出色表現(xiàn)證明了他們的強(qiáng)大潛能。在經(jīng)歷了這樣高強(qiáng)度的工作之后,標(biāo)準(zhǔn)IT部門(mén)的日常運(yùn)維任務(wù)將變得不再艱巨。
領(lǐng)導(dǎo)者箴言
來(lái)自第一線(xiàn)的建議:
"奧運(yùn)會(huì)最偉大的力量之一在于幫助參與者建立起統(tǒng)一的目標(biāo),并共同追尋最終結(jié)果。這是一種精神層面的動(dòng)力,而不像其它項(xiàng)目那樣僅僅是份工作。另外:由于必須簡(jiǎn)明扼要處理問(wèn)題,我們順利避開(kāi)了很多糾纏IT部門(mén)多年的陷阱,不必再為花里胡哨的無(wú)用事物浪費(fèi)資金和精力。這是值得學(xué)習(xí)的重要方面。"
-- Gerry Pennell, 倫敦2012年奧運(yùn)會(huì)及殘奧會(huì)CIO
"我們必須為自己的機(jī)構(gòu)找到平衡點(diǎn),即在敏捷性與穩(wěn)定性之間折衷考量。我們傾向于在穩(wěn)定性方面多做努力,并不得不在創(chuàng)新領(lǐng)域做出妥協(xié)。如何找到平衡點(diǎn)?這可沒(méi)有什么神奇的指導(dǎo)公式,不同的機(jī)構(gòu)與不同的企業(yè)文化將引出完全不同的結(jié)論,因此大家需要在實(shí)踐中找到自己的理想方案。"
-- Michael Slaby, 奧巴馬2008年競(jìng)選團(tuán)隊(duì)CTO、奧巴馬2012年競(jìng)選團(tuán)隊(duì)CIO
"找到一種能幫助技術(shù)人員理解并切實(shí)完成任務(wù)的途徑。在災(zāi)難應(yīng)對(duì)工作中,我讓企業(yè)中的技術(shù)團(tuán)隊(duì)感受到了前所未有的使命感與工作熱情。日復(fù)一日,他們把精力傾注在計(jì)算機(jī)維修等平淡小事上;但一旦進(jìn)入災(zāi)難環(huán)境,他們將與自己的救助對(duì)象面對(duì)面、并直觀了解自己的工作為他人帶來(lái)何等重要的幫助。相信每個(gè)人都能從中找到自豪感,并迸發(fā)出對(duì)工作的強(qiáng)烈熱愛(ài)。"
-- Keith Robertory, 美國(guó)紅十字會(huì)災(zāi)害應(yīng)對(duì)緊急通信經(jīng)理
原文鏈接:點(diǎn)擊此處查看。