一些前沿技術(shù)為今天存在的幾乎每一家公司提供了便利，在大多數(shù)情況下，這種技術(shù)運(yùn)行得很好，但當(dāng)出現(xiàn)故障時(shí)，它可能比最奢侈的溢流馬桶更尷尬(也更昂貴)。

我們收集了2023年沖擊公司的八個(gè)重大技術(shù)失敗的例子。當(dāng)然，每個(gè)問(wèn)題都是一個(gè)可以從中吸取教訓(xùn)的時(shí)刻，我們希望這些災(zāi)難可以作為警示故事，讓你在2024年解決自己公司中潛在的IT問(wèn)題。

航空領(lǐng)域的科技事故

航空業(yè)擁有造成真正可怕的IT恐怖故事所需的所有要素：它由大公司和大型政府官僚機(jī)構(gòu)主導(dǎo)，它需要數(shù)千架飛機(jī)和數(shù)百萬(wàn)名乘客近乎完美的協(xié)調(diào)，任何延誤都可能導(dǎo)致連鎖故障，導(dǎo)致延誤甚至更糟。由于現(xiàn)有的公司已經(jīng)存在了很長(zhǎng)時(shí)間，許多公司運(yùn)行的IT系統(tǒng)包含一些幾年或幾十年的元素。老實(shí)說(shuō)，這是一個(gè)奇跡，這個(gè)系統(tǒng)居然還能工作。美國(guó)聯(lián)合航空公司和夏威夷航空公司在2023年都出現(xiàn)了由于軟件升級(jí)不可靠而導(dǎo)致的服務(wù)中斷，西南航空公司在前一年年末時(shí)將圣誕節(jié)旅行崩潰歸咎于過(guò)時(shí)的系統(tǒng)。

然而，2023年最嚴(yán)重的IT航空災(zāi)難可能發(fā)生在政府方面。美國(guó)聯(lián)邦航空局維護(hù)著一個(gè)名為通知空中任務(wù)(NOTAM)的數(shù)據(jù)庫(kù)，該數(shù)據(jù)庫(kù)提供了一個(gè)自動(dòng)化的集中信息源，提供有關(guān)關(guān)閉的跑道或不同機(jī)場(chǎng)的設(shè)備故障，或不同航線上的危險(xiǎn)等信息。1月11日，NOTAM墜毀，導(dǎo)致全國(guó)范圍內(nèi)的“地面停靠”，停止了所有起飛，但空中的飛機(jī)被允許繼續(xù)飛往目的地。

停機(jī)被追蹤到一個(gè)損壞的數(shù)據(jù)庫(kù)文件，一個(gè)承包商正在努力糾正實(shí)時(shí)數(shù)據(jù)庫(kù)和備份數(shù)據(jù)庫(kù)之間的同步問(wèn)題，但最終兩者都被破壞了。這位工程師在“一個(gè)讓國(guó)家損失數(shù)百萬(wàn)美元的錯(cuò)誤”中“用一個(gè)文件替換了另一個(gè)文件”，這一事件為確保關(guān)鍵數(shù)據(jù)得到冗余備份提供了一些明顯的教訓(xùn)，特別是在你要擺弄備份系統(tǒng)的情況下。

紐約證券交易所脆弱的備份過(guò)程

美國(guó)聯(lián)邦航空局并不是唯一一個(gè)發(fā)現(xiàn)其備份過(guò)程本身就是一場(chǎng)災(zāi)難的組織，該過(guò)程本應(yīng)有助于避免災(zāi)難。紐約證券交易所在1月份也面臨著類似的危機(jī)，紐約證交所明智地將其備份服務(wù)器設(shè)在距離華爾街?jǐn)?shù)百英里的芝加哥，作為一個(gè)數(shù)據(jù)堡壘，以防危機(jī)襲擊曼哈頓下城。在某種程度上不那么明智的是，它的日常備份依賴于一個(gè)流程，員工必須在適當(dāng)?shù)臅r(shí)間物理地打開(kāi)和關(guān)閉備份系統(tǒng)。

事實(shí)上，每天在完全相同的時(shí)間啟動(dòng)和停止數(shù)字進(jìn)程是計(jì)算機(jī)相當(dāng)擅長(zhǎng)的事情，人們往往會(huì)時(shí)不時(shí)地搞砸，所以總有一天會(huì)出現(xiàn)危機(jī)，這可能是不可避免的。1月24日，當(dāng)芝加哥的一名員工未能在適當(dāng)?shù)臅r(shí)間關(guān)閉備份服務(wù)器時(shí)，它就出現(xiàn)了。結(jié)果，當(dāng)紐約證券交易所上午9:30開(kāi)始交易時(shí)，紐約證交所的電腦們以為他們是在延續(xù)前一天的交易時(shí)段，而忽略了當(dāng)天的公開(kāi)拍賣，因?yàn)楣_(kāi)拍賣本應(yīng)設(shè)定許多股票的初始價(jià)格。其結(jié)果是一系列劇烈的市場(chǎng)波動(dòng)和大量錯(cuò)誤價(jià)格的交易，這些交易不得不以高昂的代價(jià)被取消。教訓(xùn)是：永遠(yuǎn)不要派人去做計(jì)算機(jī)的工作，特別是如果計(jì)算機(jī)的工作很簡(jiǎn)單的話。

在太空中，沒(méi)有人可以取消你的軟件許可證

NASA是一個(gè)科學(xué)奇跡，它從事各種酷而鼓舞人心的太空活動(dòng)，它也是一個(gè)龐大的政府官僚機(jī)構(gòu)，有數(shù)千名員工和計(jì)算機(jī)系統(tǒng)在其保護(hù)傘下。不幸的是，與空間碎片相比，該機(jī)構(gòu)更難跟蹤所有這些計(jì)算機(jī)。OIG今年的一份報(bào)告關(guān)注的是NASA為甲骨文產(chǎn)品購(gòu)買的大量許可證，以支持十多年前結(jié)束的航天飛機(jī)計(jì)劃，結(jié)果不僅是該機(jī)構(gòu)被甲骨文技術(shù)所束縛，而且糟糕的文檔處理意味著NASA不確定他們實(shí)際使用了多少甲骨文系統(tǒng)。因此，該機(jī)構(gòu)在過(guò)去三年里在其可能不使用的軟件上花費(fèi)了1500萬(wàn)美元，但不想冒著甲骨文軟件審計(jì)的風(fēng)險(xiǎn)，因?yàn)榧坠俏目赡軙?huì)處以更高成本的罰款。

此類問(wèn)題的解決方案是實(shí)現(xiàn)一個(gè)軟件資產(chǎn)管理程序，該程序可以幫助你準(zhǔn)確地了解你正在使用什么軟件，以及你需要什么許可證和不需要什么許可證。好消息是，美國(guó)聯(lián)邦政府已經(jīng)要求像NASA這樣的機(jī)構(gòu)實(shí)施這樣的計(jì)劃，壞消息是，根據(jù)OIG的報(bào)告，“實(shí)施企業(yè)范圍的軟件資產(chǎn)管理計(jì)劃的努力受到了預(yù)算和人員問(wèn)題以及該機(jī)構(gòu)軟件許可協(xié)議的復(fù)雜性和數(shù)量的阻礙?！?/p>

軟件許可形勢(shì)陰云密布

如果說(shuō)NASA是一個(gè)過(guò)度謹(jǐn)慎的政府機(jī)構(gòu)為軟件付費(fèi)的例子，那么它可能并不是為了以防萬(wàn)一，云服務(wù)提供商N(yùn)utanix在今年5月發(fā)生了一起丑聞，當(dāng)時(shí)有消息稱，該公司在軟件許可方面采取了相反的方式。具體地說(shuō)，Nutanix以“不合規(guī)的方式”使用第三方軟件，這是一種委婉的說(shuō)法，意思是“不付錢，即使他們應(yīng)該付錢?！?/p>

該公司使用來(lái)自兩家不同供應(yīng)商的軟件進(jìn)行“互操作性測(cè)試、驗(yàn)證和客戶概念驗(yàn)證、培訓(xùn)和客戶支持”。不幸的是，他們使用的軟件版本被標(biāo)記為僅用于評(píng)估目的，這是一個(gè)持續(xù)多年的“評(píng)估”過(guò)程。這個(gè)問(wèn)題是在一次內(nèi)部審查中發(fā)現(xiàn)的，由于供應(yīng)商需要為不符合規(guī)定的使用支付費(fèi)用，Nutanix無(wú)法按時(shí)向SEC提交季度收益報(bào)告，因?yàn)樗谠噲D處理自己的欠款。這一失誤導(dǎo)致這位CIO離開(kāi)了公司，教訓(xùn)可能是，唯一比為你不使用的軟件付費(fèi)更糟糕的事情是，不為你使用的軟件付費(fèi)。

把燈關(guān)掉，派對(duì)結(jié)束了

從技術(shù)上講，下一個(gè)故事是一個(gè)可以追溯到2021年的IT故障，但我們將在今年的綜述中包括它，因?yàn)樗窃?023年最終得到解決的。近10年來(lái)，馬薩諸塞州米納喬格地區(qū)高中一直快樂(lè)地運(yùn)行著由第五光安裝的“綠色照明”系統(tǒng)，該系統(tǒng)可以根據(jù)需要自動(dòng)調(diào)節(jié)校內(nèi)外的燈光。但在2021年8月，老師和學(xué)生注意到燈一直開(kāi)到最大亮度。事實(shí)證明，該系統(tǒng)受到了惡意軟件的攻擊，并進(jìn)入了后備模式，燈從未熄滅。

隨之而來(lái)的是一系列發(fā)人深省的發(fā)現(xiàn)，為任何想要完全依靠軟件來(lái)控制真實(shí)物理世界中的東西的人提供了教訓(xùn)。高科技的照明系統(tǒng)沒(méi)有可以簡(jiǎn)單打開(kāi)和關(guān)閉的手動(dòng)開(kāi)關(guān)，軟件集成到其他學(xué)校系統(tǒng)中，不能輕易更換。最初的供應(yīng)商已經(jīng)不復(fù)存在，知識(shí)產(chǎn)權(quán)被買賣了好幾次。新的所有者，一家名為Reflex Lighting的公司，花了幾周時(shí)間才找到了解學(xué)校系統(tǒng)工作原理的人。最終制定了維修計(jì)劃，但到那時(shí)，新冠疫情后封鎖的供應(yīng)鏈中斷意味著新設(shè)備要幾個(gè)月才能從中國(guó)運(yùn)往馬薩諸塞州。

最后，經(jīng)過(guò)近18個(gè)月的持續(xù)亮燈(偶爾根據(jù)需要手動(dòng)擰進(jìn)燈泡)，該系統(tǒng)今年進(jìn)行了更新-是的，它配備了物理開(kāi)關(guān)，可能一開(kāi)始就應(yīng)該有。

當(dāng)崩盤(pán)意味著真正的崩盤(pán)

Minechaug地區(qū)高中的故事就是一個(gè)很好的例子，說(shuō)明了為什么機(jī)械的現(xiàn)實(shí)世界的設(shè)備并不總是與軟件很好地融合在一起，但機(jī)械和電氣工程也不是沒(méi)有問(wèn)題——有時(shí)軟件可以提供幫助。以澳大利亞使用的軍用直升機(jī)MRH-90大班為例，2010年，一名飛行員在飛行中途嘗試了所謂的“熱啟動(dòng)”——關(guān)閉電源，然后重新啟動(dòng)引擎，導(dǎo)致發(fā)動(dòng)機(jī)發(fā)生“災(zāi)難性”故障，這個(gè)機(jī)械問(wèn)題在軟件上得到了解決，澳大利亞國(guó)防部推出了一個(gè)軟件補(bǔ)丁，旨在防止直升機(jī)熱啟動(dòng)。

不幸的是，軟件補(bǔ)丁的第一條規(guī)則是，只有當(dāng)你真正推出補(bǔ)丁時(shí)，它們才能起作用。盡管這個(gè)補(bǔ)丁已經(jīng)推出了十年的大部分時(shí)間，但并不是所有澳大利亞的大班都安裝了這個(gè)補(bǔ)丁，導(dǎo)致今年4月在一次訓(xùn)練任務(wù)中，直升機(jī)因啟動(dòng)過(guò)熱而墜毀。

下一步發(fā)生的級(jí)聯(lián)電話故障

去年11月，澳大利亞發(fā)生了另一起備受矚目的IT故障，該國(guó)第二大電信運(yùn)營(yíng)商O(píng)ptus停機(jī)12小時(shí)，導(dǎo)致一半的澳大利亞人無(wú)法連接電話或互聯(lián)網(wǎng)。故障最終可能歸因于擁有Optus的新加坡公司Singtel發(fā)送的路由更改。這些信息顯然是如此龐大的數(shù)據(jù)浪潮，以至于它淹沒(méi)了Optus的路由器，然后不得不物理重啟——考慮到澳大利亞的規(guī)模，這花了相當(dāng)長(zhǎng)的時(shí)間。

作為一家具有全國(guó)意義的服務(wù)提供商的問(wèn)題是，當(dāng)你遇到引人注目的IT故障時(shí)，你的高管會(huì)被拖到國(guó)家議會(huì)面前解釋哪里出了問(wèn)題，如果你告訴立法者這個(gè)問(wèn)題是如此普遍和意外，以至于你沒(méi)有處理它的計(jì)劃，而且你的首席執(zhí)行官攜帶著競(jìng)爭(zhēng)對(duì)手運(yùn)營(yíng)商的SIM卡，以確保她在她負(fù)責(zé)的運(yùn)營(yíng)商倒閉的情況下仍能打電話，這肯定無(wú)濟(jì)于事。或許并不令人意外的是，Optus首席執(zhí)行官凱利·拜爾·羅斯馬林很快就離開(kāi)了公司。(我們認(rèn)為，Optus大規(guī)模停電的教訓(xùn)是，為所有不同類型的災(zāi)難制定災(zāi)難計(jì)劃，并正確配置路由器。)

AI，真正的失敗

由于2023年是GenAI成為主流的一年，我們將用幾個(gè)備受矚目的AI災(zāi)難來(lái)結(jié)束這份清單。在其中一個(gè)比較引人注目的案件中，Levidow，Levidow&Oberman律師事務(wù)所的律師求助于ChatGPT，幫助他們起草與他們的一名客戶就人身傷害起訴航空公司有關(guān)的法律摘要。對(duì)他們和他們的客戶來(lái)說(shuō)，不幸的是，ChatGPT做了一件越來(lái)越廣為人知的事情：制作了一份極其可信的文件，其中包括一些事實(shí)錯(cuò)誤，包括引用了多個(gè)不存在的法庭案件(AI術(shù)語(yǔ)中的“幻覺(jué)”)。律師史蒂文·A·施瓦茨向法官承認(rèn)，這是他第一次將ChatGPT用于專業(yè)目的，他“沒(méi)有意識(shí)到它的內(nèi)容可能是虛假的?！痹谒霓q護(hù)中，他曾問(wèn)ChatGPT它的引文是否是假的，這個(gè)聊天機(jī)器人堅(jiān)持說(shuō)，可以在LexisNexis和Westlaw等聲譽(yù)良好的法律數(shù)據(jù)庫(kù)中找到這些引文。(事實(shí)證明，這不是真的。)

AI的失敗也打擊了科技新聞界，CNET被迫撤回了35篇以上的報(bào)道，這些報(bào)道是在一種名為負(fù)責(zé)任的AI機(jī)器合作伙伴(RAMP)的工具的幫助下撰寫(xiě)的。不太負(fù)責(zé)的結(jié)果不僅讓公司顏面掃地，還引發(fā)了員工的強(qiáng)烈反對(duì)。教訓(xùn)是，AI就像任何IT工具一樣，如果你不了解它的工作原理，或者在你的特定用例中它仍然是半生不熟的，就不應(yīng)該使用它。