我們收集了2023年沖擊公司的八個重大技術失敗的例子。當然，每個問題都是一個可以從中吸取教訓的時刻，我們希望這些災難可以作為警示故事，讓你在2024年解決自己公司中潛在的IT問題。

 

 

航空業擁有造成真正可怕的IT恐怖故事所需的所有要素：它由大公司和大型政府官僚機構主導，它需要數千架飛機和數百萬名乘客近乎完美的協調，任何延誤都可能導致連鎖故障，導致延誤甚至更糟。由于現有的公司已經存在了很長時間，許多公司運行的IT系統包含一些幾年或幾十年的元素。老實說，這是一個奇跡，這個系統居然還能工作。美國聯合航空公司和夏威夷航空公司在2023年都出現了由于軟件升級不可靠而導致的服務中斷，西南航空公司在前一年年末時將圣誕節旅行崩潰歸咎于過時的系統。

 

然而，2023年最嚴重的IT航空災難可能發生在政府方面。美國聯邦航空局維護著一個名為通知空中任務(NOTAM)的數據庫，該數據庫提供了一個自動化的集中信息源，提供有關關閉的跑道或不同機場的設備故障，或不同航線上的危險等信息。1月11日，NOTAM墜毀，導致全國范圍內的“地面停靠”，停止了所有起飛，但空中的飛機被允許繼續飛往目的地。

 

停機被追蹤到一個損壞的數據庫文件，一個承包商正在努力糾正實時數據庫和備份數據庫之間的同步問題，但最終兩者都被破壞了。這位工程師在“一個讓國家損失數百萬美元的錯誤”中“用一個文件替換了另一個文件”，這一事件為確保關鍵數據得到冗余備份提供了一些明顯的教訓，特別是在你要擺弄備份系統的情況下。

 

 

美國聯邦航空局并不是唯一一個發現其備份過程本身就是一場災難的組織，該過程本應有助于避免災難。紐約證券交易所在1月份也面臨著類似的危機，紐約證交所明智地將其備份服務器設在距離華爾街數百英里的芝加哥，作為一個數據堡壘，以防危機襲擊曼哈頓下城。在某種程度上不那么明智的是，它的日常備份依賴于一個流程，員工必須在適當的時間物理地打開和關閉備份系統。

 

事實上，每天在完全相同的時間啟動和停止數字進程是計算機相當擅長的事情，人們往往會時不時地搞砸，所以總有一天會出現危機，這可能是不可避免的。1月24日，當芝加哥的一名員工未能在適當的時間關閉備份服務器時，它就出現了。結果，當紐約證券交易所上午9:30開始交易時，紐約證交所的電腦們以為他們是在延續前一天的交易時段，而忽略了當天的公開拍賣，因為公開拍賣本應設定許多股票的初始價格。其結果是一系列劇烈的市場波動和大量錯誤價格的交易，這些交易不得不以高昂的代價被取消。教訓是：永遠不要派人去做計算機的工作，特別是如果計算機的工作很簡單的話。

 

 

NASA是一個科學奇跡，它從事各種酷而鼓舞人心的太空活動，它也是一個龐大的政府官僚機構，有數千名員工和計算機系統在其保護傘下。不幸的是，與空間碎片相比，該機構更難跟蹤所有這些計算機。OIG今年的一份報告關注的是NASA為甲骨文產品購買的大量許可證，以支持十多年前結束的航天飛機計劃，結果不僅是該機構被甲骨文技術所束縛，而且糟糕的文檔處理意味著NASA不確定他們實際使用了多少甲骨文系統。因此，該機構在過去三年里在其可能不使用的軟件上花費了1500萬美元，但不想冒著甲骨文軟件審計的風險，因為甲骨文可能會處以更高成本的罰款。

 

此類問題的解決方案是實現一個軟件資產管理程序，該程序可以幫助你準確地了解你正在使用什么軟件，以及你需要什么許可證和不需要什么許可證。好消息是，美國聯邦政府已經要求像NASA這樣的機構實施這樣的計劃，壞消息是，根據OIG的報告，“實施企業范圍的軟件資產管理計劃的努力受到了預算和人員問題以及該機構軟件許可協議的復雜性和數量的阻礙。”

 

 

如果說NASA是一個過度謹慎的政府機構為軟件付費的例子，那么它可能并不是為了以防萬一，云服務提供商Nutanix在今年5月發生了一起丑聞，當時有消息稱，該公司在軟件許可方面采取了相反的方式。具體地說，Nutanix以“不合規的方式”使用第三方軟件，這是一種委婉的說法，意思是“不付錢，即使他們應該付錢。”

 

該公司使用來自兩家不同供應商的軟件進行“互操作性測試、驗證和客戶概念驗證、培訓和客戶支持”。不幸的是，他們使用的軟件版本被標記為僅用于評估目的，這是一個持續多年的“評估”過程。這個問題是在一次內部審查中發現的，由于供應商需要為不符合規定的使用支付費用，Nutanix無法按時向SEC提交季度收益報告，因為它正在試圖處理自己的欠款。這一失誤導致這位CIO離開了公司，教訓可能是，唯一比為你不使用的軟件付費更糟糕的事情是，不為你使用的軟件付費。

 

 

從技術上講，下一個故事是一個可以追溯到2021年的IT故障，但我們將在今年的綜述中包括它，因為它是在2023年最終得到解決的。近10年來，馬薩諸塞州米納喬格地區高中一直快樂地運行著由第五光安裝的“綠色照明”系統，該系統可以根據需要自動調節校內外的燈光。但在2021年8月，老師和學生注意到燈一直開到最大亮度。事實證明，該系統受到了惡意軟件的攻擊，并進入了后備模式，燈從未熄滅。

 

隨之而來的是一系列發人深省的發現，為任何想要完全依靠軟件來控制真實物理世界中的東西的人提供了教訓。高科技的照明系統沒有可以簡單打開和關閉的手動開關，軟件集成到其他學校系統中，不能輕易更換。最初的供應商已經不復存在，知識產權被買賣了好幾次。新的所有者，一家名為Reflex Lighting的公司，花了幾周時間才找到了解學校系統工作原理的人。最終制定了維修計劃，但到那時，新冠疫情后封鎖的供應鏈中斷意味著新設備要幾個月才能從中國運往馬薩諸塞州。

 

最后，經過近18個月的持續亮燈(偶爾根據需要手動擰進燈泡)，該系統今年進行了更新-是的，它配備了物理開關，可能一開始就應該有。

 

 

Minechaug地區高中的故事就是一個很好的例子，說明了為什么機械的現實世界的設備并不總是與軟件很好地融合在一起，但機械和電氣工程也不是沒有問題——有時軟件可以提供幫助。以澳大利亞使用的軍用直升機MRH-90大班為例，2010年，一名飛行員在飛行中途嘗試了所謂的“熱啟動”——關閉電源，然后重新啟動引擎，導致發動機發生“災難性”故障，這個機械問題在軟件上得到了解決，澳大利亞國防部推出了一個軟件補丁，旨在防止直升機熱啟動。

 

不幸的是，軟件補丁的第一條規則是，只有當你真正推出補丁時，它們才能起作用。盡管這個補丁已經推出了十年的大部分時間，但并不是所有澳大利亞的大班都安裝了這個補丁，導致今年4月在一次訓練任務中，直升機因啟動過熱而墜毀。

 

 

去年11月，澳大利亞發生了另一起備受矚目的IT故障，該國第二大電信運營商Optus停機12小時，導致一半的澳大利亞人無法連接電話或互聯網。故障最終可能歸因于擁有Optus的新加坡公司Singtel發送的路由更改。這些信息顯然是如此龐大的數據浪潮，以至于它淹沒了Optus的路由器，然后不得不物理重啟——考慮到澳大利亞的規模，這花了相當長的時間。

 

作為一家具有全國意義的服務提供商的問題是，當你遇到引人注目的IT故障時，你的高管會被拖到國家議會面前解釋哪里出了問題，如果你告訴立法者這個問題是如此普遍和意外，以至于你沒有處理它的計劃，而且你的首席執行官攜帶著競爭對手運營商的SIM卡，以確保她在她負責的運營商倒閉的情況下仍能打電話，這肯定無濟于事。或許并不令人意外的是，Optus首席執行官凱利·拜爾·羅斯馬林很快就離開了公司。(我們認為，Optus大規模停電的教訓是，為所有不同類型的災難制定災難計劃，并正確配置路由器。)

 

 

由于2023年是GenAI成為主流的一年，我們將用幾個備受矚目的AI災難來結束這份清單。在其中一個比較引人注目的案件中，Levidow，Levidow&Oberman律師事務所的律師求助于ChatGPT，幫助他們起草與他們的一名客戶就人身傷害起訴航空公司有關的法律摘要。對他們和他們的客戶來說，不幸的是，ChatGPT做了一件越來越廣為人知的事情：制作了一份極其可信的文件，其中包括一些事實錯誤，包括引用了多個不存在的法庭案件(AI術語中的“幻覺”)。律師史蒂文·A·施瓦茨向法官承認，這是他第一次將ChatGPT用于專業目的，他“沒有意識到它的內容可能是虛假的。”在他的辯護中，他曾問ChatGPT它的引文是否是假的，這個聊天機器人堅持說，可以在LexisNexis和Westlaw等聲譽良好的法律數據庫中找到這些引文。(事實證明，這不是真的。)

 

AI的失敗也打擊了科技新聞界，CNET被迫撤回了35篇以上的報道，這些報道是在一種名為負責任的AI機器合作伙伴(RAMP)的工具的幫助下撰寫的。不太負責的結果不僅讓公司顏面掃地，還引發了員工的強烈反對。教訓是，AI就像任何IT工具一樣，如果你不了解它的工作原理，或者在你的特定用例中它仍然是半生不熟的，就不應該使用它。

 

 

國內主流的to B IT門戶，同時在運營國內最大的甲方CIO專家庫和智力輸出及社交平臺-信眾智(www.cioall.com)。同時運營19個IT行業公眾號(微信搜索D1net即可關注)。

 

版權聲明：本文為企業網D1Net編譯，轉載需在文章開頭注明出處為：企業網D1Net，如果不注明出處，企業網D1Net將保留追究其法律責任的權利。