兩次全球藍(lán)屏,禍?zhǔn)拙故峭蝗耍?4年后,滅霸CEO再釀IT災(zāi)難

0 評論 1723 瀏覽 1 收藏 19 分鐘

絕了,外媒剛剛發(fā)現(xiàn):這次造成微軟藍(lán)屏災(zāi)難的CrowdStrike CEO,在Windows XP時代就曾搞崩過全球的設(shè)備。同樣是一次更新,同樣讓設(shè)備斷網(wǎng),同樣要人工修復(fù)。兩次導(dǎo)致全球IT災(zāi)難,此君可以「名垂青史」了。

微軟全球藍(lán)屏事件,破案了!

一個由「C-00000291*.sys」配置文件觸發(fā)的系統(tǒng)邏輯錯誤,瞬間就破壞掉全世界約10億臺計算機,并在隨后引發(fā)所有的二階、三階效應(yīng)。

就如AI大神Karpathy所言,技術(shù)領(lǐng)域還存在著的單點瞬時故障,都將對人類社會造成巨大隱患。

而這次造成全球TI災(zāi)難的始作俑者、CrowdStrike CEO,竟被外媒扒出已有前科——

2010年在McAfee用一個更新搞崩全球設(shè)備的,竟然也是他!

一、邏輯錯誤,觸發(fā)全球大崩潰

故障發(fā)生的第一時間,就有網(wǎng)友向大家發(fā)出警告——

停止所有CrowdStrike更新!停止所有CrowdStrike更新!

對于事件起因,Objective-See基金會創(chuàng)始人Patrick Wardle也在第一時間就做了一番詳細(xì)調(diào)查。

首先,他查看了故障位置——mov r9d,[r8]。其中R8屬于未映射的地址。

這個位置取自指針數(shù)組(保存在RAX中),索引RDX(0x14 * 0x8)保存了一個無效的內(nèi)存地址。

其他的「驅(qū)動程序」(例如「C-00000291-…32.sys」)似乎是混淆的數(shù)據(jù),并且被「CSAgent.sys」進(jìn)行了x-ref’d操作。

因此,或許是這種無效(配置/簽名)的數(shù)據(jù),觸發(fā)了CSAgent.sys中的故障。

通過調(diào)試,可以更容易地判斷這一點。

顯然,事故中最重要的懸而未決的問題就是,這個「C-00000291-…xxx.sys」文件究竟是什么?

CSAgent.sys一旦引用它們,就立馬崩潰了;而只要刪除它們,就可以修復(fù)崩潰。

在VT上,他還對CSAgent.sys以及來自單個故障轉(zhuǎn)儲的數(shù)據(jù)進(jìn)行了逆向分析。

最后,Wardle分享出了CSAgent.sys的幾個版本(+idb),以及各種「C-….sys」文件(包括他認(rèn)為已經(jīng)包含了「修復(fù)」的最新文件)。

他表示,由于自己沒有任何Windows系統(tǒng)或虛擬機,所以希望網(wǎng)友們能繼續(xù)挖掘。

就在昨天,惡意軟件專家Malware Utkonos有了更多細(xì)節(jié)的發(fā)現(xiàn)——

37c78ba2eac468941a80f4e12aa390a00cb22337fbf87a94c59cee05473d1c66這個地址處,似乎有一個針對0xaaaaaaaa的文件魔法檢查。

這個模式,也是「通道文件」(Channel Files)的前四個字節(jié)。全部為NULL的文件,就可能會導(dǎo)致該cmp失敗。

可以看到,rcx中與0xaaaaaaaa進(jìn)行比較的值,由ExAllocatePoolWithTagPriority分配在頂部;那里正是接收ZwReadFile讀取的數(shù)據(jù)的緩沖區(qū)。

這個值會在之后用cmp傳遞給函數(shù)(Utkonos在圖中將這些函數(shù)命名為內(nèi)部的wdm.h函數(shù)調(diào)用)。

通過合理性檢查可發(fā)現(xiàn):0xaaaaaaaa字節(jié)模式僅在此處檢查的「通道文件」偏移0處出現(xiàn)過一次。

以下就是執(zhí)行類似cmp的地址。

可以看到,只有0xaaaaaaaa看起來不同。

二、CrowdStrike官方解釋

很快,CrowdStrike在官博放出的解釋,對于網(wǎng)友們疑惑的問題進(jìn)行了澄清——

2024年7月19日04:09 UTC,CrowdStrike在持續(xù)運營中向Windows系統(tǒng)發(fā)布了一次傳感器配置更新,這也是Falcon平臺保護(hù)機制的一部分。
這次配置更新觸發(fā)了一個邏輯錯誤,導(dǎo)致受影響的系統(tǒng)出現(xiàn)崩潰和藍(lán)屏(BSOD)。
導(dǎo)致系統(tǒng)崩潰的更新已于2024年7月19日05:27 UTC得到修復(fù)。

報告地址:

We will https://www.crowdstrike.com/blog/falcon-update-for-windows-hosts-technical-details/

其中技術(shù)細(xì)節(jié)如下——

在Windows系統(tǒng)中,通道文件位于以下目錄:C:WindowsSystem32driversCrowdStrike,并且文件名以「C-」開頭。每個通道文件都有一個唯一編號作為標(biāo)識。

此次事件中受影響的通道文件為291,文件名以「C-00000291-」開頭,以.sys擴展名結(jié)尾。雖然通道文件以SYS擴展名結(jié)尾,但它們不是內(nèi)核驅(qū)動程序。

通道文件291會影響Falcon如何評估Windows系統(tǒng)上的命名管道執(zhí)行。這些命名管道用于Windows中正常進(jìn)程間或系統(tǒng)間通信的機制。

周五的更新,本意是針對網(wǎng)絡(luò)攻擊中常見的C2框架中所使用的新發(fā)現(xiàn)的惡意命名管道,但實際上卻觸發(fā)了系統(tǒng)的邏輯錯誤,導(dǎo)致崩潰。

不過,這與通道文件291或任何其他通道文件中的空字節(jié)問題無關(guān)。

此事已被網(wǎng)友用Suno做成歌曲要想恢復(fù),就必須在安全模式下啟動機器,并且以本地管理員身份登錄并刪除內(nèi)容——這是不可能自動化的。

因此,這次癱瘓的打擊面才會這么大,并且難以恢復(fù)。

三、上次也是他

雖然CrowdStrike承認(rèn)了自己的錯誤,并在周五發(fā)布了道歉聲明和解決方案。

但他們尚未解釋清楚,這個破壞性的更新是如何在未經(jīng)過測試和其他安全措施的情況下發(fā)布的。

自然,眾多批評的聲音開始集中到事件的核心人物:CrowdStrike的首席執(zhí)行官George Kurtz。

科技行業(yè)分析師Anshel Sag指出,這已經(jīng)不是庫爾茨第一次在重大IT事件中扮演重要角色了。

熟悉的配方,熟悉的味道

2010年4月21日,殺毒軟件McAfee發(fā)布了一次面向企業(yè)客戶的軟件更新。

獲得更新后的軟件會刪除一個Windows系統(tǒng)的關(guān)鍵文件,導(dǎo)致全球數(shù)百萬臺電腦崩潰并反復(fù)重啟。

和CrowdStrike的錯誤類似,McAfee的問題也需要手動修復(fù)(設(shè)備斷網(wǎng)離線)。

而Kurtz,正是當(dāng)時McAfee的首席技術(shù)官。

2012年,Kurtz創(chuàng)立了CrowdStrike,并一直擔(dān)任首席執(zhí)行官至今。

2010年,發(fā)生了什么?

2010年4月21日早上6點,McAfee向企業(yè)客戶發(fā)布了一個「有問題」的病毒定義更新。

然后,這些自動更新的Windows XP電腦,會直接陷入「無限重啟」的循環(huán)中,直到技術(shù)支持人員到場手動修復(fù)。

背后的原因其實很簡單——殺毒軟件在收到新的定義之后,會將一個常規(guī)的Windows二進(jìn)制文件

「svchost.exe」識別為病毒「W32/Wecorl.a」,并予以銷毀。

一位大學(xué)IT人員報告稱,他的網(wǎng)絡(luò)上有1200臺電腦因此癱瘓。

另一封來自美國企業(yè)的電子郵件稱,他們有「數(shù)百名用戶」受到了影響:

這個問題影響了大量用戶,而簡單地替換svchost.exe并不能解決問題。你必須啟動到安全模式,然后安裝extra.dat文件,再手動運行vsca 控制臺。之后,你還需要刪除隔離的文件。每個用戶至少有兩個文件被隔離,有些用戶多達(dá)15個。不幸的是,使用這種方法,你無法確定你恢復(fù)的文件中哪些是重要的系統(tǒng)文件,哪些是病毒文件。

此外,還有一份來自澳大利亞的報告稱,該國最大的超市連鎖店有10%的收銀機癱瘓,導(dǎo)致14到18家商店被迫關(guān)閉。

這件事在當(dāng)時的影響之大,讓眾人紛紛驚嘆:「即便是專注于開發(fā)病毒的黑客,估計都做不出能像McAfee今天這樣能迅速『端掉』這么多機器的惡意軟件?!?/p>

以下是SANS Internet Storm Center對這次事件的描述:

McAfee版本為5958的「DAT」文件,正在導(dǎo)致大量Windows XP SP3出現(xiàn)問題。受影響的系統(tǒng)將進(jìn)入重啟循環(huán)并失去所有網(wǎng)絡(luò)連接。這個有問題的DAT文件可能會感染單個工作站以及連接到域的工作站。
使用「ePolicyOrchestrator」來更新病毒定義文件,似乎加速了這個有問題的DAT文件的傳播。ePolicyOrchestrator通常用于在企業(yè)中更新「DAT」文件,但由于受影響的系統(tǒng)會失去網(wǎng)絡(luò)連接,它無法撤銷這個有問題的簽名。

Svchost.exe是Windows系統(tǒng)中最重要的文件之一,它承載了幾乎所有系統(tǒng)功能的服務(wù)。如果沒有Svchost.exe,Windows根本無法啟動。

兩起事件雖然相隔14年,但卻有著同樣的疑惑——這樣的更新是如何從測試實驗室流出并進(jìn)入生產(chǎn)服務(wù)器的。理論上,這類問題應(yīng)該在測試初期就被發(fā)現(xiàn)并解決了才對。

何許人也?

George Kurtz在新澤西州的Parsippany-Troy Hills長大,就讀于Parsippany高中。Kurtz表示,自己在四年級時就開始在Commodore電腦上編寫電子游戲程序。

高中時,建立了早期的網(wǎng)絡(luò)交流平臺——公告板系統(tǒng)。

他畢業(yè)于西東大學(xué),獲得會計學(xué)學(xué)位。

隨后他創(chuàng)辦了Foundstone,并曾擔(dān)任McAfee的首席技術(shù)官。

目前,George Kurtz在與Dmitri Alperovitch共同創(chuàng)立的網(wǎng)絡(luò)安全公司CrowdStrike,擔(dān)任首席執(zhí)行官。

除了商業(yè)成就外,他還是一名賽車手。

Price Waterhouse(普華永道)和 Foundstone

大學(xué)畢業(yè)后,Kurtz在Price Waterhouse開始了他的職業(yè)生涯,擔(dān)任注冊會計師(CPA)。

1993年,Price Waterhouse讓Kurtz成為其新成立的安全組的首批員工之一。

1999年,他與Stuart McClure和Joel Scambray共同撰寫了《Hacking Exposed》,這是一本針對網(wǎng)絡(luò)管理員的網(wǎng)絡(luò)安全書籍。該書銷量超過60萬冊,并被翻譯成30多種語言。

同年晚些時候,他創(chuàng)辦了一家網(wǎng)絡(luò)安全公司Foundstone,這是最早專門從事安全咨詢的公司之一。Foundstone專注于漏洞管理軟件和服務(wù),并發(fā)展出了一個廣受認(rèn)可的事件響應(yīng)業(yè)務(wù),許多財富100強公司都是其客戶。

McAfee

McAfee在2004年8月以8600萬美元收購了Foundstone,Kurtz因此成為McAfee的高級副總裁兼風(fēng)險管理總經(jīng)理。在任期內(nèi),他幫助制定了公司的安全風(fēng)險管理策略。

2009年10月,McAfee任命他為全球首席技術(shù)官和執(zhí)行副總裁。

隨著時間的推移,Kurtz對現(xiàn)有的安全技術(shù)運行緩慢感到沮喪,因為他認(rèn)為這些技術(shù)沒有跟上新威脅的發(fā)展速度。

有一次,他在飛機上看到鄰座乘客等待15分鐘才讓McAfee軟件在筆記本電腦上加載完畢,這一事件成為他創(chuàng)立CrowdStrike的靈感之一。

CrowdStrike

2011年11月,Kurtz加入私募股權(quán)公司W(wǎng)arburg Pincus,擔(dān)任「駐企企業(yè)家」(entrepreneur-in-residence),并開始著手他的下一個項目CrowdStrike。

2012年2月,他與前Foundstone的首席財務(wù)官Gregg Marston和Dmitri Alperovitch聯(lián)手,正式成立了CrowdStrike。

CrowdStrike將重點從反惡意軟件和防病毒產(chǎn)品(McAfee的網(wǎng)絡(luò)安全方法)轉(zhuǎn)移到識別黑客使用的技術(shù),以便發(fā)現(xiàn)即將到來的威脅。并開發(fā)了一種「云優(yōu)先」(cloud-first)模式,以減少客戶計算機上的軟件負(fù)擔(dān)。

2017年5月,CrowdStrike估值超過10億美元。2019年,公司在納斯達(dá)克首次公開募股6.12億美元,估值達(dá)到66億美元。

2020年7月,IDC報告將CrowdStrike評為增長最快的端點安全軟件供應(yīng)商。

2024年,Kurtz仍然是CrowdStrike的總裁兼首席執(zhí)行官。

果然,世界就是個巨大的草臺班子。

參考資料:

https://x.com/MalwareUtkonos/status/1814777806145847310

https://www.businessinsider.com/crowdstrike-ceo-george-kurtz-tech-outage-microsoft-mcafee-2024-7

https://www.crowdstrike.com/blog/falcon-update-for-windows-hosts-technical-details/

https://www.zdnet.com/article/defective-mcafee-update-causes-worldwide-meltdown-of-xp-pcs/

編輯:Aeneas 好困

本文由人人都是產(chǎn)品經(jīng)理作者【新智元】,微信公眾號:【新智元】,原創(chuàng)/授權(quán) 發(fā)布于人人都是產(chǎn)品經(jīng)理,未經(jīng)許可,禁止轉(zhuǎn)載。

題圖來自Unsplash,基于 CC0 協(xié)議。

更多精彩內(nèi)容,請關(guān)注人人都是產(chǎn)品經(jīng)理微信公眾號或下載App
評論
評論請登錄
  1. 目前還沒評論,等你發(fā)揮!