2024年7月19日,由于美国网络安全公司CrowdStrike分发异常更新,導致其全球大量客戶的Windows操作系统计算机和虚拟机设备出现故障,表现为显示蓝屏或恢复(Recovery)界面。该事件波及多个行业,造成众多服务中断。微软初步估計此次故障影响了全球近850万台设备。此事也被专家称为“历史上最严重的IT故障事件”。
众多行业受到冲击,如航空業、银行、酒店、医院、证券市场及广播电视;政府服务(如紧急电话号码和政府网站)亦受影响。电子支付和緊急服務也未能幸免。此事预计在全球范围内造成数十亿美元损失。
事发逾一小时後,该故障于被发现并發佈修复,但由於相關修復未必能自動批量完成而需人手進行,事件对各行各业的冲击一时不会平息。
事件背景
CrowdStrike提供一系列安全软件保护计算机免于网络攻击。旗下漏洞扫描器“猎鹰传感器”(Falcon Sensor)產品在个人电脑操作系统的内核层面安装端點偵測與回應传感器,以检测和预防威胁。CrowdStrike会定期向客户分发修補程式,使他们的计算机能够应对新的威胁。
2009年,微软与欧盟达成协议,要求微软必须向第三方安全软件开发商开放相关应用程序接口(API)。因此,包括CrowdStrike在内的安全软件均拥有系统内核级别的访问权限。
2024年7月18日,即在此次问题更新前,Microsoft Azure云服务发生异常,导致美国中部部分Azure用户无法访问其云存储及Microsoft 365服务。微软表示,两起事件并无关系,但对这些受影响公司的客户来说,问题却更加复杂。
协调世界时(UTC)7月19日早上4时09分,部署在Azure的Windows虛擬機器开始重启及崩溃,6时48分,Google计算引擎报告此问题。7时15分,Google宣布CrowdStrike更新存在问题。
CrowdStrike首席执行官确定此事由CrowdStrike的异常驱动更新造成,而非网络攻击,以及“失败的操作:csagent.sys”。这造成设备陷入或恢复模式。该故障主要发生于运行Windows 10及Windows 11的设备。
补救措施
受影响设备需通过安全模式或Windows恢复环境於驱动程序文件夾%windir%\System32\drivers\CrowdStrike\下删除以C-00000291-開頭的.sys配置文件以恢复正常。由于这一过程必须在每台机器上逐一完成,受影响的企业或需假以时日以恢复所有系统。
此外,部分微软用户发现将电脑重启约十五次后亦可解除问题,因为若电脑反复重启,CrowdStrike可能自行更新并在电脑崩溃前修复损坏文件。
CrowdStrike于UTC 05时27分发放内容更新。
微软亦发布了相关修复工具,能够帮助用户修复系统。
影响
此次事件影响全球。由于全球许多IT企业都使用Windows和CrowdStrike软件,因此许多商业部门都收到了中断服务的报告。分发问题更新的CrowdStrike公司拥有约24,000名客户,由于其订户多为大型企业,故实际影响电脑数目難以估量。而截至2021年,预计有47%的财富美国500强企业使用了该公司的产品。CrowdStrike在其网站上声称,它的客户包括近60%的财富美国500强公司和一半以上的财富美国1000强公司。
由於时区關係,全球受到的顯著民生影響幾乎是由東至西,先影響大洋洲和亚洲(UTC 04時即當地時間正午前後),再到欧洲(清晨6時左右),最後到美洲(剛踏入19日半夜)。其中部分国家和地区影响轻微。例如中国大陆因其不断推进科技自立,航空公司及银行等重要行业幸免于难,但个别外企及奢华酒店仍受冲击。而俄罗斯和伊朗因国际制裁导致使用美国高科技公司产品受限,故并无相关故障报告。
Cloud Zero的分析师预测(利用以前对假设的全球互联网中断所做的工作),事发当天上午已造成损失240亿美元]]
全球共有5078班航班(占定期航班的4.6%)被取消。
德國柏林勃兰登堡机场和美國洛杉磯國際機場等部分大型國際機場的運作均受嚴重影響,大量航班延誤或停飛。
大洋洲
在大洋洲,新西兰的基督城機場也面临类似问题。澳大利亚航司澳洲航空、維珍澳洲航空和捷星航空受冲击悉尼機場发言人表示此次事件影响部分航司运营,“机场个别航班当晚可能延误”。墨爾本機場亦被波及,同时该机场在其网站发表通知称,“全球技术问题”影响值机,并建议乘客向相关航空公司咨询。坎培拉機場、達爾文國際機場、阿德萊德機場、珀斯機場、霍巴特國際機場、及布里斯班機場均受到冲击。
亚洲
在亚洲,香港國際機場受事件影響,大批旅客排队等待人手辦理登機手續,多爲搭乘廉航香港快運航空的離港乘客。香港機場管理局称紧急预案已经启动以应对几家航空公司网站无法运行和办理登机手续需要人工操作的问题。國泰航空、香港快运航空和香港航空通知旅客,其预订系统暂不可用。部分7月20日执飞的香港快运航班被迫取消。
桃園國際機場表示,全亞洲航空、台灣虎航、捷星航空、香港快運航空、濟州航空與酷航因使用系統,報到系統無法作業,建議旅客提前3到4小時抵達機場。隔天虎航表示問題已經排除。
日本航司春秋航空日本和韩国航司濟州航空受此事冲击。捷星日本航空被迫削减大量航班(绝大多数为国内航班)。新加坡樟宜机场部分自助值机设备受此影响,造成航班延误,航司被迫人工值机。
同时新加坡航空和酷航报告称,7月19日全天都出现了不同程度的服务异常。
受此影响,菲律宾首都马尼拉的尼诺伊·阿基诺国际机场一度大排长龙。
宿霧太平洋航空和菲律宾亚洲航空的航班因其系统面临技术问题延误。
在印尼,亞洲航空和連城航空的值机系统亦出现问题。泰国亚洲航空的预订及值机系统亦受影响。
此外,在吉隆坡国际机场,系统中断导致乘客办理登机手续和等待时间显著延长。
在印度,印度航空、靛蓝航空、、香料航空和塔新航空受事件影响,期间更一度签发手写登机牌。要求并命令航空公司和机场在必要时提供食物和座位,同时要有同情心。不过,只有那些严重依赖Microsoft Azure提供从网站托管、预订系统到收益管理系统和离港控制系统等各种服务的航空公司才会受到影响。印度航空表示,此次事件中没有航班延误或被取消。
中东及北非
土耳其航空取消了部分航班,以防止其航班运营陷入混乱。北非突尼西亞境内机场短暂陷入混乱。
欧洲
在欧洲,捷克的布拉格瓦茨拉夫·哈維爾機場、匈牙利的布達佩斯李斯特·費倫茨國際機場、斯洛文尼亚的布拉提斯拉瓦機場和荷兰的阿姆斯特丹史基浦機場受此事影响。蘇黎世機場一度暂停航班降落。比利時临近布鲁塞尔首都大区的沙勒罗瓦机场的工作人员手动为乘客办理登机手续,但其他软件在10:00(UTC 08:00)之前缓解了问题,未发生严重延误。西班牙下辖“”在其社交媒体及官网提及此事。所有西班牙机场都报告了险情。法國航空在周五宣布,他们的多项服务受到了技术问题的影响,尽管公司的网站和应用程序运作正常,但客户服务电话可能会中断。法国航空的技术团队正在全力解决这些问题。法國首都巴黎的巴黎夏尔·戴高乐机场和巴黎-奥利机场的值机服务均受此事影响,更一度暂停航班起降。波蘭波茲南-拉威卡機場和华沙肖邦机场的登机报道受影响,二者建议旅客在网上查询航班状态。虽然启动了应急系统,但办理登机手续的速度仍然较慢。德國首都的柏林勃兰登堡机场约于当地时间上午7时(UTC 05時)宣布,因机场运营受“外部供应商IT问题”影响,暂停服务至上午10时(UTC 08時)。虽然旅客吞吐量在一定程度上受到限制,但航班延误仍在继续,一些航班不得不被航空公司取消。在德國第二大城市的汉堡机场,多家航空公司(欧洲之翼航空、瑞安航空、伏林航空和土耳其航空)被迫人工填写登机牌。克罗地亚和瑞典的空管系统因此事瘫痪。
瑞士國際航空的三成航班停航。德国的汉莎航空网站的“个人资料预订查询”功能受此事冲击。愛爾蘭廉航瑞安航空的预订及登机报道一度不可用,并“被迫取消少量航班”,同时建议旅客至少在航班出港前三小时抵达机场。匈牙利廉航維茲航空将此次事故归咎于在线服务脱机。荷兰航司荷蘭皇家航空暂停绝大多数航班运行,并宣布受事件影响航班无法运行。芬兰航空报告称其向旅客寄发邮件及短信的系统出现问题。在希腊,居民和游客在主要机场遭遇严重延误,特别是雅典埃莱夫塞里奥斯·韦尼泽洛斯国际机场和伊拉克利翁尼科斯·卡赞察基斯国际机场。事发当天恰逢旅游旺季,机场一度陷入混乱,旅客被迫等待数小时才能搭乘航班。造成这种情况的因素包括工作人员严重短缺和新实施的航班时刻表。在伊拉克利翁,机场面临着更多的挑战,有八个航班被记录为有问题。机场负责人乔治·普利亚卡斯表示,目前正在人工安排航班,以减轻事件影响,但大量航班进港进一步增加了系统压力。。
多个英国机场受此冲击,例如愛丁堡機場,该机场的出港航班信息顯示系統停摆,而蓋特威克機場的自动条码扫描系统停止运行,只能进行人工查验。。部分航班受到影响(特别往返是英国的国际航班),而往返曼島的航班受影响较轻。
北美洲
一显示器显示启动修复画面]]
在北美洲,美國三家大型航空公司聯合航空,達美航空和美國航空下达令。已出港的航班正常运行,但没有新的航班起飞。另据美国联邦航空管理局消息,忠實航空因此事件暂时停飞。受此事件影响,全美约1500班航班取消。美國航空、聯合航空和忠实航空在周五后比较快速地恢复了正常运营,但达美航空的运营崩溃一直持续到周末。
加拿大的蒙特利尔皮埃尔·埃利奥特·特鲁多国际机场和多倫多皮爾遜國際機場受此事冲击,波特航空全面停飞。据报道,溫哥華國際機場亦受影响,惟尚不明确是否与此次故障相关。
美國2024年共和黨全國代表大會於19日閉幕,大批出席者因航班延误而受困于大会主办城市威斯康星州密尔沃基。
聯合航空取消的航班虽少,但仍对其枢纽造成了严重影响。例如,在聖馬刁郡舊金山國際機場周边的酒店在7月19日即被滞留旅客填满。部分宾客在辦理入住当地万豪酒店时遭遇不便,因為萬豪國際的系統亦在事件中受影響。
达美航空是目前遭受事件影响最严重的,7月19日有1200班航班取消,之後三日亦每天有介乎1200到1400班航班取消,睡在坚硬的油毡地板上,既没有毯子,也没有食物。达美航空在事先没有任何警告的情况下立即禁止未成年人单独乘机,直至7月23日。这给监护人们造成了很大的麻烦,因为他们一直依赖这项服务来避免乘坐飞机护送自己的孩子去夏令营或亲戚家,还有一些未成年人,他们原本指望使用这项服务乘飞机回家。
同日,达美航空首席执行官在声明中向受影响旅客致歉,并透露此次故障影响了达美航空的一个机组人员跟踪软件程序。据达美首席信息官拉胡尔·萨曼特()称,软件已于7月19日上午约11时恢复并重新联网,但由于等待处理的更新积压过多,该程序已不堪重负,此后一直在努力赶进度。
在新加坡,建屋發展局管理的185个停车场的出入口闸门故障。马来西亚铁路运营商马来亚铁道证实,马铁票务系统和客服渠道遭遇技术问题。公司在其Facebook页面上发布了一份声明,表示他们目前正在紧急修复技术问题,声明中还表达了铁道公司对造成的不便的歉意,并感谢公众的关注和耐心等待。數小時後,马来亚铁道公司在官方臉書專頁證實技術問題已得到解決。
英国铁路公司也受到冲击。瑞典和比利时的公共交通无法售票,也被事件波及。爱尔兰称其中心面临“严重干扰”。
美加邊界交通一度陷入混乱。加拿大边境服务局将此归咎于其电话报告系统的部分故障,故障后来得到解决。在美国,華盛頓都會區交通局于7月19日清晨遭受了轻微的服务延误;其网站和实时追踪服務直到当天上午9时30分左右才恢复正常。波士顿马萨诸塞湾交通局为旅客提供的车辆追踪和到达通知系统和瘫痪。
金融
CrowdStrike的股价因此次中断而在7月19日下跌超过11%,而微软的股价下跌不到1%。;很少有银行使用CrowdStrike工具,许多银行的关键系统不在云端运行。、孟買敏感指數(BSE)。
菲律宾的、首都銀行、菲律賓土地銀行、、、、等亦受影響。和等电子钱包在菲律宾也遇到了问题。
包括新加坡交易所(SGX)和星展銀行在内的多家新加坡公司报告称,7月19日出现了不同程度的服务困难。芬兰的报告称,投资伙伴和股票储蓄账户受到轻微干扰。乌克兰因此次更新遭到冲击。
南非的等银行,多间以色列银行亦受影響。土耳其的网站和手机银行应用程序无法访问。
在美洲,受影响的银行包括美国的大通银行、美国银行、富國銀行、美国合众银行、第一資本、嘉信理财,加拿大的加拿大皇家銀行、多倫多道明銀行。巴西的证实受到影响。上午客户可以登录,但在UTC时间12:00,银行禁用了登录按钮。巴拉圭银行Ueno和Banco Continental受到影响,其客户无法登录。
政府机关
菲律宾的政府网站,如众议院,因事件瘫痪。
马来西亚国家网络安全机构(NACSA)发表声明指出,全球范围内的微软系统故障严重影响了马来西亚的重要部门,包括电视台、機場和銀行。
丹麦哥本哈根消防部受事件影响,无法自动接收建筑发出的火警信号。
美国国土安全部、航空航天局、聯邦貿易委員會、受冲击,财政部和国务院受轻微影响,美國退伍軍人事務部和美國能源部亦受到影响,惟其是否与此事有关有待商榷。在佐治亚州、堪萨斯州、密苏里州、北卡罗来纳州、田纳西州和哥伦比亚特区的分部受到影响。俄勒冈州波特兰市市长宣告事件触发城市紧急状态。亚利桑那州、南达科他州、德克萨斯州和华盛顿州的选举及投票数据库受到冲击。苏瀑市网站因事件关闭。
在美国,阿拉斯加州、亚利桑那州、佛罗里达州、爱荷华州、堪萨斯州密歇根州、明尼苏达州、纽约州、俄亥俄州、俄勒冈州、宾夕法尼亚州和弗吉尼亚洲。此外,阿拉斯加州的非紧急电话中心出现问题。然而,有若干州的法院系统通报其计算机系统出现异常,其中包括阿拉斯加州、加利福尼亚州、特拉华州、爱达荷州、堪萨斯州、马里兰州、马萨诸塞州、密歇根州、内华达州、纽约州和宾夕法尼亚州。
在加拿大,多伦多的部分服务出现异常。新西兰议会亦受此影响。
医疗卫生
澳大利亚布里斯班和受事件影响。
以色列红大卫盾会及其紧急热线受到冲击。、和等医院面临问题,造成等候时间延长,手术延迟。斯洛文尼亚医药公司称其已经全面停产,员工遣送回家。
德国吕贝克和基尔的两间医院取消了所有非紧急手术。受事件影响,倫敦救護服務收到的999和緊急電話数量空前激增。爱尔兰三分之二的全科医生受到影响。医院的放射治疗、手术室预约和员工名册也受到影响。葡萄牙的也出现了问题。
受事件影响,北美多家医院暂停非紧急手术及会诊。即使正常运行,医院调取病历也可能受限。在美国,紀念斯隆-凱特琳癌症中心推迟了所有需麻醉手术,取消全部非紧急手术及会诊,同时也被影响,话题“感谢微软,提前放假”一度登上新浪微博热搜。日本環球影城宣布由于网络中断,周末将暂停线下售票;但线上或指定售票点售票如常。在美洲,赛车游戏《》受事件影响。多部韩国网络游戏,如《黑色沙漠》《仙境传说》和《RO 仙境傳說》,一度停服。
以色列郵政。
澳大利亚的澳大利亚广播公司、特别广播服务公司、七號電視網和九號電視網受事件影响。多家新加坡公司,如新報業媒體、新加坡电信和在7月19日当天通报了多起不同程度的运营困难。
沃达丰受到事件影响。安特卫普市区的移动通信服务受到影响。比利时网络安全中心称事件对该国影响已被限制,同时英国广播公司的免費儿童频道CBBC也未能幸免。
法国多套电视频道受到影响,其中包括法國電視一台、、和电视网。移动通信及互联网服务供应商布依格电信宣布,客户服务因故障而无法提供。计划在法国巴黎举办的2024年夏季奥林匹克运动会也未能独善其身。事件发生在奥运村开放一天后,组织者正在处理运动员和代表的抵达事宜。巴黎奥组委确认,他们面临重大技术问题。这些故障已经影响到认证系统,可能导致一些参与者无法及时获得徽章、制服和认证,同时也可能影响到运动员的航班安排。奧組委已经启动紧急计划,并表示他们将与技术团队和相关單位密切合作,尽快恢复赛事正常运行。这一事件导致新闻中心的办证台关闭,安全检查只能通过一份名单人工进行,运作速度下降。
纽约時報廣場上的多块显示屏被关闭。美国多家电视台受事件影响无法正常播出,例如被迫紧急借用播出全国新闻。ESPN和ESPN2稍后联播《》《》填补节目空缺,期间无任何或。派拉蒙全球旗下多套电视频道受到冲击,例如(西岸转播转为旧式紧急转播)、、,及旗下多套电视频道。一度停播五个半小时。加拿大廣播公司也未能幸免。Woolworths和客澳市等超市被波及,大量商店当日被迫终止经营。因收银机故障,暂时关闭了全国三分之一的门店。英国连锁百货商店Waitrose只能接受现金付款。挪威连锁药店和保险公司被迫暂停服务;事件也殃及和博姿。除却上述案例,由于CrowdStrike在挪威市场份额有限,事件未造成严重影响。
在美国,系统延迟迫使体育用品零售商迪克体育用品关闭部分门店,其网站也一度瘫痪。国际连锁品牌星巴克的移动应用只能查看更新前的基本账目,订餐只能到店下单,收银机软件崩溃。连锁便利商店品牌7-Eleven在美國旗下的部分分店出现异常,起因是店仍在使用Speedway的遗留软件和,这些软件是Speedway为所有之时安装,门店轻则无法使用信用卡或借记卡交易,重则暂停营业。7-Eleven正在将Speedway的分店转换为其适当的RIS软件,已换型RIS的Speedway分店没有遇到问题,普通7-Eleven或分店亦幸免于难。
亚马逊公司的仓库运营和内部软件受到干扰。亚马逊仓库用于管理日程安排和请假申请的应用程序“A to Z”因事故瘫痪,员工也无法使用内部服务“Anytime Pay”。亚马逊的卡车运输业务也受到干扰,司机们抱怨,他们使用的“Relay”平台出现了问题,这意味着他们暂时无法到仓库取货。
其他行业
毗邻波罗的海的波兰格但斯克的主要货柜码头格但斯克DCT碼頭经受了微软运营系统故障的考验,港口运行受到冲击。大部分美国船运码头幸免于难,唯有大量保障外国货轮的休斯敦港短暂停摆。
由于提供学术著作永久链接的DOI(数字文献标识符)在中断期间和中断之后无法解析,全球学术界因此受到干扰。
瑞典为预防风险,已疏散人员。同时,该国的足球赛门票一度停售。
受事件影响,特斯拉位于德国的超级工厂停产约四小时。
美国安全服务提供商受冲击。
回应
CrowdStrike
在接受美國全国广播公司的《今天》节目现场采访时,CrowdStrike首席执行官乔治·库尔茨向公众道歉。他说,公司领导“对我们给客户、旅行者以及受此影响的任何人(包括我们的公司)造成的影响深表歉意”。CrowdStrike警告称,恶意行为者可能会试图冒充其员工或独立研究人员,声称可以帮助解决问题。
虽公司遭受巨大损失,CrowdStrike仍称只为相关损害及税收损失承担最低限度责任。CrowdStrike“Falcon”软件将责任限制在“已支付的费用”范围内,故若本条款具强制力,CrowdStrike至多向受影响的公司退还已支付的费用。
而在欧盟成员国内,CrowdStrike有可能要根据《通用数据保护条例》(GPDR)规定承担责任,该法规涉及安全事件对用户数据的影响。众所周知,该法规与数据泄露有关,但也适用于。目前还不清楚暂时无法访问数据是否足以使CrowdStrike承担责任,也不清楚GDPR是否适用于所有与安全相关的事件,还是仅适用于未经授权的访问。
政府
澳大利亚政府就此事举行了紧急会议,同时启动国家协调机制。總理安東尼·阿爾巴尼斯称“我知道澳大利亚人民对正在全球范围内发生的影响广泛的服务中断感到担忧。我国政府正在与国家网络安全协调机关密切合作”。,并补充道:“在现阶段,关键基础设施、政府服务或‘三零’(當地緊急求救電話)服务没有受到影响。国家协调机制已经启动,目前会议正在进行。”
俄罗斯數位通訊部於2024年7月19日表示,該國的航空公司和銀行似乎未受到微軟大規模停運的影響。該部門宣稱莫斯科抵禦西方制裁的措施,使其免於本次數位混亂。
中华人民共和国国家安全部于2024年8月6日发文回顾此事,批评CrowdStrike事前未有经过严格检查测试即推送更新,从而导致全球性事故,并借此批评美国的网络安全政策。同时文章宣称由于积极推动科技自主,其在本次事件中基本上未受影响。
民間
网络安全顧問稱該事件為“歷史上最大的IT中斷”,並補充道:“這基本上就是我們對千年蟲問題所擔心的,只不過這次確實發生了”。新聞記者使用「數位流行病」一詞來描述這次中斷。
特斯拉、X、Neuralink兼SpaceX首席执行官埃隆·马斯克在X上发文,指CrowdStrike已“自我们所有的系统中刪除”。亞洲航空首席执行官安东尼·弗朗西斯·费南德斯要求得到解释,并赔偿其所在公司于此次事件中损失的数百万美元收入。
中国网络安全公司,如奇虎360、奇安信和腾讯也借此时机推销自己的产品。奇虎360董事长兼CEO周鸿祎更是声称,本次事件犹如一场全球范围的网络战攻击,之所以国内很少有电脑受到此次影响,是因为中国90%的电脑上绝大多数企业杀毒软件都用的是360杀毒和360安全卫士。
中国的一些机构和媒体对此发文,强调自主可控的重要性。天风证券表示,操作系统是IT系统的基石,本次事件“体现了操作系统自主可控的必要性”。《科技日報》发文称,本次事件证明对于中国来说,在操作系统、网络安全等关键信息技术领域受制于人风险极大。
相关分析
起因
7月19日猎鹰传感器()的软件更新包含了兩個新增的模板实例(),該模板已於3月時通過内部測試並於軟件更新中推送至客戶。由于CrowdStrike内容验证软件中的一个错误,其中一個包含問題内容,名为“291号通道文件”的新实例通过了验证。
集中化和同质化
此次事件引起了关于信息技术领域中寡占和集中化问题的讨论。全球计算机大多使用Windows操作系统,形成了抗逆性低下的单一环境。安全专家建议加强系统冗余以避免单点故障。
也有人建议强制披露违规和漏洞。网络安全顾问杰克·威廉姆斯在接受《连线》采访时表示,此次事件“表明了在没有IT干预的情况下推动更新是不可持续的”,并且“公众现在可能要求改变这种运营模式”。
操作系统设计与反垄断执法
微软将此事归咎于于2009年与欧洲联盟达成的反垄断协议,其称该协议迫使微软向第三方开发者提供低级别内核访问权限。一份相關文件顯示,協議并未明确指出微软必须提供内核级访问权限,但规定微软必须提供与其自身安全产品所使用的相同API的访问权限。
对于Linux系统,用户可用取代可載入核心模組对此类软件进行编程。
自2019年推出MacOS Catalina以来,这类软件可以使用“端点安全框架”,而不是内核扩展,而且这种方法已被逐步强制执行。
參見
- 2000年问题
- 2017年WannaCry勒索軟體攻擊
- 2021年Facebook當機事件
- 2038年问题
参考文献
评论 (0)