Microsoft นำรายชื่อเหตุระบบล่มครั้งใหญ่ 5 ครั้งในหนึ่งสัปดาห์: โครงสร้างพื้นฐานที่สร้างขึ้นสำหรับยุคก่อนรับมือได้ยากกับความรวดเร็วและความต้องการของยุค AI

เมื่อวันที่ 17 พฤศจิกายน สำนักงานความมั่นคงแห่งชาติสหรัฐฯ (NSA) ยืนยันว่าเกิดเหตุขัดข้องกับ NSANet ซึ่งเป็นเครือข่ายภายในสำหรับส่งข้อมูลลับ เหตุการณ์นี้ถูกจัดอยู่ในระดับ “Code Yellow” ซึ่งเป็นระดับสูงสุดอันดับสองในระบบแจ้งเตือนสามระดับ ในวันเดียวกัน การอัปเดตระบบภายในของ Apple ส่งผลให้พอร์ทัลพนักงาน ระบบลงชื่อเข้าใช้ภายใน การเข้าถึงระยะไกลผ่าน VPN และบริการสำหรับผู้บริโภค ซึ่งรวมถึง iCloud, App Store และ Apple Pay ขัดข้องเป็นวงกว้าง การขายและการให้บริการซ่อมที่ร้านค้าปลีกหลายแห่งทั่วโลกต้องหยุดชะงัก

TMGM วิเคราะห์: ข่าวสารตลาดการเงิน ปฏิทินเศรษฐกิจ และมุมมองตลาด

หนึ่งวันก่อนหน้านั้น ข้อบกพร่องของซอฟต์แวร์ในระบบฮาร์ดแวร์ที่ติดตั้งภายในองค์กรของ JPMorgan ทำให้การประมวลผลธุรกรรมล่าช้า Downdetector บันทึกรายงานปัญหาการใช้งานได้มากกว่า 3,000 ครั้ง ขณะที่ลูกค้าของ Bank of America, Wells Fargo และสถาบันอื่น ๆ ก็รายงานเหตุขัดข้องที่เกี่ยวเนื่องกันเช่นกัน ย้อนกลับไปอีกสามวัน สำนักงานบริหารการบินแห่งชาติสหรัฐฯ (FAA) ออกคำสั่งระงับการนำเครื่องบินขึ้นทั่วประเทศหลังระบบสื่อสารขัดข้อง ส่งผลให้เที่ยวบินมากกว่า 5,100 เที่ยวถูกยกเลิก และเกือบ 10,000 เที่ยวล่าช้า เหตุขัดข้องต่อเนื่องชุดนี้เริ่มขึ้นเมื่อวันที่ 12 พฤศจิกายน เมื่อบริการหลักของ Microsoft 365 ล่มในอย่างน้อย 70 ประเทศ โดย Outlook, Teams และ Copilot ขัดข้องพร้อมกัน และปัญหายืดเยื้อนานกว่าสองวัน

หกวัน ห้าระบบสำคัญ ไม่มีเหตุการณ์ใดถูกระบุว่าเป็นการโจมตี และไม่มีเหตุการณ์ใดถูกระบุว่ามีสาเหตุมาจาก AI แต่คำอธิบายที่ว่าแต่ละเหตุการณ์เป็นเพียงความขัดข้องทางเทคนิคที่เกิดขึ้นแยกจากกันโดยไม่มีเจตนาร้าย กลับเผยให้เห็นปัญหาที่แก้ไขได้ยากกว่าการโจมตีเสียอีก


Microsoft: “การเพิ่มขีดความสามารถของระบบ” กลายเป็นเหตุระบบล่มนานสองวันได้อย่างไร

ตามรายงานเบื้องต้นที่ Microsoft เผยแพร่ให้ลูกค้าเมื่อวันที่ 15 พฤศจิกายน และการประมวลลำดับเหตุการณ์ของ Bloomberg เหตุขัดข้องเริ่มต้นจากการเปลี่ยนเส้นทางทราฟฟิกของผู้ใช้งานตามขั้นตอนปกติ ในช่วงค่ำของวันที่ 11 พฤศจิกายน ทราฟฟิกของ Teams ถูกเปลี่ยนเส้นทางโดยอัตโนมัติไปยังระบบเซิร์ฟเวอร์อีกชุดที่รองรับทราฟฟิกของ Outlook เมื่อประกอบกับขีดความสามารถบางส่วนที่สูญเสียไปแล้วจากปัญหาอีกเรื่องที่ไม่เกี่ยวข้องกัน จึงกระตุ้นให้ข้อบกพร่องที่แฝงตัวอยู่ในศูนย์ข้อมูลของบริษัทมาตั้งแต่เดือนกรกฎาคมเริ่มแสดงผล เมื่อทราฟฟิกพุ่งสูงขึ้น เซิร์ฟเวอร์ใช้หน่วยความจำจนหมดและเริ่มล่ม

สิ่งที่ทำให้ความเสียหายรุนแรงยิ่งขึ้นคือ ระบบสลับไปใช้เซิร์ฟเวอร์สำรองโดยอัตโนมัติของ Microsoft ได้ส่งทราฟฟิกเพิ่มเติมไปยังเซิร์ฟเวอร์อื่นที่ระบบประเมินว่ายังทำงานได้ตามปกติ ทำให้ปัญหาลุกลามออกไป เมื่อถึงช่วงที่ทราฟฟิกจากการทำงานพุ่งสูงสุดในเช้าวันที่ 12 พฤศจิกายน เซิร์ฟเวอร์ Outlook มากกว่า 80% ไม่ตอบสนอง จากนั้น Microsoft ใช้เวลาอีก 15 ชั่วโมงเพื่อระบุต้นตอของปัญหา ก่อนเริ่มนำวิธีแก้ไขไปใช้

คำอธิบายของ Ramanna รองประธานบริหารของ Microsoft ชี้ให้เห็นจุดบอดในกระบวนการทดสอบของบริษัท นั่นคือรูปแบบทราฟฟิกและการกำหนดค่าฮาร์ดแวร์ที่จำลองในห้องปฏิบัติการไม่สะท้อนสภาพการใช้งานจริง โดยทั่วไป การทดสอบมุ่งเน้นไปที่ระบบรุ่นเก่าซึ่งมีประสิทธิภาพต่ำกว่า แต่กลับพบว่าข้อบกพร่องที่ทำให้ระบบล่มนั้น “สร้างความเสียหายรุนแรงกว่า” บนฮาร์ดแวร์รุ่นใหม่

อย่างไรก็ตาม ปัจจัยด้านบุคลากรควรได้รับความสนใจไม่แพ้คำอธิบายทางเทคนิค บน Blind ซึ่งเป็นเว็บบอร์ดสนทนาเรื่องการทำงานแบบไม่เปิดเผยตัวตน ผู้ใช้รายหนึ่งที่ระบุว่าตนเป็นพนักงาน Microsoft อ้างว่า ทีมโครงสร้างพื้นฐานหลักของ Microsoft 365 เผชิญการเลิกจ้างหลายระลอกและการลาออกโดยสมัครใจในช่วงไม่กี่ปีที่ผ่านมา วิศวกรที่ดูแลระบบเดิมมาอย่างยาวนานได้ออกจากบริษัทไป ทำให้พนักงานที่เหลือประสบความยากลำบากในการวินิจฉัยปัญหาซับซ้อนได้อย่างรวดเร็ว การย้อนระบบกลับไปยังสถานะก่อนหน้าซึ่งเคยใช้เวลาประมาณ 45 นาที ปัจจุบันอาจใช้เวลาถึงห้าชั่วโมง ระหว่างเหตุการณ์ครั้งนี้ มีรายงานว่าเครื่องมือจัดการเหตุขัดข้องภายในไม่สามารถโหลดได้ตามปกติในช่วงหนึ่ง ทำให้วิศวกรต้องทำงานร่วมกันข้ามแผนกจนดึกดื่น เพื่อตรวจสอบโค้ดและสถาปัตยกรรมบริการที่รับช่วงต่อมาจากอดีตเพื่อนร่วมงาน

Microsoft ยังไม่ได้ตอบต่อข้อกล่าวอ้างเหล่านี้ต่อสาธารณะ อย่างไรก็ตาม ข้อกล่าวอ้างดังกล่าวสอดคล้องกับเหตุขัดข้องที่ยืดเยื้อนานผิดปกติ และความพยายามย้อนระบบกลับไปยังสถานะก่อนหน้าที่ไม่สามารถแก้ปัญหาได้


สิ่งที่กำลังเกิดขึ้นจริง: ช่องว่างที่กว้างขึ้นระหว่างความรวดเร็วของ AI กับการปรับปรุงโครงสร้างพื้นฐาน

ไม่มีเหตุการณ์ใดในห้าเหตุการณ์นี้ถูกระบุว่ามีสาเหตุมาจาก AI โดย Microsoft ปฏิเสธอย่างชัดเจนว่า “AI หรือเอเจนต์” มีส่วนเกี่ยวข้อง ขณะที่ FAA และ NSA ก็ระบุเช่นกันว่า AI ไม่ใช่ปัจจัยที่ทำให้เกิดเหตุ แต่ “ไม่ได้เกิดจาก AI” กับ “ไม่เกี่ยวข้องกับยุค AI” เป็นคนละเรื่องกัน

สิ่งที่กำลังเกิดขึ้นคือแนวโน้มสองด้านที่แยกห่างจากกัน ด้านหนึ่งคือความถี่ของการเปลี่ยนแปลงและความเข้มข้นของภาระงานที่ขับเคลื่อนด้วย AI ทั้งรูปแบบทราฟฟิกและการกำหนดค่าฮาร์ดแวร์กำลังเปลี่ยนแปลง ขณะที่การอัปเดตซอฟต์แวร์ก็รวดเร็วขึ้น แต่สภาพแวดล้อมการทดสอบและความสามารถในการรับมือเหตุขัดข้องกลับตามไม่ทัน อีกด้านหนึ่งคือวงจรการปรับปรุงโครงสร้างพื้นฐาน สายทองแดงและเราเตอร์ของ FAA มีรอบการใช้งานที่ยาวนานระดับหลายทศวรรษ เครือข่ายของ NSA พัฒนาเปลี่ยนผ่านกันเป็นรุ่น ๆ ส่วนขีดความสามารถภายในของ Microsoft ในการดูแลระบบเดิมก็กำลังถดถอยลงทุกไตรมาส

AI ทำให้สามารถค้นหาช่องโหว่ของระบบจำนวนมากได้อย่างรวดเร็วในระดับที่ไม่เคยมีมาก่อน สิ่งนี้สร้างแรงกดดันมหาศาลให้บริษัทและหน่วยงานรัฐต้องแก้ไขช่องโหว่ทันที โดยมักติดตั้งแพตช์หลายรายการพร้อมกัน ส่งผลให้ระบบที่ไม่เคยถูกออกแบบมาเพื่อรองรับการเปลี่ยนแปลงที่รวดเร็วเช่นนี้ต้องรับภาระอย่างหนัก ความเชื่อมโยงเชิงเหตุและผลในที่นี้ไม่ใช่ว่า AI สร้างช่องโหว่ แต่เป็นเพราะ AI เร่งจังหวะการเปลี่ยนแปลง ขณะที่ระบบซึ่งต้องรองรับการเปลี่ยนแปลงเหล่านั้นถูกออกแบบมาสำหรับจังหวะที่ช้ากว่า

กรณีของ Microsoft แสดงให้เห็นกลไกนี้ได้ชัดเจนที่สุด ข้อบกพร่องแฝงตัวอยู่มาตั้งแต่เดือนกรกฎาคม การเปลี่ยนเส้นทางทราฟฟิกตามปกติกระตุ้นให้ข้อบกพร่องนั้นแสดงผล ระบบสลับไปใช้เซิร์ฟเวอร์สำรองโดยอัตโนมัติทำให้ปัญหารุนแรงขึ้น และการสูญเสียความเชี่ยวชาญในการดูแลระบบเดิมทำให้การกู้คืนล่าช้าผิดปกติ แต่ละขั้นตอนไม่ใช่ AI แต่ทั้งหมดเกิดขึ้นภายใต้แรงกดดันจากการขยายตัวของบริการคลาวด์ที่ขับเคลื่อนด้วย AI

ราคาแบบเรียลไทม์

ชื่อ / สัญลักษณ์
แผนภูมิ
% การเปลี่ยนแปลง / ราคา
NVDA
การเปลี่ยนแปลง 1 วัน
Price down
-0.09%
157.8
AMZN
การเปลี่ยนแปลง 1 วัน
Price up
+0.15%
259.17
KO
การเปลี่ยนแปลง 1 วัน
Price up
+0%
0
MSFT
การเปลี่ยนแปลง 1 วัน
Price down
-2.04%
507.48