Microsoft ได้ชี้แจงว่าการหยุดให้บริการครั้งใหญ่เมื่อสัปดาห์ที่ผ่านมานั้นมีสาเหตุมาจากข้อบกพร่องของซอฟต์แวร์ที่ถูกนำเข้าในการแก้ไขเมื่อเดือนกรกฎาคม ซึ่งปัญหานี้ซ่อนอยู่ในเซิร์ฟเวอร์ network gateway จนกระทั่งการใช้งานสูงและการลดลงของความจุทำให้ข้อบกพร่องถูกกระตุ้นขึ้น ทำให้ผู้ใช้ Microsoft 365 ต้องเผชิญกับการขาดการเชื่อมต่ออีเมลเป็นเวลาหนึ่งวัน
รายงานของ Microsoft ระบุว่าข้อบกพร่องดังกล่าวทำให้เกิด “lock contention ภายในกระบวนการของ Windows” จนทำให้ทรัพยากรของเครื่อง (CPU และหน่วยความจำ) ถูกใช้จนหมด โดยปัญหานี้จะรุนแรงขึ้นในเครื่องที่มีคอร์และฮาร์ดแวร์ใหม่มากกว่า
การแก้ไขที่มีข้อบกพร่องนี้ถูกเตรียมไว้สำหรับเซิร์ฟเวอร์ Microsoft 365 network gateway แต่ทีมวิศวกรกลับต้องพัฒนาแพตช์สำหรับแพตช์ หรือที่ Microsoft เรียกว่า “การอัปเดตที่นำเส้นทางโค้ดกลับไปยังสถานะที่ทราบว่าใช้งานได้ก่อนหน้าใน Windows”
การให้บริการกลับสู่ภาวะปกติอย่างสมบูรณ์เมื่อวันที่ 14 พฤศจิกายน เวลา 04:15 โดยหลังจากตรวจพบปัญหาการเชื่อมต่อเมื่อวันที่ 13 พฤศจิกายน เวลา 16:03 UTC และสามารถระบุสาเหตุหลักคือการเจรจาต่อรองการเชื่อมต่อ (connection negotiation) ได้ในวันที่ 13 พฤศจิกายน เวลา 00:30 UTC
ศัพท์ที่ควรรู้
- network gateway servers – เซิร์ฟเวอร์ที่ทำหน้าที่เป็นประตูเชื่อมต่อเครือข่ายระหว่างระบบต่างๆ
- lock contention – สถานการณ์ที่หลายกระบวนการพยายามเข้าถึงทรัพยากรเดียวกันพร้อมกัน ทำให้เกิดการติดขัด
- CPU & memory – หน่วยประมวลผลกลางและหน่วยความจำ ซึ่งเป็นทรัพยากรฮาร์ดแวร์ที่ใช้ในการประมวลผล
- load testing – การทดสอบระบบภายใต้ภาระงานหนัก เพื่อตรวจสอบความเสถียรของระบบ
ที่มา: The Register