Máy chủ thời gian “quay ngược” về năm 2006 khiến mạng di động Telstra tê liệt trên diện rộng

Telstra, một trong những nhà mạng lớn nhất Australia, vừa công bố nguyên nhân đứng sau sự cố gián đoạn diện rộng từng làm ảnh hưởng đến mạng di động, dịch vụ thanh toán điện tử, hệ thống giao thông và cả đường dây khẩn cấp 000. Theo báo cáo gửi lên cuộc điều tra của Thượng viện Australia, sự cố bắt đầu từ một công việc bảo trì tưởng chừng thông thường nhằm xử lý một vấn đề về khả năng chống lỗi của hệ thống. Cụ thể, kỹ thuật viên của Telstra đã thay thế một bộ khung thiết bị chứa máy chủ NTP. NTP, viết tắt của Network Time Protocol, là giao thức đồng bộ thời gian cho các máy tính và thiết bị mạng; nó đóng vai trò cực kỳ quan trọng vì nhiều hệ thống số chỉ hoạt động chính xác khi tất cả thiết bị cùng dùng một mốc thời gian thống nhất.

Sau khi hoàn tất thay thế và khởi động lại máy chủ vào rạng sáng 8/7, Telstra cho biết card GPS bên trong máy chủ NTP đã không hoạt động như mong đợi. GPS ở đây không chỉ là công nghệ định vị, mà còn thường được dùng làm nguồn thời gian chuẩn có độ chính xác cao cho hạ tầng viễn thông. Hệ quả là máy chủ NTP đã tự đặt lại thời gian về năm 2006. Khi một máy chủ NTP phát đi thời gian sai, các thiết bị khác trong mạng có thể đồng loạt nhận thông tin lệch này, tạo ra phản ứng dây chuyền trên quy mô rất lớn.

Telstra thừa nhận nguyên nhân sâu xa không chỉ nằm ở phần cứng khởi động lại, mà còn đến từ quy trình quản trị hệ thống yếu kém. Nhà mạng cho biết trước đó đã có một thay đổi thiết kế có chủ đích để khắc phục lỗi cũ, nhưng thay đổi này lại không được ghi chép đầy đủ. Vì vậy, đội bảo trì không hề biết thiết bị sẽ phản ứng ra sao khi được khởi động lại. Nghiêm trọng hơn, Telstra cũng xác nhận họ đã không cài đặt một bản cập nhật phần mềm, dù đã biết về bản vá này từ đầu năm 2026. Trong môi trường hạ tầng viễn thông, bản vá phần mềm là các cập nhật nhằm sửa lỗi, tăng ổn định hoặc vá lỗ hổng; việc bỏ qua chúng có thể khiến một lỗi nhỏ trở thành sự cố diện rộng.

Khi thời gian sai lan ra mạng, nhiều thiết bị của Telstra bắt đầu kiểm tra lại chứng chỉ số và từ chối kết nối. Chứng chỉ số là cơ chế xác thực điện tử giúp thiết bị xác minh rằng một máy chủ hoặc dịch vụ là hợp lệ và an toàn. Nếu đồng hồ hệ thống bị sai, chứng chỉ có thể bị hiểu nhầm là đã hết hạn hoặc chưa có hiệu lực, khiến thiết bị cho rằng đang có điều bất thường và tự động chặn liên lạc. Đây là lý do chỉ một máy chủ NTP gặp sự cố nhưng vẫn đủ sức gây hỗn loạn cho toàn bộ mạng lưới.

Telstra cho biết chỉ một trong ba máy chủ NTP của hãng gặp lỗi, nhưng lượng dữ liệu thời gian sai phát tán vào mạng vẫn đủ để gây gián đoạn trên diện rộng. Nhà mạng đã cô lập máy chủ gặp sự cố vào lúc 7 giờ 11 sáng và đến 10 giờ 30 đã xác định được toàn bộ thành phần mạng bị ảnh hưởng bởi thông tin thời gian sai. Tuy nhiên, quá trình phục hồi không diễn ra ngay lập tức. Khi thời gian chính xác được phát lại trên mạng, một số thiết bị vẫn không đóng các phiên IP cũ. Phiên IP, hay IP session, có thể hiểu là kết nối logic đang tồn tại giữa thiết bị người dùng và mạng. Vì các phiên này bị “kẹt” trong trạng thái lỗi, nhiều thiết bị khách hàng không thể kết nối lại nếu không khởi động lại máy.

Telstra mô tả vụ việc là “hoàn toàn không thể chấp nhận được” và thừa nhận nếu một đợt bảo trì có thể kích hoạt sự cố ở mức độ này, thì các biện pháp kiểm soát nội bộ rõ ràng chưa đủ tốt. Nhà mạng cho biết sẽ tiếp tục điều tra vì sao thay đổi thiết kế không được tài liệu hóa, vì sao bản cập nhật phần mềm không được triển khai, và cần điều chỉnh quy trình ra sao để những rủi ro đã biết được ghi nhận, ưu tiên xử lý và khép lại trước khi ảnh hưởng đến khách hàng. Vụ việc cũng là lời nhắc mạnh mẽ rằng trong hạ tầng số hiện đại, những thành phần nền tảng như đồng bộ thời gian, chứng chỉ số hay quy trình quản lý thay đổi tuy ít được chú ý, nhưng lại có thể quyết định sự sống còn của cả một mạng viễn thông quốc gia.