Nhấn nhầm nút tắt trong trung tâm dữ liệu, một kỹ thuật viên buộc phải giữ nguyên ngón tay để tránh sự cố diện rộng

Một câu chuyện hậu trường ngành CNTT vừa thu hút sự chú ý khi kể lại tình huống dở khóc dở cười tại một tổ chức ở Glasgow vào đầu những năm 2000. Khi đó, một kỹ thuật viên được giao thực hiện bảo trì cho máy chủ và cần tiến hành hard reboot, tức thao tác khởi động lại cưỡng bức khi hệ thống không còn phản hồi theo cách thông thường. Tuy nhiên, trong môi trường datacenter, hay trung tâm dữ liệu – nơi tập trung máy chủ, thiết bị lưu trữ và hạ tầng mạng – chỉ một cú bấm nhầm cũng có thể kéo theo hậu quả lớn.

Theo lời kể, phần lớn server thời đó là các cỗ máy cỡ lớn đặt trực tiếp trên sàn thay vì gắn trong rack tiêu chuẩn như ngày nay. Bên cạnh nhiều máy chủ còn có storage array, tức hệ thống lưu trữ ngoài chuyên dùng để chứa dữ liệu cho server truy cập. Vấn đề nằm ở chỗ các storage array này có hình thức bên ngoài gần như giống hệt máy chủ đặt cạnh chúng. Trong môi trường vận hành thực tế, sự tương đồng về ngoại hình giữa hai loại thiết bị có thể khiến kỹ thuật viên xác định nhầm mục tiêu, đặc biệt khi phải thao tác nhanh.

Nhân vật chính của câu chuyện, được gọi bằng tên thay thế là Vince, ban đầu chỉ được kỳ vọng hoàn thành công việc trong vài phút. Nhưng sau một khoảng thời gian dài không thấy quay lại, đồng nghiệp bắt đầu nghi ngờ có chuyện bất thường. Khi một thành viên khác đi kiểm tra, anh này phát hiện Vince đã bấm vào nút nguồn của storage array thay vì server cần bảo trì. Tình huống trở nên trớ trêu vì nếu buông tay, thiết bị lưu trữ có thể tắt hẳn, dẫn đến outage – thuật ngữ chỉ việc dịch vụ hoặc hệ thống bị gián đoạn hoạt động. Không có ai ở gần để hỗ trợ ngay lập tức, Vince chọn cách tiếp tục giữ nguyên ngón tay trên nút nguồn để trì hoãn sự cố.

Khi sự việc được báo lại, cả nhóm kỹ thuật đã kéo vào trung tâm dữ liệu để tận mắt chứng kiến đồng nghiệp mắc kẹt trong tư thế đầy áp lực. Theo lời kể, trước khi đưa ra giải pháp, họ đã không bỏ lỡ cơ hội trêu chọc nạn nhân bằng cách chỉ tay cười lớn. Dù mang màu sắc hài hước, câu chuyện cũng phản ánh một thực tế quen thuộc trong giới vận hành hạ tầng: những lỗi nhỏ nhất thường xảy ra vào lúc con người chủ quan nhất, và áp lực xử lý tại chỗ có thể rất lớn.

Cuối cùng, nhóm kỹ thuật phải nhờ quản lý cho phép tắt đúng máy chủ với lý do ‘urgent maintenance’, hay bảo trì khẩn cấp, để hợp thức hóa việc can thiệp và giải phóng Vince khỏi tình thế khó xử. Chỉ khi quy trình được điều chỉnh phù hợp, anh mới có thể bỏ tay khỏi nút nguồn mà không gây ra gián đoạn ngoài ý muốn. Câu chuyện tuy hài hước nhưng cũng là lời nhắc rõ ràng về tầm quan trọng của nhãn nhận diện thiết bị, quy trình thao tác chuẩn và thiết kế vật lý dễ phân biệt trong hạ tầng CNTT. Trong các hệ thống doanh nghiệp, nơi server và thiết bị lưu trữ liên kết chặt chẽ, một thao tác sai không chỉ là lỗi cá nhân mà còn có thể trở thành rủi ro vận hành nghiêm trọng.