Một tư vấn viên vô tình xóa hàng loạt dữ liệu, rồi báo thành lỗi hệ thống và thoát nạn

Một chuyên gia tư vấn làm trong lĩnh vực test automation, tức tự động hóa kiểm thử phần mềm bằng kịch bản và công cụ thay cho thao tác thủ công, mới đây đã chia sẻ câu chuyện dở khóc dở cười về một sự cố mất dữ liệu nghiêm trọng. Trong dự án cho khách hàng, người này phải ghi lại bằng chứng kiểm thử dưới dạng video và tải chúng lên công cụ quản lý kiểm thử của phía khách hàng. Mỗi tệp video không quá lớn, nhưng khi số lượng tăng lên khoảng 600 file, việc quản lý và xóa thủ công trở nên chậm chạp, thiếu thực tế.

Để xử lý khối lượng dữ liệu lớn, tư vấn viên này đã viết một script, tức đoạn mã tự động thực hiện một chuỗi tác vụ lặp lại. Vì biết dữ liệu là quan trọng, anh cho biết đã kiểm tra rất kỹ bằng cách dùng breakpoint, một kỹ thuật gỡ lỗi cho phép tạm dừng chương trình tại từng bước để quan sát biến và luồng xử lý. Sau khi rà soát từng dòng lệnh và xác nhận các giá trị có vẻ chính xác, anh cho script thử xóa một file duy nhất đang được theo dõi.

Kết quả lại hoàn toàn khác dự tính. Thay vì chỉ xóa một video, script đã xóa toàn bộ nội dung trong container lưu trữ mà công cụ kiểm thử sử dụng. Trong ngữ cảnh hạ tầng dữ liệu, container có thể hiểu là vùng lưu trữ logic hoặc nơi gom nhóm các đối tượng dữ liệu trong hệ thống cloud hay nền tảng ứng dụng. Điều đáng nói là khu vực này không chỉ chứa video kiểm thử mà còn có nhiều dữ liệu khác. Sự cố xảy ra ngay giữa dự án, khiến tác động trở nên đặc biệt nghiêm trọng.

Dù nghi ngờ nguyên nhân đến từ mình, tư vấn viên này đã không trực tiếp nhận lỗi với khách hàng. Thay vào đó, anh thông báo rằng dữ liệu đã bị mất và tạo support ticket, tức phiếu yêu cầu hỗ trợ kỹ thuật để đội ngũ vận hành hoặc nhà cung cấp vào cuộc điều tra. Cách xử lý này khiến phía khách hàng tin rằng đây là một sự cố ngoài ý muốn của hệ thống hơn là lỗi thao tác cá nhân, nên phản ứng ban đầu tương đối bình tĩnh.

Sau khoảng một tuần trao đổi qua lại, đội hỗ trợ của khách hàng đã khôi phục được dữ liệu từ backup, nghĩa là bản sao lưu được tạo trước đó để phục hồi khi có sự cố. Đây là lớp bảo vệ cốt lõi trong quản trị dữ liệu hiện đại, đặc biệt với các nền tảng SaaS, viết tắt của Software as a Service, tức phần mềm cung cấp qua internet thay vì cài đặt và vận hành hoàn toàn tại chỗ. Bất ngờ hơn, nhóm hỗ trợ cho biết họ không tìm thấy nguyên nhân rõ ràng và cuối cùng tự nhận trách nhiệm, cho rằng một script nội bộ của hệ thống SaaS đã chạy sai và xóa nội dung.

Câu chuyện khép lại theo cách có lợi cho người gây ra sự cố, khi anh không bị quy trách nhiệm và vẫn tiếp tục công việc tư vấn. Tuy nhiên, phía sau chi tiết hài hước này là một bài học quen thuộc nhưng luôn thời sự trong ngành công nghệ: các công cụ tự động hóa có thể tiết kiệm rất nhiều thời gian, nhưng chỉ một lỗi logic nhỏ trong script cũng đủ tạo ra hậu quả trên diện rộng. Việc kiểm thử trong môi trường an toàn, giới hạn phạm vi thao tác xóa, áp dụng quyền truy cập tối thiểu và duy trì backup đáng tin cậy vẫn là những nguyên tắc sống còn để tránh biến một thao tác dọn dẹp thành thảm họa dữ liệu.