Bỏ qua menu, vào nội dung chính

Cách handle khủng hoảng IT - Down, Hack, Data loss step-by-step

Khủng hoảng IT (server down, hack, data loss) sẽ xảy ra với mọi doanh nghiệp đủ lâu. CEO không hoảng = giảm 50% damage. Bài này là playbook 3 scenario + 4 phase response: detect, contain, recover, learn.

Cập nhật 25/09/20268 phút đọc

Tại sao playbook quan trọng

Khủng hoảng IT trung bình cost SME 50-500tr per incident. Doanh nghiệp có playbook → contain nhanh, damage thấp. Không playbook → CEO panic + delegate sai → damage gấp 3-5 lần.

Scenario 1: Server down

Detect (0-5 phút)

  • Monitoring alert (UptimeRobot, Pingdom): website không respond.
  • Customer report qua Zalo/email.
  • Internal team báo lỗi.

Contain (5-30 phút)

  • Verify thật sự down hay individual user issue.
  • Check status page hosting provider (Cloudflare, AWS, Vercel).
  • Engage technical team - IT manager hoặc vendor on-call.
  • Communicate: post update trên social + status page "Đang xử lý sự cố".

Recover (30 phút - 4 giờ)

  • Vendor/internal team troubleshoot + fix.
  • Restart service nếu cần.
  • Restore from backup nếu data lost.
  • Verify all services back up.
  • Communicate "đã khôi phục" + apologize.

Learn (1-7 ngày sau)

Post-mortem meeting: root cause + prevention. Update monitoring + alert + runbook.

Buổi post-mortem chỉ tìm ra nguyên nhân khi hệ thống ghi log đủ ngữ cảnh; cách ghi log có cấu trúc được hướng dẫn cho lập trình viên trên blog của founder ALODEV.

Scenario 2: Hack/ransomware

Detect

  • Ransomware: file encrypted, demand payment.
  • Data breach: external report (security researcher, user).
  • Unusual login/access: monitoring alert.

Contain

  • Isolate affected systems - disconnect network.
  • Preserve evidence (don't reboot, không delete log).
  • Engage security team / company external.
  • Notify law enforcement nếu serious.
  • Communicate cẩn thận - không panic public yet.

Recover

  • Restore from clean backup (đảm bảo backup không bị compromise).
  • Reset all credentials (password, API keys, certificates).
  • Patch vulnerability that allowed breach.
  • Verify clean trước khi back online.

Luật Bảo vệ dữ liệu cá nhân 2025

Nếu data lộ + có dữ liệu cá nhân → báo cơ quan chuyên trách bảo vệ dữ liệu cá nhân (Bộ Công an) chậm nhất 72 giờ kể từ khi phát hiện, lập biên bản xác nhận (Điều 23 Luật 91/2025/QH15) + thông báo user bị ảnh hưởng. Không báo đúng hạn là vi phạm Điều 23.

Điều 23 Luật Bảo vệ dữ liệu cá nhân số 91/2025/QH15 về thông báo vi phạm trong 72 giờ
Điều 23: vi phạm có thể gây tổn hại tới chủ thể dữ liệu phải báo cơ quan chuyên trách bảo vệ dữ liệu cá nhân chậm nhất 72 giờ kể từ khi phát hiện. Trích Luật Bảo vệ dữ liệu cá nhân số 91/2025/QH15, Công báo số 971 + 972 ngày 24/7/2025, bản PDF trên congbao.chinhphu.vn, tra ngày 25/09/2026.

Scenario 3: Data loss

Causes: lỗi nhân viên xoá nhầm, hardware failure, ransomware, database corruption.

Recovery priority

  • Recent backup: restore.
  • Point-in-time recovery (cloud DB): rollback time T-X.
  • Reconstruct từ source: email logs, audit trail, customer records ngoài.
  • Accept data loss: post-X cannot recover, communicate to user.

Playbook templating cho doanh nghiệp

Doanh nghiệp viết playbook 5-10 trang trước:

  • Contact list: CTO, IT manager, vendor on-call, lawyer, PR.
  • Severity matrix: P0 (full down), P1 (partial), P2 (degraded), P3 (minor).
  • Response time SLA per severity.
  • Communication template (internal, customer, public).
  • Recovery procedure step-by-step.
  • Post-mortem template.

Practice drill 1-2 lần/năm

Tabletop exercise: scenario giả lập, team chạy playbook. Phát hiện gap → update playbook. Real drill (cố ý down 1 server) cho team experience.

Doanh nghiệp cần playbook + drill IT crisis? Alodev gói consulting 25-60tr cho 8-12 tuần. /lien-he

Quản trị công nghệ cho lãnh đạo12 phút đọc

Vì sao chuyển đổi số thường thất bại: số liệu thật và cách tránh cho doanh nghiệp vừa và nhỏ

Theo khảo sát của BCG với 825 lãnh đạo doanh nghiệp, chỉ 30% các dự án chuyển đổi số đạt được mục tiêu đề ra. Bài phân tích nguyên nhân chính không nằm ở công nghệ mà ở con người và cách tổ chức triển khai, kèm những việc nên làm để tăng khả năng thành công cho doanh nghiệp vừa và nhỏ.

Quản trị công nghệ cho lãnh đạo12 phút đọc

Thiết kế website tại Hà Nội: cách chọn đơn vị và những gì cần kiểm trước khi ký

Tìm đơn vị thiết kế website tại Hà Nội không khó, chọn đúng mới khó. Bài viết chỉ ra khi nào làm việc trực tiếp cùng thành phố thực sự có lợi, cách kiểm pháp lý và năng lực một đơn vị trong vài chục phút, thủ tục website doanh nghiệp cần biết, và thông tin liên hệ thật của ALODEV tại Hoàng Mai.

Quản trị công nghệ cho lãnh đạo9 phút đọc

API là gì, vì sao doanh nghiệp cần hiểu API khi thuê phần mềm

Không cần biết code, nhưng người quyết định thuê phần mềm nên hiểu API đủ để tránh bị khoá chặt vào một vendor, hoặc phát hiện quá muộn rằng hệ thống mới không nói chuyện được với hệ thống cũ. Góc nhìn cho người ra quyết định, không phải bài học kỹ thuật.

Nhận bài mới

Để lại email để nhận bài mới của series Quản trị công nghệ cho lãnh đạo, hoặc theo dõi bằng RSS.

RSS Quản trị công nghệ cho lãnh đạo

Email chỉ dùng để gửi bài mới, xem Chính sách bảo mật.

Trao đổi về dự án

Cần tư vấn?