Xử lý sự cố hệ thống trong 30 phút đầu: phân vai, kênh liên lạc và thông báo khách hàng

Phòng điều hành xử lý sự cố hệ thống trong 30 phút đầu

Bạn đang tham khảo tổng đài?
Giải pháp tổng đài chia nhánh Cloud hiện đại - FPT CloudPBX | Tìm hiểu ngay

Share this story

Khi hệ thống gặp sự cố, thời gian đầu thường bị lãng phí vì nhiều người cùng điều tra một việc, không ai thông báo cho khách hàng, hoặc mỗi người thử một cách khác nhau và làm tình hình tệ hơn. Một quy trình ngắn cho 30 phút đầu với vai trò rõ ràng, một kênh liên lạc chung và các mẫu thông báo có sẵn giúp rút ngắn thời gian phát hiện, giảm thiểu và khôi phục.

Phút 0–5: xác nhận và phân loại

  • Xác nhận sự cố thật: đối chiếu nhiều nguồn như giám sát, khách hàng báo, kiểm tra thủ công; tránh báo động nhầm.
  • Gán mức độ theo tác động, không theo cảm tính (xem bảng bên dưới).
  • Chỉ định người chỉ huy sự cố ngay từ đầu.
MứcVí dụ tác độngHành động
Nghiêm trọngDịch vụ chính ngừng hoàn toàn, mất dữ liệu, ảnh hưởng nhiều khách hàngHuy động ngay, thông báo lãnh đạo và khách hàng
CaoChức năng quan trọng suy giảm nặngHuy động đội liên quan, cập nhật định kỳ
Trung bìnhMột phần người dùng bị ảnh hưởng, có cách tạm thờiXử lý trong giờ làm việc, theo dõi

Bảng chỉ là khung tham khảo; mỗi doanh nghiệp nên tự định nghĩa theo hệ thống và cam kết với khách hàng của mình.

Các vai trò cần có

Vai tròNhiệm vụ
Người chỉ huyĐiều phối, quyết định hướng xử lý, không tự đi sâu vào kỹ thuật
Người xử lý kỹ thuậtĐiều tra và thực hiện thao tác khắc phục, báo cáo từng bước cho người chỉ huy
Người liên lạcCập nhật nội bộ và khách hàng, gom câu hỏi để kỹ thuật không bị ngắt quãng
Người ghi chépGhi lại dòng thời gian: ai làm gì, lúc nào, kết quả

Đội nhỏ có thể một người kiêm nhiều vai, nhưng riêng vai người chỉ huy và người liên lạc nên tách khỏi người đang gõ lệnh. Xem thêm về lịch trực ở giám sát và trực sự cố cho đội nhỏ.

Phút 5–10: lập kênh liên lạc duy nhất

  • Một nhóm trò chuyện hoặc cuộc gọi chung dành riêng cho sự cố; mọi thông tin quan trọng đi qua đây.
  • Ghi mức độ, thời điểm bắt đầu và người chỉ huy vào đầu kênh.
  • Ghim bản cập nhật mới nhất để người vào sau không phải hỏi lại.

Phút 10–20: ưu tiên giảm thiểu, chưa cần tìm nguyên nhân gốc

Mục tiêu đầu tiên là đưa dịch vụ hoạt động lại hoặc giảm tác động, không phải hiểu hết nguyên nhân. Các hành động giảm thiểu thường dùng:

Nguyên tắc: mỗi lần chỉ thay đổi một thứ và ghi lại, để biết thay đổi nào có tác dụng. Sau khi dịch vụ ổn định mới đi vào nguyên nhân gốc, xem báo cáo hậu sự cố không đổ lỗi.

Phút 20–30: thông báo và cập nhật

Nên thông báo sớm và trung thực, kể cả khi chưa biết nguyên nhân. Một thông báo tốt có ba phần: điều gì đang xảy ra, ai bị ảnh hưởng, khi nào sẽ cập nhật tiếp.

  • Nội bộ: “Hệ thống [tên] đang gặp sự cố từ [giờ]. Mức độ: [mức]. Người chỉ huy: [tên]. Cập nhật tiếp theo lúc [giờ].”
  • Khách hàng: “Chúng tôi đang ghi nhận [mô tả ảnh hưởng] trên [dịch vụ]. Đội kỹ thuật đang xử lý. Chúng tôi sẽ cập nhật lúc [giờ].”

Không hứa thời gian khôi phục khi chưa có cơ sở, không đổ lỗi cho bên thứ ba khi chưa xác minh, và không đưa chi tiết kỹ thuật nhạy cảm hoặc dữ liệu cá nhân. Với sự cố liên quan dữ liệu cá nhân hoặc an ninh mạng, cần theo quy trình riêng và xin ý kiến pháp chế, xem quy trình ứng phó sự cố an ninh mạng (bài này không phải tư vấn pháp lý).

Chuẩn bị trước để 30 phút đầu hiệu quả

Công cụ hỗ trợ xử lý sự cố trên FPT Cloud

Doanh nghiệp có thể kết hợp giám sát, cảnh báo và quản lý sự cố để rút ngắn thời gian phát hiện và phối hợp xử lý. Xem quản lý sự cố thông minh. Phạm vi dịch vụ và cách tích hợp cần được FPT tư vấn theo hệ thống của bạn.

Muốn xây quy trình xử lý sự cố cho đội vận hành

Mô tả hệ thống và đội vận hành để được tư vấn giám sát, cảnh báo và quy trình phù hợp.

Đăng ký tư vấn

Câu hỏi thường gặp

Vì sao nên giảm thiểu trước, tìm nguyên nhân sau

Vì mỗi phút gián đoạn gây thiệt hại. Đưa dịch vụ hoạt động lại bằng cách quay lại hoặc tắt tính năng lỗi trước, sau đó mới điều tra gốc rễ khi tình hình ổn định.

Đội IT chỉ có 2 người thì phân vai thế nào

Một người xử lý kỹ thuật, một người vừa chỉ huy vừa liên lạc và ghi chép. Quan trọng là không để người đang xử lý kỹ thuật phải trả lời mọi câu hỏi.

Có nên thông báo khách hàng khi chưa rõ nguyên nhân

Nên, nếu sự cố ảnh hưởng đến họ. Nói rõ điều đang xảy ra và thời điểm cập nhật tiếp, không cần nêu nguyên nhân khi chưa chắc chắn.

Bao lâu nên cập nhật một lần

Theo mức độ: sự cố nghiêm trọng thường cập nhật định kỳ vài chục phút một lần, kể cả khi chưa có tiến triển, để người nhận biết đội vẫn đang xử lý.

Mức độ sự cố nên do ai quyết định

Người chỉ huy sự cố quyết định dựa trên tiêu chí đã thống nhất trước, và có thể nâng hoặc hạ mức khi có thêm thông tin.

Quy trình này có áp dụng cho sự cố bảo mật không

Có thể dùng làm khung chung, nhưng sự cố bảo mật cần thêm các bước thu thập bằng chứng, cô lập và nghĩa vụ báo cáo. Cần quy trình và ý kiến pháp chế riêng.

Did you know?
Contact Center AI is easy to do with FPT - Get the AI Starter Kit

Hạ tầng FPT Cloud cho doanh nghiệp

FPT Cloud cung cấp hạ tầng Public Cloud đặt tại Việt Nam cho doanh nghiệp, gồm Cloud Server, Kubernetes, cơ sở dữ liệu dạng dịch vụ (DBaaS), hạ tầng GPU cho AI, cùng các dịch vụ sao lưu, dự phòng thảm họa, cân bằng tải và tự co giãn. Hạ tầng áp dụng các chuẩn an toàn thông tin như ISO/IEC 27001 và PCI DSS, giúp doanh nghiệp chuẩn bị cho kiểm toán và yêu cầu của đối tác. Cấu hình, mô hình tính phí và phương án triển khai được FPT tư vấn theo từng hệ thống.

Tìm hiểu dịch vụ Cloud Server FPT · Đăng ký tư vấn

Nền tảng Contact Center toàn diện FPT OncallCX

Chăm sóc khách hàng toàn diện, đa kênh với
công nghệ AI
Giải pháp tổng đài Cloud FPT

separator

Tìm hiểu ngay