Bài viết liên quan
Quản trị rủi ro
Leo thang sự cố
Escalation
Leo thang sự cố (Escalation) là quy trình chuyển giao xử lý sự cố từ mức độ/cấp thấp lên mức độ/cấp cao hơn khi vượt quá khả năng, thẩm quyền hoặc thời gian SLA cho phép. Trong ngân hàng, đây là cơ chế bắt buộc để đảm bảo sự cố CNTT được ưu tiên xử lý kịp thời, đặc biệt với hệ thống quan trọng theo Quyết định 2345/QĐ-NHNN năm 2023 về hệ thống thông tin cốt lõi.
Leo thang sự cố trong ngân hàng là gì?
Escalation là một trong những nguyên tắc quan trọng nhất của quản lý sự cố, đảm bảo rằng vấn đề được chuyển đến đúng người có đủ năng lực và thẩm quyền xử lý. Theo Thông tư 31/2017/TT-NHNN Điều 16, các TCTD phải xây dựng quy trình leo thang rõ ràng với phân cấp trách nhiệm cụ thể từng cấp, đồng thời quy định thời điểm kích hoạt leo thang khi sự cố không được giải quyết theo SLA.
Hai hình thức leo thang
- Functional Escalation (Leo thang chức năng): Chuyển sang bộ phận chuyên môn cao hơn. Ví dụ: Helpdesk L1 → L2 Application → L3 System Engineer → Vendor (Oracle, IBM). Trong ngân hàng, sự cố core banking T24 của Temenos sẽ được escalate đến vendor nước ngoài qua hợp đồng support 24/7.
- Hierarchical Escalation (Leo thang cấp quản lý): Chuyển lên cấp quản lý có thẩm quyền quyết định. Ví dụ: Team Lead → Trưởng phòng IT → Giám đốc CNTT → Ban Giám đốc → Báo cáo NHNN trong 24h với sự cố nghiêm trọng.
Ma trận leo thang tiêu chuẩn
- Sev1 - Hệ thống core ngừng: L1 xử lý 15 phút → L2 (30 phút) → L3 (1 giờ) → CIO (2 giờ) → CEO + báo cáo NHNN (24 giờ).
- Sev2 - Ảnh hưởng một phần: L1 → L2 trong 1 giờ → Trưởng phòng trong 4 giờ.
- Sev3 - Không ảnh hưởng giao dịch: L1 xử lý trong 4 giờ, escalate L2 nếu quá 8 giờ.
- Sev4: Xử lý trong 24-72 giờ, không cần leo thang quản lý.
Kích hoạt leo thang tự động
Nhiều ngân hàng triển khai hệ thống ITSM (ServiceNow, BMC Remedy) với workflow tự động: khi ticket vượt 50% thời gian SLA, hệ thống tự động gửi cảnh báo qua email/SMS/Teams đến cấp cao hơn. Ví dụ: Ticket Sev1 mở lúc 9:00, đến 9:30 nếu chưa có cập nhật, hệ thống tự động SMS cho Trưởng phòng Vận hành và CIO on-call.
Ví dụ thực tế
Sự cố sập sàn HOSE ngày 22/06/2020 và 01/03/2021 hệ thống giao dịch chứng khoán mới khôi phục: đây là bài học điển hình về thiếu quy trình leo thang kịp thời. Ngược lại, ngân hàng Vietcombank khi sự cố data center 2018 đã kích hoạt leo thang đúng quy trình trong 20 phút, kích hoạt site DR (Disaster Recovery) tại Hà Nội trong 2 giờ, hạn chế thiệt hại.