Phân tích nguyên nhân gốc là gì?

Question

Accepted Answer

Phân tích nguyên nhân gốc (Root Cause Analysis - RCA) là phương pháp có hệ thống nhằm xác định nguyên nhân sâu xa thực sự của sự cố, từ đó đề xuất biện pháp khắc phục triệt để để ngăn ngừa tái diễn. Trong ngân hàng, RCA là yêu cầu bắt buộc sau sự cố nghiêm trọng theo Thông tư 31/2017/TT-NHNN và là cơ sở để cập nhật kế hoạch ứng phó sự cố, kế hoạch liên tục kinh doanh (BCP).

Các phương pháp RCA phổ biến

5 Whys (5 Tại sao): Phương pháp của Toyota, hỏi 'tại sao' 5 lần liên tiếp để đào sâu đến nguyên nhân gốc. Phù hợp sự cố đơn giản, một nhánh nguyên nhân.
Fishbone Diagram (Ishikawa): Phân tích theo 6 nhóm: Con người (Man), Máy móc (Machine), Phương pháp (Method), Vật liệu (Material), Đo lường (Measurement), Môi trường (Environment - 6M). Phù hợp sự cố phức tạp, nhiều nguyên nhân.
Fault Tree Analysis (FTA): Phân tích cây lỗi dạng Boolean logic, kết hợp xác suất. Áp dụng cho hệ thống core banking, ATM.
Kepner-Tregoe: Phân tích theo 4 bước: Tình huống, Vấn đề, Quyết định, Rủi ro tiềm ẩn. Phù hợp sự cố liên quan quy trình nghiệp vụ.

Quy trình RCA chuẩn

Bước 1: Thu thập dữ liệu từ log hệ thống, giám sát, lời khai nhân viên, camera, audit trail.
Bước 2: Xác định timeline sự kiện với mốc thời gian chính xác từng phút.
Bước 3: Phân biệt nguyên nhân trực tiếp (proximate cause) và nguyên nhân gốc (root cause).
Bước 4: Áp dụng phương pháp RCA phù hợp để phân tích.
Bước 5: Xác định biện pháp khắc phục (corrective) và phòng ngừa (preventive).
Bước 6: Lập báo cáo RCA trình Ban Giám đốc và NHNN trong 15-30 ngày tùy mức độ.

Phân biệt các loại nguyên nhân

Nguyên nhân trực tiếp: Ví dụ 'Server quá tải CPU 100%'.
Nguyên nhân gốc: 'Không có cơ chế auto-scaling do thiếu đầu tư hạ tầng cloud'.
Contributing factors: Yếu tố góp phần như không có giám sát cảnh báo sớm, quy trình thay đổi (Change Management) yếu.

Ví dụ thực tế tại ngân hàng

Sự cố sập hệ thống Internet Banking ngân hàng X ngày 15/03/2023: Nguyên nhân trực tiếp là database connection pool cạn kiệt. Áp dụng 5 Whys: (1) Sao pool cạn kiệt? → Quá nhiều query treo. (2) Sao query treo? → Thiếu index trên bảng giao dịch. (3) Sao thiếu index? → Bảng mới triển khai tháng 2 chưa được DBA review. (4) Sao chưa review? → Quy trình Change Management bỏ qua bước performance test. (5) Sao bỏ qua? → Áp lực go-live đúng hạn từ Phòng Kinh doanh. Nguyên nhân gốc: Quy trình quản lý thay đổi chưa có cơ chế enforce bắt buộc từ Ban IT. Hành động khắc phục: Cập nhật SOP Change Management, bổ sung Performance Testing checklist, phân bổ trách nhiệm giữa Kinh doanh và CNTT.