Khung giải thích được
Khung Giải thích được (XAI Framework) là một tập hợp các công cụ, phương pháp luận và thuật toán được thiết kế để làm cho các quyết định và dự đoán của các mô hình học máy phức tạp trở nên dễ hiểu đối với người dùng con người. Không giống như các mô hình 'hộp đen' mà lý do suy luận là không minh bạch, một khung XAI cung cấp những hiểu biết sâu sắc về lý do tại sao một mô hình lại đưa ra một kết quả cụ thể.
Trong các ngành được quản lý (như tài chính và chăm sóc sức khỏe) và các môi trường kinh doanh có rủi ro cao, việc chỉ có một dự đoán chính xác là không đủ. Các bên liên quan—bao gồm các cơ quan quản lý, người dùng cuối và các nhà lãnh đạo doanh nghiệp—phải hiểu được cơ sở lý luận. Các khung XAI xây dựng lòng tin, đảm bảo tuân thủ và cho phép gỡ lỗi cũng như phát hiện sai lệch một cách hiệu quả.
Các khung này thường hoạt động bằng cách áp dụng phân tích hậu nghiệm (post-hoc analysis) hoặc bằng cách thiết kế các mô hình vốn đã có khả năng diễn giải. Các phương pháp hậu nghiệm, chẳng hạn như LIME (Local Interpretable Model-agnostic Explanations) hoặc SHAP (SHapley Additive exPlanations), thăm dò một mô hình phức tạp để xấp xỉ hành vi của nó ở cấp độ cục bộ, cho thấy những đặc trưng đầu vào nào đã đóng góp nhiều nhất vào một dự đoán duy nhất. Ngược lại, các mô hình có khả năng diễn giải vốn có được thiết kế ngay từ đầu để minh bạch (ví dụ: cây quyết định).
Thách thức chính là sự đánh đổi giữa độ chính xác và khả năng diễn giải. Các mô hình cực kỳ phức tạp (như mạng nơ-ron sâu) thường mang lại sức mạnh dự đoán cao nhất nhưng lại khó giải thích nhất. Hơn nữa, việc tạo ra các giải thích có thể tốn kém về mặt tính toán.
Các khái niệm liên quan bao gồm Khả năng diễn giải Mô hình (Model Interpretability), Sự công bằng trong AI (Fairness in AI), Tính mạnh mẽ đối nghịch (Adversarial Robustness) và Quản trị AI (AI Governance).