Đường cong ROC và chỉ số AUC là gì?

Bộ phân loại xác suất cần một ngưỡng để biến xác suất thành nhãn 0/1. ROC curve vẽ quan hệ giữa hai đại lượng khi quét ngưỡng từ 0 đến 1:

• Trục tung: TPR = Recall = TP / (TP + FN).
• Trục hoành: FPR = FP / (FP + TN).

AUC là diện tích dưới đường ROC. Diễn giải trực quan: AUC là xác suất mô hình chấm điểm một mẫu dương ngẫu nhiên cao hơn một mẫu âm ngẫu nhiên. Thang giá trị: AUC = 1 là hoàn hảo, 0.5 là đoán mò (đường chéo), dưới 0.5 là tệ hơn ngẫu nhiên (có thể do đảo nhãn).

Ưu điểm: độc lập với ngưỡng và không phụ thuộc tỷ lệ lớp cụ thể. Lưu ý: khi dữ liệu lệch lớp nặng, ROC-AUC có thể lạc quan quá mức — nên xem thêm Precision-Recall AUC vì nó nhạy hơn với hiệu năng ở lớp thiểu số.