機械学習の評価定義問題

AUC-ROCスコアが0.5のモデルはどのような状態を示すか?

A.完璧な分類性能
✗ AUC=1.0が完璧な分類。0.5は最悪のケース(ランダム以下もある)。
B.ランダム予測と同等で実用的な識別能力がない← 正解
✓ 正解。AUC=0.5はROC曲線が対角線上にあるランダム予測と同等の状態。モデルの見直しが必要。
C.高い適合率(Precision)を持つ
✗ AUCはPrecisionを直接示す指標ではなく、TP率とFP率のトレードオフ全体を評価する。
D.大量のデータで訓練された証拠
✗ データ量と性能は直接関係しない。適切なデータで学習できていないと0.5になりうる。

AI-900:Microsoft Azure AI Fundamentals の問題一覧