機械学習の評価定義問題
AUC-ROCスコアが0.5のモデルはどのような状態を示すか?
A.完璧な分類性能
✗ AUC=1.0が完璧な分類。0.5は最悪のケース(ランダム以下もある)。
B.ランダム予測と同等で実用的な識別能力がない← 正解
✓ 正解。AUC=0.5はROC曲線が対角線上にあるランダム予測と同等の状態。モデルの見直しが必要。
C.高い適合率(Precision)を持つ
✗ AUCはPrecisionを直接示す指標ではなく、TP率とFP率のトレードオフ全体を評価する。
D.大量のデータで訓練された証拠
✗ データ量と性能は直接関係しない。適切なデータで学習できていないと0.5になりうる。
「機械学習の評価」の他の問題
IT・クラウド の関連資格
AWS Certified Cloud Practitioner(CLF-C02)
AWSクラウドの入門資格。クラウドの概念・AWSのコアサービス・セキュリティ・料金モデルを問う。
AWS Certified Solutions Architect - Associate(SAA-C03)
AWSでのシステム設計能力を問うアソシエイト資格。高可用性・セキュリティ・コスト最適化の設計が中心。
DP-900:Microsoft Azure Data Fundamentals
Azureのデータサービスの基礎を問うMicrosoft認定資格。リレーショナル/非リレーショナルデータ、分析ワークロード、コアのデータ概念を扱う。