機械学習の評価誤り発見
回帰モデルの評価指標に関する以下の記述で、誤っているものはどれか?
A.MAE(平均絶対誤差)は、予測値と実際値の差の絶対値の平均であり、外れ値の影響を受けにくいロバストな指標である。
✓ この記述は正しい。MAEは絶対値を使うため外れ値の影響を受けにくく、RMSEに比べてロバストな指標である。
B.RMSE(二乗平均平方根誤差)は、誤差の二乗を使用するため、大きな誤差に対してより敏感に反応する。
✓ この記述は正しい。RMSEは誤差を二乗するため、大きな誤差に対して厳しく評価する。
C.R²(決定係数)は0から1の値を取り、モデルがターゲット変数の分散をどの程度説明できるかを示す。
✓ この記述は正しい。R²は0~1の範囲で、モデルの説明力を示す重要な指標である。
D.MSE(平均二乗誤差)は負の値を取ることがあるため、スケーリングなしでモデル間の比較に使用できない。← 正解
✓ 正解です。この記述が誤りで、MSE(平均二乗誤差)は二乗した値の平均であるため、常に非負(0以上)である。負の値を取ることはない。
この問題のポイント
この記述が誤りで、MSE(平均二乗誤差)は二乗した値の平均であるため、常に非負(0以上)である。負の値を取ることはない。
「機械学習の評価」の他の問題
スパムフィルターで「正常メールを誤ってスパムと判定する(誤検知)」を極力防ぎたい場合に最優先すべき指標はどれか?AUC-ROCスコアが0.5のモデルはどのような状態を示すか?回帰モデルの評価指標として「予測値と実際値の差の二乗の平均の平方根」を計算するものはどれか?不均衡データ(陽性99%・陰性1%)において「精度(Accuracy)だけが高い(99%)」モデルの問題点はどれか?分類モデルの評価において、適合率(Precision)と再現率(Recall)の違いとして最も正確なものはどれか?医療診断モデルで「疾患有りと予測したが実際は無い(偽陽性)」を減らしたい場合と、「疾患有りを見落とす(偽陰性)」を減らし…
IT・クラウド の関連資格
AWS Certified Cloud Practitioner(CLF-C02)
AWSクラウドの入門資格。クラウドの概念・AWSのコアサービス・セキュリティ・料金モデルを問う。
AWS Certified Solutions Architect - Associate(SAA-C03)
AWSでのシステム設計能力を問うアソシエイト資格。高可用性・セキュリティ・コスト最適化の設計が中心。
DP-900:Microsoft Azure Data Fundamentals
Azureのデータサービスの基礎を問うMicrosoft認定資格。リレーショナル/非リレーショナルデータ、分析ワークロード、コアのデータ概念を扱う。