模擬試験計算
ある金融機関が不正検出AIモデルの性能を評価しています。テストデータセット(10,000件)に対して、モデルが不正と予測したもの1,200件のうち実際に不正だったのは960件でした。このモデルの精度(Precision)はいくつですか?
A.約8.0%
✗ この値は精度とは関係ありません。真陽性を真陽性+偽陽性で割る必要があります。
B.約80.0%← 正解
✓ 正解です。精度(Precision)= 真陽性÷(真陽性+偽陽性)= 960÷1,200 = 0.8 = 80.0%です。モデルが不正と判定した場合、実際に不正である確率が80%ということです。
C.約96.0%
✗ この値はテストセット全体における不正の割合に近い値ですが、精度の計算方法が異なります。
D.約120.0%
✗ 精度は100%を超える値にはなりません。計算方法を見直してください。
この問題のポイント
精度(Precision)= 真陽性÷(真陽性+偽陽性)= 960÷1,200 = 0.8 = 80.0%です。モデルが不正と判定した場合、実際に不正である確率が80%ということです。
「模擬試験」の他の問題
ある保険会社が「過去の請求データから詐欺請求かどうかを予測するモデル」を構築したい。最適なMLタスクはどれか?電力会社が「スマートメーターのデータから需要急増の1時間前に警告を出したい」に最適なアプローチはどれか?小売業者が「商品説明テキストを50言語に翻訳してECサイトに表示したい」に最適なAzureサービスはどれか?病院が「X線画像のPDFレポートから患者名・検査日・所見のテキストを構造化して抽出したい」に最適なAzureサービスはど…航空会社が「問い合わせの音声通話を自動でテキスト化し、感情スコアと要約を付けてCRMに記録するシステム」を構築したい。必…「会社のSlackに投稿されたメッセージから、メンション・日時・プロジェクト名を自動で抽出して課題管理ツールに連携したい…
IT・クラウド の関連資格
AWS Certified Cloud Practitioner(CLF-C02)
AWSクラウドの入門資格。クラウドの概念・AWSのコアサービス・セキュリティ・料金モデルを問う。
AWS Certified Solutions Architect - Associate(SAA-C03)
AWSでのシステム設計能力を問うアソシエイト資格。高可用性・セキュリティ・コスト最適化の設計が中心。
DP-900:Microsoft Azure Data Fundamentals
Azureのデータサービスの基礎を問うMicrosoft認定資格。リレーショナル/非リレーショナルデータ、分析ワークロード、コアのデータ概念を扱う。