模擬試験計算
あるカスタマーサポート企業が、音声認識AIの単語エラー率(WER)を測定しています。参照テキスト(正解)が250単語あり、認識結果との比較で、5単語の挿入エラー、12単語の削除エラー、8単語の置換エラーが発生しました。このモデルのWERは何%ですか?
A.約10.0%← 正解
✓ 正解です。WER = (挿入+削除+置換)÷参照単語数 × 100 = (5+12+8)÷250 × 100 = 25÷250 × 100 = 10.0%です。音声認識の精度は90%ということになります。
B.約12.0%
✗ 誤りです。12.0%は削除エラー(12単語)のみを参照単語数(250)で割った値に近い値ですが、WERは挿入・削除・置換の合計を使って計算します。
C.約25.0%
✗ 誤りです。25.0%は総エラー数(25)を100で割った値ですが、正しくは参照単語数(250)で割る必要があり、25÷250×100=10.0%となります。
D.約100.0%
✗ 計算に根拠がありません。各エラータイプの合計(5+12+8=25)を参照単語数(250)で割ると10.0%になります。
この問題のポイント
WER = (挿入+削除+置換)÷参照単語数 × 100 = (5+12+8)÷250 × 100 = 25÷250 × 100 = 10.0%です。音声認識の精度は90%ということになります。
「模擬試験」の他の問題
ある保険会社が「過去の請求データから詐欺請求かどうかを予測するモデル」を構築したい。最適なMLタスクはどれか?電力会社が「スマートメーターのデータから需要急増の1時間前に警告を出したい」に最適なアプローチはどれか?小売業者が「商品説明テキストを50言語に翻訳してECサイトに表示したい」に最適なAzureサービスはどれか?病院が「X線画像のPDFレポートから患者名・検査日・所見のテキストを構造化して抽出したい」に最適なAzureサービスはど…航空会社が「問い合わせの音声通話を自動でテキスト化し、感情スコアと要約を付けてCRMに記録するシステム」を構築したい。必…「会社のSlackに投稿されたメッセージから、メンション・日時・プロジェクト名を自動で抽出して課題管理ツールに連携したい…
IT・クラウド の関連資格
AWS Certified Cloud Practitioner(CLF-C02)
AWSクラウドの入門資格。クラウドの概念・AWSのコアサービス・セキュリティ・料金モデルを問う。
AWS Certified Solutions Architect - Associate(SAA-C03)
AWSでのシステム設計能力を問うアソシエイト資格。高可用性・セキュリティ・コスト最適化の設計が中心。
DP-900:Microsoft Azure Data Fundamentals
Azureのデータサービスの基礎を問うMicrosoft認定資格。リレーショナル/非リレーショナルデータ、分析ワークロード、コアのデータ概念を扱う。