Azure MLOps応用

Azure MLでモデル登録時に複数のメトリクス(精度、F1スコア、推論時間)を記録した場合、本番環境へのデプロイ承認時に、これらのメトリクスに基づいた自動チェック(ゲート)を実装するには、どのアプローチが最適か?

A.モデルレジストリのメタデータにしきい値を保存し、Azure Pipelinesの条件付きタスクで自動チェックを実装する← 正解
✓ 正解です。モデルメタデータにしきい値を埋め込み、CI/CDパイプラインで自動検証するアプローチが、再現可能で監査可能なMLOpsプラクティスです。
B.Data Scientistが手動でメトリクスを確認して、スプレッドシートに記録し、承認書を作成する
✗ 手動プロセスは属人的で、スケーラビリティに欠け、監査証跡も不十分。本番環境での信頼性が担保できません。
C.すべてのモデルを自動的にデプロイし、本番での実績で適合性を判断する
✗ 無秩序なデプロイはビジネスリスク。本番での不具合はユーザーに直接影響し、責任体制も不明確になります。
D.Application Insightsのアラートルールでメトリクスを監視し、異常検知したら自動削除する
✗ Application Insightsは本番後の監視ツールで、デプロイ前のゲートには向きません。また、自動削除は過度な対応です。

この問題のポイント

モデルメタデータにしきい値を埋め込み、CI/CDパイプラインで自動検証するアプローチが、再現可能で監査可能なMLOpsプラクティスです。

AI-900:Microsoft Azure AI Fundamentals の問題一覧