ファイナル確認応用
Azure OpenAI ServiceでRAG(Retrieval-Augmented Generation)を実装し、社内ナレッジベースから最関連性の高いドキュメントを取得して回答生成を行うシステムがあります。ユーザーの質問に対して不正確な回答が返される場合、最初に調査すべき項目はどれか。
A.GPT-4のモデルバージョンを最新にアップグレードすれば、自動的に精度が向上する
✗ モデルアップグレードは有効な場合もありますが、RAGシステムの不正確さの原因は多くの場合、検索品質にあります。
B.検索ロジック(埋め込みモデル、スコアリング、取得ドキュメント数など)と、実際に取得されているドキュメントの関連性を確認する← 正解
✓ 正解です。RAGでは検索ステップが回答品質を大きく左右するため、埋め込みモデルや取得ドキュメントの関連性を最初に検証すべきです。
C.プロンプトを複雑にして、より詳細な指示を加えれば、精度が向上する
✗ 不正確な情報源を検索している場合、プロンプト調整だけでは問題を解決できません。
D.ナレッジベース全体を削除し、新しい内容で完全に置き換える必要がある
✗ ナレッジベースの完全置換は、既存の有効なドキュメントを失う危険があり、段階的改善が推奨されます。
この問題のポイント
RAGでは検索ステップが回答品質を大きく左右するため、埋め込みモデルや取得ドキュメントの関連性を最初に検証すべきです。
「ファイナル確認」の他の問題
次の記述のうち「誤り」を含むものはどれか。「Azure AI Servicesはクラウドのみで動作するため、オンプレミス…Copilot for Microsoft 365がMicrosoft Graphを利用する主な理由はどれか?「GitHub Copilot」と「Microsoft Copilot(旧Bing Chat)」の主な違いはどれか?責任あるAIの観点から「AIが生成した画像をSNSに投稿する際」に推奨される対応はどれか?Azure Cognitive Servicesの利用において、画像分析APIを月間45,000回の呼び出しで使用した場…機械学習モデルのトレーニングにおいて、データセット全体が80,000レコードで、トレーニング:検証:テストの分割比が60…
IT・クラウド の関連資格
AWS Certified Cloud Practitioner(CLF-C02)
AWSクラウドの入門資格。クラウドの概念・AWSのコアサービス・セキュリティ・料金モデルを問う。
AWS Certified Solutions Architect - Associate(SAA-C03)
AWSでのシステム設計能力を問うアソシエイト資格。高可用性・セキュリティ・コスト最適化の設計が中心。
DP-900:Microsoft Azure Data Fundamentals
Azureのデータサービスの基礎を問うMicrosoft認定資格。リレーショナル/非リレーショナルデータ、分析ワークロード、コアのデータ概念を扱う。