AIF-C01#12(responsible-ai)
ある企業が顧客セグメンテーション用の生成AIモデルを開発しました。このモデルは長期間、本番環境で運用されています。最近、会社はモデルの回答に不整合があることに気づきました。会社はモデルのバイアス（偏り）とドリフト（経時的な変化）を評価したいと考えています。 この要件を満たすAWSのサービスまたは機能はどれですか？
正解：A
正解の根拠
Amazon SageMaker Model Monitor は本番環境のモデルの品質を継続的に監視し、データドリフト・モデル品質ドリフト・バイアスドリフト・特徴量寄与ドリフトの 4 種を検出できます。長期運用中の生成 AI モデルで応答に不整合が現れた場合、データ分布や予測動向の経時変化を CloudWatch アラームと連携して検出可能で、本問の「バイアスとドリフト評価」要件に最も適合します。
SageMaker 関連機能
| 機能 | 役割 |
|---|---|
| Model Monitor | 本番モデルのドリフト/バイアス監視 |
| Clarify | 訓練時のバイアス分析と説明 |
| Model Cards | モデル文書の標準化 |
| Feature Store | 特徴量の共有管理 |
不正解の理由
- B: Clarify は主に訓練データやモデルのバイアス検証と説明を担う機能で、本番運用中の継続的ドリフト監視には Model Monitor が標準です。
- C: Model Cards はモデルの文書化フレームワークで、バイアスや経時変化を計測する機能ではありません。
- D: Feature Store は特徴量の集中管理基盤で、本番モデルのドリフト検出機能は提供していません。
コメント