SageMaker Model Monitor
『モデルが本番環境で使用されている間、データの品質や特性の変化を自動的に監視するツール』
- 予期せぬデータの変動や異常をリアルタイムで検知します。
- モデルのパフォーマンスが悪化する前に、問題を特定して迅速に対処できるようになります。
データメトリックス
- 欠損値
- 外れ値
- データの分布
- カテゴリの頻度
これらを定期的にチェックすることで、データの品質や一貫性を保証し、モデルの精度や信頼性を維持することができます。
バイアス検出後のアクション
SageMaker Model Monitorは、バイアス検出に関する詳細な結果を提供しますが、
『ユーザー自身が、バイアスを分析し修正作業は行う』
必要があります。
SageMaker Model Dashboard
『アカウント内のすべてのモデルを一元的に表示・検索・探索することができるビジュアルツール』
リアルタイム追跡
- モデルのデプロイ状況
- パフォーマンス
モニタリング結果
- データ・モデルの品質
- バイアス
- 説明可能性