Monitor Model Drift

Evidently AI、統計テスト(PSI、KS)、カスタムメトリクスを使用した包括的なモデル ドリフトモニタリングの実装。本番MLシステムのデータドリフトとコンセプトドリフトを 検出する。ビジネスメトリクスに影響する前に劣化を検出するための自動アラートと レポートワークフローを設定する。本番モデルが原因不明のパフォーマンス劣化を示す 時、新しいデータ分布がトレーニングデータと異なる時、季節的シフトが入力特徴に 影響する時、または規制要件がモデルモニタリングを義務付ける時に使用する。

pjt222 Updated 44 repo stars

File contents

pjt222/agent-almanac commit 16cc0e7846

Frequently asked questions

npx get-skill add pjt222/monitor-model-drift-3