自動化データサイエンティストMLOps担当

モデルドリフトの監視指標と対応段階を設計する

入力分布・予測・遅延正解値を分けて監視し、承認済み閾値に沿う運用案を作ります。

目安時間:40分難易度:上級アプリ:Copilot in Word
プロンプトの内容を確認 ↓

PURPOSE

このプロンプトでできること

入力分布・予測・遅延正解値を分けて監視し、承認済み閾値に沿う運用案を作ります。

PREPARE

用意する情報

モデル用途、基準期間、入力・予測・正解値の到着時期、承認済み閾値、対応担当と停止権限を用意してください。

WORKFLOW

使い方

モデルが使われる業務と監視可能な実データの到着時期を入力してください。

AI INSTRUCTION

AIへの指示文

コピー用

入力欄を埋めてから利用してください。

監視対象を入力分布、予測分布、遅延する性能指標に分けて表にしてください。閾値が未定なら数値を作らず「承認要」とし、検知、調査、緩和、再開の担当・判断条件を明記してください。自動再学習や本番停止を実行しないでください。
【用途・監視条件】
【閾値・運用権限】
コピー操作はこのブラウザー内で行います

EXAMPLE

入力例と出力例

入力例(説明用)

用途: 需要予測/正解値は月末に確定/承認閾値: 未定/停止権限: 運用責任者

出力例(説明用)

指標候補: 入力分布差、予測分布差、正解値確定後の誤差。閾値: 承認要。対応: 検知後に運用担当がデータ品質と業務変化を調査、停止・再開は運用責任者が判断。

TIPS

使うときのコツ

正解値の到着遅延、基準期間、セグメント、誤警報時の確認担当を具体化してください。

使う前に確認してください

閾値・停止・再学習・再開はモデルリスクと業務責任者が承認し、自動実行にしないでください。