モデル監視

モデル監視機能とは

AIモデルの精度は、時間の経過や外部環境の変化により精度が低下する可能性があります。
そのため、ビジネス現場で安定的な運用をするには、モデルの変化を捉え品質の高いモデルを維持しつづける必要があります。

モデル監視機能は、稼働しているモデルの変化を捉え安定したAIモデル活用に貢献します。

Prediction Oneのモデル監視機能では、以下の機能を提供します。

学習した時と予測APIを使用した時でどのくらい各列の値が変化したかの傾向の変化を捉えます。

学習した時と予測APIを使用した時で予測結果がどのくらい変化したかの傾向の変化を捉えます。

予測精度、項目の傾向変化、予測結果の傾向変化を一覧で可視化し、どこがずれているか一目で捉えます。

グラフによる精度劣化が起きている項目の可視化

傾向が変化している項目数とその大きさをグラフで可視化し、学習に使用した項目と実際に精度劣化が起きている項目を見ることができます。
各項目を確認することで、モデルの再学習の見直しを検討することができます。
アラートメールによる状況の確認

稼働状況の結果を毎日/毎週単位でレポートとして送付することが可能になり、稼働状況の管理を高速化することができます。

モデル監視機能は、Prediction Oneクラウド版の機能として提供しています。