注: 以下の翻訳の正確性は検証されていません。AIPを利用して英語版の原文から機械的に翻訳されたものです。
モデル評価は、運用モデリングプロジェクトにおいて非常に重要です。モデリング目的に提出されたモデルに対して指標を自動的に またはコード内で 生成した後、評価ダッシュボードでモデルを相互に比較することができます。モデリング目的のホームページから、評価ダッシュボードを表示を選択して評価ダッシュボードに移動します。
評価ダッシュボードは、モデルの指標とパフォーマンス評価を行うための標準的で一元化された場所を提供します。すべてのモデル提出に関連する指標は、モデリング目的内でレビュー可能です。
モデル指標の標準化を確保するために、評価ダッシュボードでは、評価ダッシュボードの設定によって生成された指標のみがデフォルトで表示されます。代わりに手動でコード内でモデルを評価している場合は、モデリング目的の設定で評価設定によって生成された指標のみを表示を無効にする必要がありますモデリング目的の設定。
モデル評価ダッシュボードでは、選択した評価データセットとモデル提出の交差点に基づいて指標が表示されます。
入力データセットを選択するには、評価ダッシュボードの左上にある評価データセットのドロップダウンから評価データセットを選択します。このセレクタを使って、評価データセットまたは評価データセットの特定のデータセットトランザクションを選択することができます。
評価データセットの特定のトランザクションを選択しない場合、選択したモデル提出の最新の指標結果が表示されます。特定のトランザクションを選択すると、その評価データセットの特定のトランザクションを入力として使用して構築された指標のみが表示されます。
評価データセットの特定のトランザクションを横断してモデルを比較することが統計的に最も正確です。ただし、トランザクションを横断した比較は、モデルスキーマが変更されたモデル提出のパフォーマンスと比較するのに役立ちます。
評価結果を表示するための次のステップは、指標を表示したいモデルを選択することです。評価ダッシュボードに表示されるモデルは、モデルを選択する と モデルを検索する で選択されたモデルの和集合です。
評価ダッシュボードにモデル提出を追加する最初の方法は、個々のモデル提出を選択することです。モデルの選択ドロップダウンでは、1つ以上の特定のモデル提出を評価ダッシュボードに追加することができます。
モデル提出が多数ある場合は、特定の検索条件に合致するモデルを追加すると便利です。モデル提出の検索結果は、モデルを選択するで選択されたモデルに加えて、評価ダッシュボードに追加されます。
モデル提出の検索では、以下の方法でモデル提出を検索することができます:
評価ダッシュボードは、モデル提出の指標をタブに分けて表示します。表示されるタブは、評価設定で設定されたサブセットと、モデリング目的の設定で有効にされている場合の、カスタム固定指標ビューの組み合わせです。