# 学習済み Models を評価

モデル評価は次のことを示します：

1. 本番用メトリクスエクスプローラー：モデルを実行する最適なconfidence threshold（信頼度の閾値）を見つけるのに役立ちます；
2. モデル改善の推奨事項：モデルの精度を向上させる方法についての提案を提供します；
3. クラス別パフォーマンス：モデルが各クラスをどれだけ正しく識別しているかを示します；
4. 混同行列：モデルが得意なクラスや苦手なクラスを見つけるために使用できるもの；
5. インタラクティブなベクターエクスプローラー：モデルが良く動作する、またはうまくいかない画像のクラスタを特定できます；

モデル評価を使用して、モデルの改善が必要な領域を特定できます。

モデル評価は、有料ユーザーによってRoboflow上でトレーニングされた、またはアップロードされたすべてのバージョン管理されたモデルに対して自動的に実行されます。数百枚の画像のデータセットでは評価の実行に数分、数千枚以上の大規模データセットでは数時間かかる場合があります。

### モデル評価を開く

モデルの混同行列とベクターエクスプローラーを見つけるには、プロジェクト内の任意の学習済みモデルバージョンを開いてください。次に、「View Evaluation」ボタンをクリックします：

<figure><img src="https://3740591140-files.gitbook.io/~/files/v0/b/gitbook-x-prod.appspot.com/o/spaces%2F-M6S9nPJhEX9FYH6clfW%2Fuploads%2Fgit-blob-8c6db60420e1905df8d6f3c824f91f0f219e8a76%2FScreenshot%202025-05-14%20at%2014.41.23.png?alt=media" alt=""><figcaption></figcaption></figure>

混同行列とベクター分析を表示できるウィンドウが開きます。

### 本番メトリクスエクスプローラー

本番メトリクスエクスプローラーは、あらゆるconfidence threshold（信頼度の閾値）におけるモデルのPrecision、Recall、F1スコアを表示します。この情報はグラフで提示されます。

これらの統計を用いて、本番メトリクスエクスプローラーは「optimal confidence（最適な信頼度）」を推奨します。これはPrecision/Recall/F1スコアのトレードオフが最も良くなる閾値です。

このツールを使用して、本番環境でモデルに設定するconfidence thresholdの検討に役立てることができます。

<figure><img src="https://3740591140-files.gitbook.io/~/files/v0/b/gitbook-x-prod.appspot.com/o/spaces%2F-M6S9nPJhEX9FYH6clfW%2Fuploads%2Fgit-blob-cf7be3e1155f28ab47c87709fe072e767b536898%2FScreenshot%202025-07-23%20at%2011.15.02.png?alt=media" alt=""><figcaption></figcaption></figure>

スライダーをドラッグして、さまざまなconfidence thresholdでのF1/Precision/Recallの値を確認できます：

<figure><img src="https://3740591140-files.gitbook.io/~/files/v0/b/gitbook-x-prod.appspot.com/o/spaces%2F-M6S9nPJhEX9FYH6clfW%2Fuploads%2Fgit-blob-c0f91bfa945e226cba1bdb659ef70c507779add8%2FScreenshot%202025-07-23%20at%2011.15.39.png?alt=media" alt=""><figcaption></figcaption></figure>

### モデル改善の推奨事項

モデル評価のモデル改善の推奨事項セクションには、モデルの精度を上げるための提案が一覧表示されます。これらの改善は、モデルで計算された混同行列の結果に基づいています。（混同行列の詳細はこのページの後半を参照してください）。

モデル改善の推奨機能は以下に関連する提案を行うことがあります：

* 多くのFalse Negative（偽陰性）を予測するモデルを改善する方法。
* 多くのFalse Positive（偽陽性）を予測するモデルを改善する方法。
* よく混同される（誤認識される）クラス。
* 精度を向上させるためにデータがもっと必要なクラス。
* テストセットや検証セットが小さすぎる可能性がある場合。
* その他。

<figure><img src="https://3740591140-files.gitbook.io/~/files/v0/b/gitbook-x-prod.appspot.com/o/spaces%2F-M6S9nPJhEX9FYH6clfW%2Fuploads%2Fgit-blob-cb54b251f5e115f9a1eb549b0c03117d5b263b3b%2FScreenshot%202025-07-23%20at%2011.17.09.png?alt=media" alt=""><figcaption></figcaption></figure>

### クラス別パフォーマンス

クラス別パフォーマンスチャートは、データセット内のすべてのクラスにおける正しい予測、誤分類、False Negative、False Positiveの数を示します。

この情報を使って、ひと目でモデルがよく識別できるクラスと、モデルが識別に苦労しているクラスを確認できます。

<figure><img src="https://3740591140-files.gitbook.io/~/files/v0/b/gitbook-x-prod.appspot.com/o/spaces%2F-M6S9nPJhEX9FYH6clfW%2Fuploads%2Fgit-blob-ffaf491bbb2d955905c575d90aeb04a4fd94f257%2FScreenshot%202025-07-23%20at%2011.18.34.png?alt=media" alt=""><figcaption></figcaption></figure>

データセットに多数のクラスがある場合は、「All Classes」ドロップダウンを開いてハイライトしたいクラスを選択することでチャートを特定のクラスに絞ることができます：

<figure><img src="https://3740591140-files.gitbook.io/~/files/v0/b/gitbook-x-prod.appspot.com/o/spaces%2F-M6S9nPJhEX9FYH6clfW%2Fuploads%2Fgit-blob-9656c52d9fc2be6f7da56bcd9bd4f2538677dba3%2FScreenshot%202025-07-23%20at%2011.19.30.png?alt=media" alt=""><figcaption></figcaption></figure>

Confidence Thresholdスライダーを動かすことで、さまざまな信頼度の閾値でこのチャートがどのように変化するかも確認できます：

<figure><img src="https://3740591140-files.gitbook.io/~/files/v0/b/gitbook-x-prod.appspot.com/o/spaces%2F-M6S9nPJhEX9FYH6clfW%2Fuploads%2Fgit-blob-443ab7ce57aba56477ab17435cb9f27f622fe7c1%2FScreenshot%202025-07-23%20at%2011.20.12.png?alt=media" alt=""><figcaption></figcaption></figure>

デフォルトでは、このチャートは当社が推奨するoptimal confidence threshold（最適な信頼度の閾値）を使用します。

### 混同行列

混同行列は、モデルが各クラスでどの程度よく機能しているかを示します。

混同行列は、テストセットおよび検証セットからの画像を学習済みモデルで実行して計算されます。モデルの結果はデータセット注釈の「ground truth（正解）」と比較されます。

混同行列ツールを使って特定できるもの：

* モデルがよく機能するクラス。
* モデルがオブジェクトを誤って別のクラスとして識別するクラス（False Positive）。
* モデルが実際には存在しないオブジェクトを識別してしまう事例（False Negative）。

以下は混同行列の例です：

<figure><img src="https://3740591140-files.gitbook.io/~/files/v0/b/gitbook-x-prod.appspot.com/o/spaces%2F-M6S9nPJhEX9FYH6clfW%2Fuploads%2Fgit-blob-cd0af50fa3e0c4158310901798a285245a9d87bc%2FScreenshot%202025-07-23%20at%2011.20.53.png?alt=media" alt=""><figcaption></figcaption></figure>

モデルが多数のクラスを検出する場合、混同行列をナビゲートするためのスクロールバーが表示されます。

デフォルトでは、混同行列はモデルに対して計算された最適閾値で実行したときのモデルの性能を示します。

Confidence Thresholdスライダーを使って信頼度の閾値を調整できます。スライダーを設定すると混同行列、precision、recallが更新されます：

<figure><img src="https://3740591140-files.gitbook.io/~/files/v0/b/gitbook-x-prod.appspot.com/o/spaces%2F-M6S9nPJhEX9FYH6clfW%2Fuploads%2Fgit-blob-37d06af76a4e8f6a660dec67c79f30d7d47e67ea%2FScreenshot%202025-07-23%20at%2011.21.19.png?alt=media" alt=""><figcaption></figcaption></figure>

混同行列の各ボックスをクリックすると、対応するカテゴリに表示される画像を確認できます。

たとえば、「False Positive」列の任意のボックスをクリックすると、ground truth（正解）データでは存在しない場所でオブジェクトが識別された画像を特定できます。

<figure><img src="https://3740591140-files.gitbook.io/~/files/v0/b/gitbook-x-prod.appspot.com/o/spaces%2F-M6S9nPJhEX9FYH6clfW%2Fuploads%2Fgit-blob-5372c962df1b4125d6d89098a5b43ea4df21e74c%2FScreenshot%202025-07-23%20at%2011.22.08.png?alt=media" alt=""><figcaption></figcaption></figure>

個々の画像をクリックすると、ground truth（あなたの注釈）とModel Predictions（モデルの予測）を切り替えられるインタラクティブビューに入ることができます：

<figure><img src="https://3740591140-files.gitbook.io/~/files/v0/b/gitbook-x-prod.appspot.com/o/spaces%2F-M6S9nPJhEX9FYH6clfW%2Fuploads%2Fgit-blob-15edd76d7c3b4f61ddd86e3581a91b90f0b72608%2FScreenshot%202025-07-23%20at%2011.22.30.png?alt=media" alt=""><figcaption></figcaption></figure>

「Ground Truth」をクリックして注釈を表示し、「Model Predictions」をクリックしてモデルが返した結果を表示します。
