| アドオン | AIエージェント - Advanced |
混同行列とは？
混同行列は、AIモデルのパフォーマンスを目的の認識に基づいて視覚化したものです。つまり、AIモデルが、異なる目的で類似した表現を明確に認識できるか、それによって「混乱」しているかを示します。
混同行列では、一流のAI科学者と同じツールを使用できるため、自社のAIエージェントのパフォーマンスを簡単に監視できます。
毎週火曜日の夜には、新しい混同行列が自動的に生成されます。つまり、手動で更新しない限り、1週間以上経過した混同行列を見ることは決してありません。通常、これは問題を引き起こすことはありません。
AIエージェントが最近広範なトレーニングを受けた、または大規模な変更（表現や目的の変更）があった場合は、すぐにでも新しいトレーニングを行うことをお勧めします。
混同行列を再トレーニングするには、まずトレーニングセンター > 混同行列に移動し、右上の再トレーニングをクリックします。
いつ使用するべきか？
分析におけるAIエージェントの回答率（80%のベースラインを推奨）が低下していることに気づいたとき、またはAIエージェントが定期的に間違った目的でメッセージを分類していることに気づいたときに、混同行列を使用すべきです。
混同行列の読み方
X軸とY軸の2次元は、それぞれ実際の目的と予測された目的を表します。
上の例では、列1と行1が肯定的な実際に予測された目的、行2と列2が否定的な目的というように続きます。
セルの色が濃いほど、予測された目的が実際の目的と重複します。
上の例のような優れたモデルには、テーブルを斜めに横切る濃い色の線が必要です。
ただし、目的のメッセージが別の目的に予測される頻度を表す、対角線の外側の色付きセルには注意が必要です。 対角線の外側のセルの色が濃い場合は、2つの目的間の表現に重複の可能性があるため、AIモデルの精度に問題があることを示しています。問題のリストビューでは、すべての重複する問題が優先度に従って自動的にリストされるため、これらの問題に体系的に取り組むことができます。
関連記事：
混同行列を使用した高度なAIエージェントのパフォーマンスの向上
0件のコメント
サインインしてコメントを残してください。