分析
分析 ページでは、プロジェクトがどのように使用されているかを可視化できます。概要、フィードバック、LLM メトリクス の 3 つのタブに分かれています。すべてのタブで日付範囲とユーザーメールアドレスによるフィルタリングが可能です。
- 概要
- フィードバック
- LLM メトリクス
概要 タブでは、選択した日付範囲におけるプロジェクトのアクティビティと使用パターンの概要を確認できます。
フィルタリング
- メールアドレスでフィルター フィールドを使用し、適用 を選択して特定のユーザーに分析を絞り込みます。
- 右上の 日付範囲ピッカー を使用して時間範囲を調整します。
概要統計
| 統計 | 説明 |
|---|---|
| 合計メッセージ数 | プロジェクトで送信されたメッセージの合計数です。 |
| ユニークユーザー数 | プロジェクトとインタラクションを行った固有ユーザーの数です。 |
| 合計クエリ数 | 送信されたクエリの合計数です。 |
| 平均応答時間 | 応答の生成にかかった平均時間です。 |
| 生成された画像数 | エージェントによって生成された画像の合計数です。 |
チャート
| チャート | 説明 |
|---|---|
| 日別クエリ数 | 選択した日付範囲における日別のクエリ数を示す折れ線グラフです。 |
| ユーザー別会話数 | ユーザーごとの会話分布を示すドーナツチャートです。 |
| 機能別ユニークユーザー数 | 機能ごとのイベント発生固有ユーザー数(例:チャット、ファイル追加、プロジェクト作成)を示す棒グラフです。 |
| 機能別クエリ数 | 機能ごとのドキュメント使用状況を示す円グラフです。すべての機能 ドロップダウンを使用して特定の機能でフィルタリングできます。 |
| ユーザー vs クエリアクティビティ | 機能ごとのユーザー数とクエリ数を比較するグループ棒グラフです。 |
| フィードバック | 正解数、不正解数、不正解のソース URL の推移を追跡するチャートです。 |
概要データのエクスポート
v2.1.0 以降で利用可能です。
エクスポート ボタンを使用して、お好みの形式で現在の概要データをダウンロードします:
| 形式 | 説明 |
|---|---|
| CSV としてエクスポート | Excel 互換形式です。 |
| XLSX としてエクスポート | 書式を保持します。 |
フィードバック タブでは、ユーザーから送信されたメッセージレベルのフィードバックをセンチメント別に確認できます。
右上の日付範囲ピッカーを使用して、時間範囲でフィードバックをフィルタリングします。
メッセージフィードバック
選択した日付範囲内で送信されたすべてのフィードバックのテーブルです:
| 列 | 説明 |
|---|---|
| ユーザー | フィードバックを送信したユーザーです。 |
| 質問 | 応答を引き出した質問です。 |
| フィードバック数 | そのエントリに対するフィードバック送信の数です。 |
| 作成日時 | フィードバックが送信された日時です。 |
| アクション | フィードバックを表示 でそのエントリの詳細なフィードバックを開きます。チャットで表示 で対応するチャットウィンドウに移動し、完全な会話を確認します。 |
フィードバックのエクスポート
v2.1.0 以降で利用可能です。
メッセージフィードバックテーブルでは、選択的または完全なエクスポートがサポートされています。チェックボックスを使用して個別の行を選択し、エクスポートオプションを選択します:
| オプション | 説明 |
|---|---|
| すべて → エクスポート | メッセージフィードバックテーブルのすべてのレコードをエクスポートします。 |
| 選択 → エクスポート | チェックした行のみをエクスポートします。 |
両方のオプションで CSV としてエクスポート(Excel 互換)および XLSX としてエクスポート(書式を保持)がサポートされています。
いいねされたメッセージ
ユーザーからいいね(👍)を受け取った応答のテーブルです。ユーザー、質問、応答、作成日時 の列があります。
低評価されたメッセージ
ユーザーから低評価(👎)を受け取った応答のテーブルです。ユーザー、質問、応答、作成日時 の列があります。
LLM メトリクス タブでは、選択した日付範囲内でエージェントが実行したツール呼び出しの詳細なパフォーマンスデータを確認できます。開始日 と 終了日 フィールドを使用して時間範囲を設定します。
ツール呼び出し
| 統計 | 説明 |
|---|---|
| ツール呼び出し | 実行されたツール呼び出しの合計数です。 |
| ツール呼び出し応答 | ツール呼び出しから返された応答の合計数です。 |
| 成功した呼び出し | 正常に完了したツール呼び出しの数です。 |
| 失敗した呼び出し | 失敗したツール呼び出しの数です。 |
使用量とパフォーマンス
| 統計 | 説明 |
|---|---|
| 合計トークン | すべての呼び出しで消費された入力トークンと出力トークンの合計です。 |
| 入力トークン | モデルに送信された合計トークン数です。 |
| 出力トークン | モデルから返された合計トークン数です。 |
| 成功率 | 正常に完了したツール呼び出しの割合です。 |
チャート
| チャート | 説明 |
|---|---|
| ツール名別使用量 | 最も使用されているツールを示す棒グラフです。成功と失敗の呼び出しが色分けされています。 |
| 時間別ツール使用量 | 選択した日付範囲における日別のツール成功率と失敗率を示す折れ線グラフです。 |
ツールパフォーマンス詳細
ツールごとのパフォーマンス指標を一覧表示する検索可能なテーブルです。ツールを検索... フィールドを使用してツール名でフィルタリングします。
| 列 | 説明 |
|---|---|
| ツール名 | 呼び出されたツールの名前です。 |
| 合計呼び出し数 | ツールが呼び出された合計回数です。 |
| 成功した呼び出し | 正常に完了した呼び出しの数です。 |
| 失敗した呼び出し | 失敗した呼び出しの数です。 |
| 成功率 | 成功した呼び出しの割合で、プログレスバーとして表示されます。 |