분석

분석 페이지에서는 프로젝트가 어떻게 사용되고 있는지 시각적으로 확인할 수 있습니다. 개요, 피드백, LLM 메트릭의 3개 탭으로 구성되어 있습니다. 모든 탭에서 날짜 범위와 사용자 이메일로 필터링이 가능합니다.

개요

개요 탭에서는 선택한 날짜 범위에 대한 프로젝트 활동 및 사용 패턴의 개요를 확인할 수 있습니다.

필터링

• 이메일로 필터 필드를 사용하고 적용을 선택하여 특정 사용자로 분석을 범위 지정합니다.
• 우측 상단의 날짜 범위 선택기를 사용하여 시간 범위를 조정합니다.

개요 통계

통계	설명
총 메시지 수	프로젝트에서 전송된 메시지의 총 수입니다.
고유 사용자 수	프로젝트와 상호작용한 고유 사용자의 수입니다.
총 쿼리 수	제출된 쿼리의 총 수입니다.
평균 응답 시간	응답 생성에 소요된 평균 시간입니다.
생성된 이미지 수	에이전트에 의해 생성된 이미지의 총 수입니다.

차트

차트	설명
일별 쿼리 수	선택한 날짜 범위에서 일별 쿼리량을 보여주는 선 그래프입니다.
사용자별 대화 수	사용자 간 대화 분포를 보여주는 도넛 차트입니다.
기능별 고유 사용자 수	기능별(예: 채팅, 파일 추가, 프로젝트 생성) 이벤트 발생 고유 사용자 수를 보여주는 막대 그래프입니다.
기능별 쿼리 수	기능별 문서 사용량 분포를 보여주는 파이 차트입니다. 모든 기능 드롭다운을 사용하여 특정 기능으로 필터링할 수 있습니다.
사용자 vs 쿼리 활동	기능별 사용자 수와 쿼리 수를 비교하는 그룹 막대 그래프입니다.
피드백	정답 수, 오답 수, 오답 소스 URL의 추이를 추적하는 차트입니다.

개요 데이터 내보내기

참고

v2.1.0부터 사용 가능합니다.

내보내기 버튼을 사용하여 선호하는 형식으로 현재 개요 데이터를 다운로드합니다:

형식	설명
CSV로 내보내기	Excel 호환 형식입니다.
XLSX로 내보내기	서식을 유지합니다.

피드백

피드백 탭에서는 사용자가 제출한 메시지 수준의 피드백을 감정별로 확인할 수 있습니다.

참고

우측 상단의 날짜 범위 선택기를 사용하여 시간 범위별로 피드백을 필터링합니다.

메시지 피드백

선택한 날짜 범위 내에서 제출된 모든 피드백의 테이블입니다:

열	설명
사용자	피드백을 제출한 사용자입니다.
질문	응답을 유발한 질문입니다.
피드백 수	해당 항목에 대한 피드백 제출 횟수입니다.
생성일	피드백이 제출된 날짜와 시간입니다.
작업	피드백 보기로 해당 항목의 상세 피드백을 엽니다. 채팅에서 보기로 해당 채팅 창으로 이동하여 전체 대화를 확인합니다.

피드백 내보내기

참고

v2.1.0부터 사용 가능합니다.

메시지 피드백 테이블은 선택적 또는 전체 내보내기를 지원합니다. 체크박스를 사용하여 개별 행을 선택하고 내보내기 옵션을 선택합니다:

옵션	설명
모두 → 내보내기	메시지 피드백 테이블의 모든 레코드를 내보냅니다.
선택 → 내보내기	선택한 행만 내보냅니다.

두 옵션 모두 CSV로 내보내기(Excel 호환) 및 XLSX로 내보내기(서식 유지)를 지원합니다.

좋아요한 메시지

사용자로부터 좋아요(👍)를 받은 응답의 테이블입니다. 사용자, 질문, 응답, 생성일 열이 있습니다.

싫어요한 메시지

사용자로부터 싫어요(👎)를 받은 응답의 테이블입니다. 사용자, 질문, 응답, 생성일 열이 있습니다.

LLM 메트릭

LLM 메트릭 탭에서는 선택한 날짜 범위 내에서 에이전트가 실행한 도구 호출의 상세 성능 데이터를 확인할 수 있습니다. 시작일 및 종료일 필드를 사용하여 시간 범위를 설정합니다.

도구 호출

통계	설명
도구 호출	실행된 도구 호출의 총 수입니다.
도구 호출 응답	도구 호출에서 반환된 응답의 총 수입니다.
성공한 호출	정상적으로 완료된 도구 호출의 수입니다.
실패한 호출	실패한 도구 호출의 수입니다.

사용량 및 성능

통계	설명
총 토큰	모든 호출에서 소비된 입력 토큰과 출력 토큰의 합계입니다.
입력 토큰	모델에 전송된 총 토큰 수입니다.
출력 토큰	모델에서 반환된 총 토큰 수입니다.
성공률	정상적으로 완료된 도구 호출의 비율입니다.

차트

차트	설명
도구명별 사용량	가장 많이 사용된 도구를 보여주는 막대 그래프입니다. 성공과 실패한 호출이 색상으로 구분됩니다.
시간별 도구 사용량	선택한 날짜 범위에서 일별 도구 성공률과 실패율을 보여주는 선 그래프입니다.

도구 성능 세부 정보

도구별 성능 지표를 나열하는 검색 가능한 테이블입니다. 도구 검색... 필드를 사용하여 도구명으로 필터링합니다.

열	설명
도구명	호출된 도구의 이름입니다.
총 호출 수	도구가 호출된 총 횟수입니다.
성공한 호출	정상적으로 완료된 호출의 수입니다.
실패한 호출	실패한 호출의 수입니다.
성공률	성공한 호출의 비율로 프로그레스 바로 표시됩니다.