대시보드
대시보드에서 페이지를 만들고 관리하며, 차트를 추가해 평가 결과를 시각화합니다.
1. 페이지 관리
①페이지 종류
대시보드는 평가 결과를 차트로 보여 주는 화면입니다. 왼쪽 메뉴의 평가 대시보드에서 엽니다. 페이지는 차트 여러 개를 한 화면에 모아 둔 단위입니다. 페이지 목록은 두 묶음으로 나뉩니다.
| 묶음 | 들어 있는 페이지 | 사용자가 할 수 있는 일 |
|---|---|---|
기본 페이지 | 평가 리포트 | 열어 보기만 합니다. 만들기·삭제·이름 수정은 할 수 없습니다. |
커스텀 페이지 | 사용자가 만든 페이지 | 페이지 만들기, 이름 수정, 삭제 차트 추가 |
- 대시보드를 열면
평가 리포트가 먼저 나옵니다. 자세한 내용은 평가 리포트에서 설명합니다. - 커스텀 페이지 위쪽에는 만든 날짜(
생성일)가 나옵니다. - 차트 수는
Contained Chart에 나옵니다.
1-1Page 생성
- 왼쪽 목록의
+ New Dashboard를 클릭합니다. - 목록에 새 Page가 추가되고 바로 열립니다.
- 이름은
Page 1,Page 2처럼 자동으로 붙습니다. Custom Page만 만들 수 있습니다. Page 종류를 참고하세요.
- 왼쪽 목록의
1-2Page 이름 수정
- Page 이름 옆 수정 아이콘을 클릭합니다.
Page Name에 새 이름을 입력합니다.Save를 클릭합니다.
1-3Page 삭제
Edit Page를 클릭합니다.Delete Page를 클릭합니다.- 확인 창에서
Delete를 클릭합니다.
- Page가 2개 이상일 때만 삭제할 수 있습니다.
- Page 안의 차트도 함께 삭제되고 되돌릴 수 없습니다.
2. 차트 추가
①차트 만들기 흐름
+ 차트 추가를 누르면 새 차트 창이 열립니다. 창 위쪽에 네 단계가 차례로 나옵니다.
| 단계 | 정하는 것 |
|---|---|
AI 입력 | 보고 싶은 분석을 문장으로 적어 나머지 설정을 한 번에 채웁니다. |
평가 범위 | 차트에 담을 분석 범위 |
평가 / 버전 | 차트에 담을 평가와 버전 |
차트 설정 | 차트 유형, 축, 제목과 설명 |
- 이 문서는
직접 설정을 눌러 단계마다 직접 고르는 방법을 안내합니다. AI 입력으로 채운 설정도차트 설정에서 확인하고 고칠 수 있습니다.- 문장 예시:
최근 Run에서 계좌 이체 실행 지표를 버전별로 비교해 줘
②분석 범위
분석 범위(평가 범위)는 차트가 그릴 평가 결과의 범위입니다. 평가체계 구조를 따라 한 단계씩 내려가며 고릅니다.
평가체계 › 대분류 › Sub Group › 태스크 › 평가지표
대분류는종합 성능,Policy & UX,안전성같은 평가 영역입니다.- 모듈은
Router Module처럼 별도대분류로 나옵니다. - 가장 아래로 내려간 단계에서 체크 상자로 항목을 고릅니다. 고른 항목이 차트의 범위가 됩니다.
- (예:
태스크단계에서 태스크 3개를 고르면 그 3개 태스크의 결과만 차트에 담깁니다.) - 처음에는 애플리케이션의
대분류가 모두 선택되어 있습니다.
평가체계 구조는 평가 핵심 개념에서 설명합니다.
③평가와 버전
- 평가는 태스크·평가지표·버전을 골라 평가를 한 번 실행한 기록입니다.
Run #142처럼 번호로 나옵니다. - 버전은 평가한 애플리케이션이나 모듈의 버전입니다(예:
Agent v2.4,Router v4). A/B 테스트 버전에는 고른 평가에서 평가한 버전만 나옵니다.- 버전은 분석 범위에 맞춰 묶여 나옵니다(예:
애플리케이션 버전 선택,Select Router Version). - 평가를 하나도 고르지 않으면 버전 목록이 나오지 않습니다.
④차트 유형
차트 유형에서 고를 수 있는 유형은 네 가지입니다.
| 유형 | 쓰임 | 예시 |
|---|---|---|
막대 차트 | 태스크나 평가지표끼리 점수를 비교합니다. | 계좌 이체 지표를 버전별 평균 점수로 비교 |
선 차트 | 평가가 거듭되며 점수가 어떻게 바뀌었는지 봅니다. | 평가별 안전성 평균 점수를 버전으로 나눠 표시 |
레이더 차트 | 여러 항목의 점수 균형을 한눈에 봅니다. | 평가 항목별 점수 균형을 버전끼리 비교 |
히트맵 차트 | 칸 색으로 점수가 낮은 곳을 찾습니다. | 평가 항목과 버전별 평균 점수. 노랗거나 붉은 칸일수록 낮음 |
레이더 차트는 X축 항목이 3개 이상일 때만 그릴 수 있습니다.
⑤축과 측정값
차트는 아래 세 가지 설정으로 그립니다.
| 설정 | 정하는 것 | 고를 수 있는 값 |
|---|---|---|
Measure | 세로축(Y축)에 그릴 값 | Score Average, Incorrect Count, Data Count, Score Min, Score Max |
X축 | 가로축에 늘어놓을 항목 | 평가 범위, 평가실행, 버전, 메타데이터 키 |
Group By | 한 항목 안에서 나눠 그릴 기준 | X축과 같은 목록. 나누지 않으려면 None |
Measure값은 차례로 점수 평균, 틀린 데이터 수, 데이터 수, 최저 점수, 최고 점수입니다.- (예:
X축을평가실행,Group By를버전으로 두면 평가마다 버전별 점수를 나눠 그립니다.) - 메타데이터 키는 벤치마크셋의 메타데이터 열입니다(예:
난이도,채널). - 대시보드는 메타데이터를 최신 값으로 보여 줍니다.
X축과Group By옆 버튼을 누르면 두 값이 서로 바뀝니다.
2-1분석 범위 선택
+ Add Chart를 클릭합니다. 처음이라면 Chart 만들기 흐름을 먼저 읽어 보세요.- 첫 단계에서
직접 설정을 클릭합니다. - Criteria부터 차례로 분석할 범위를 고릅니다. 분석 범위를 참고하세요.
- 체크 상자로 차트에 넣을 항목을 고릅니다.
Next를 클릭합니다.
항목 옆
›를 누르면 Sub Group, Task, Metric으로 내려갑니다.2-2Run·Version 선택
Select Run에서 분석할 Run을 고릅니다. Run과 Version을 참고하세요.A/B Test Version에서 비교할 버전을 고릅니다.Next를 클릭합니다.
처음에는 모든 Run과 버전이 선택되어 있습니다. 빼려면
✕를 누릅니다.2-3차트 유형 선택
2-4Chart 정보 입력
Chart Title과Description을 입력합니다.Add Chart를 클릭합니다. Page에 차트가 추가됩니다.
Description은 255자까지 입력할 수 있습니다.
자주 묻는 질문
Delete Page 버튼이 왜 보이지 않나요?페이지 수정을 눌러야 나타나기 때문이에요. 페이지가 1개뿐이면 나타나지 않아요.
- 원인
- 페이지 삭제는 편집 상태에서만 할 수 있어요. 마지막 남은 페이지는 지울 수 없어요.
- 해결 방법
페이지 수정을 눌러 주세요. 페이지가 1개뿐이면 새 페이지를 만든 뒤 삭제해 주세요.
미리보기에 왜 차트 대신 안내 문구가 나오나요?고른 조건으로는 차트를 그릴 수 없기 때문이에요.
- 원인
- 데이터가 부족하거나, 조건이 차트 유형에 맞지 않을 때 그래요. 예를 들어
레이더 차트는 X축 항목이 3개 이상이어야 해요. - 해결 방법
X축,Group By, 분석 범위,차트 유형중 하나를 바꿔 주세요. 유형별 조건은 차트 유형을 참고해 주세요.
차트에 왜 일부 항목만 나타나나요?차트마다 보여 줄 수 있는 항목 수를 넘었기 때문이에요.
- 원인
- 항목이 너무 많으면 차트에 다 담을 수 없어요.
- 해결 방법
X축,Group By, 분석 범위,차트 유형중 하나를 바꿔 항목 수를 줄여 주세요.