> For the complete documentation index, see [llms.txt](https://docs.datumo.com/llms.txt). Markdown versions of documentation pages are available by appending `.md` to page URLs; this page is available as [Markdown](https://docs.datumo.com/documentation/evaluation/undefined/4.-metric-and.md).

# 4. Metric 추가&관리

## Metric이란?

> Metric은 “***어떻게*** 평가할 것인가(How)”를 정의하는 단위입니다.\
> 평가 결과를 실제로 어떤 방식으로 계산하거나 판정할 것인지 정의하는 개념입니다.

***

## Metric 추가&관리 방법

### 1. Metric 생성 방식 선택

커스텀 프롬프트를 직접 추가하거나 제공되는 템플릿을 선택할 수 있습니다.

<figure><img src="/files/pqXxZmo8eB8WwPmVdPGs" alt=""><figcaption></figcaption></figure>

### 2. 커스텀 프롬프트 입력

커스텀 프롬프트를 사용하는 경우, 평가에 사용할 프롬프트를 사용하는 경우, 평가에 사용할 프롬프트를 직접 입력합니다.

<figure><img src="/files/pU9xrsVIWij5t8WfGtmC" alt=""><figcaption></figcaption></figure>

### 3. Key Mapping

Metric에서 요구하는 값을 확인하고 평가에 필요한 Key 를 매핑합니다.

<figure><img src="/files/zuliop4Qb8oh13jt302Y" alt=""><figcaption></figcaption></figure>

### 4. 평가 품질 Preview

설정한 Metric의 평가 품질을 `+Add Query/Response` 로 데이터를 추가하여 `Run Test` 실행 시 Preview를 통해 확인할 수 있습니다.

<figure><img src="/files/HHlXevDWREqaJn39RgCh" alt=""><figcaption></figcaption></figure>

***

### 🔗 관련 문서

* E-1. Criteria 생성 및 관리 — Criteria, Subgroup, Task 구성 방법
* E-2. Task 관리 — Task 기본 정보, Schema, Metric, Benchmark Set 관리 방법
* E-3. Benchmark Set 관리 — Benchmark Set 업로드 및 AI 기반 데이터 생성 방법
* E-5. Run Eval — 평가 Run 실행 및 이력 확인 방법
* E-6. Eval Result — 평가 결과 확인, Error, Retry 관리 방법
* E-7. Dashboard — 평가 결과 시각화 및 분석 방법
