> For the complete documentation index, see [llms.txt](https://docs.datumo.com/llms.txt). Markdown versions of documentation pages are available by appending `.md` to page URLs; this page is available as [Markdown](https://docs.datumo.com/documentation/evaluation/undefined/5.-run-eval.md).

# 5. Run Eval

## Run Eval 이란?

> Run Eval은 설정된 Task, Benchmark Set, Metric을 기반으로 실제 평가를 실행하는 단계입니다.

***

## Run Eval 실행

### 1. Run Eval 생성

<figure><img src="/files/rlacVm29T9dMGj3WN7nr" alt=""><figcaption></figcaption></figure>

`Run Evaluation` 을 클릭하여 평가를 실행한다.

<figure><img src="/files/VQzYMrZ5qdnS7cawbrp8" alt=""><figcaption></figcaption></figure>

Criteria Setting 화면에서 평가를 실행할 수 있다.

`Run Evaluation` 클릭 시 해당 Criteria에 대한 Evaluation을 생성한다.

### 2. Run 조건 선택 및 실행

평가할 Version, Task, Metric등을 선택하여 Run을 실행할 수 있습니다.

<figure><img src="/files/n8GlsN1NXu1rD0wyntTp" alt=""><figcaption></figcaption></figure>

Runs 화면에서 평가를 실행할 경우 Defalt Criteria로 설정 됩니다.

<figure><img src="/files/fPYDwsWsKAu6IQf4TJCo" alt=""><figcaption></figcaption></figure>

Criteria 화면에서 `Run Evaluation`을 실행한 경우 해당 Criteria로 설정 됩니다.

평가에 포함할 Task, Metric, Version을 선택한 후 `Next` 버튼을 클릭하여 다음 단계로 이동합니다.

#### 조건 선택

<figure><img src="/files/NflQgiLRnllTbY7IGfpZ" alt=""><figcaption></figcaption></figure>

필요한 평가 항목만 선택하여 Run Evaluation을 실행할 수 있습니다.

### 3. Criteria 설정

<figure><img src="/files/RWG6zhxV1xvJx4qv7Nsa" alt=""><figcaption></figcaption></figure>

Run Evaluation 화면에서 상단 Criteria 영역을 선택하면 Criteria 목록을 확인하고 선택할 수 있습니다.

Task와 Metric을 선택한 후 다른 Criteria로 이동했다가 다시 이전 Criteria로 돌아오더라도, 이전에 선택한 설정값은 유지됩니다.

### 4. Run 이력 확인

실행된 Run 이력 리스트를 확인하고, 각 평가 실행 결과를 조회할 수 있습니다.

<figure><img src="/files/zeJtXixZiTWd1AiYQXh8" alt=""><figcaption></figcaption></figure>

***

### 🔗 관련 문서

* E-1. Criteria 생성 및 관리 — Criteria, Subgroup, Task 구성 방법
* E-2. Task 관리 — Task 기본 정보, Schema, Metric, Benchmark Set 관리 방법
* E-3. Benchmark Set 관리 — Benchmark Set 업로드 및 AI 기반 데이터 생성 방법
* E-4. Metric 추가 및 관리 — Metric 생성, Key Mapping, Preview 설정 방법
* E-6. Eval Result — 평가 결과 확인, Error, Retry 관리 방법
* E-7. Dashboard — 평가 결과 시각화 및 분석 방법
