> For the complete documentation index, see [llms.txt](https://docs.datumo.com/llms.txt). Markdown versions of documentation pages are available by appending `.md` to page URLs; this page is available as [Markdown](https://docs.datumo.com/documentation/evaluation/undefined/1.-criteria-and.md). # 1. Criteria 생성 & 관리 ## E-1 Criteria 생성 및 관리 다투모 플랫폼에서 Criteria는 하나의 Application에 대한 평가 체계를 구성하는 단위입니다. 이 문서에서는 새로운 Criteria를 생성하고, Subgroup과 Task를 구성하여 평가 기준을 관리하는 방법을 안내합니다. *** ## Criteria 란? Criteria는 하나의 Application에서 평가를 한 번에 실행할 수 있도록 구성된 평가 체계입니다. 또한 다수의 Task가 모여 있는 상위 개념입니다. *** ## Criteria 생성 및 관리 ### 1. Criteria 생성 새로운 Criteria를 생성할 수 있고, 이 때 빈 템플릿에서 시작할지, 혹은 기본 추천 Task를 기반으로 시작할지를 선택할 수 있습니다. 단, 추천 Task는 Application 및 Module의 설정값에 따라 추천됩니다. `+` 를 클릭하면 새로운 Criteria를 생성할 수 있습니다.
새 Criteria 생성 시 `Criteria Name`을 입력하면 `Complete` 버튼이 활성화됩니다.
기본적으로 Criteria는 Application의 `Initial Criteria Settings`를 기반으로 생성됩니다. `Start from an empty`를 선택하면 기본 추천 Task 없이 빈 Criteria로 생성됩니다. ### 2. Criteria 이름 수정
Criteria Name 옆 수정 아이콘을 클릭합니다.
Criteria Name을 변경하면 `Save` 버튼이 활성화 됩니다.
`Save` 를 눌러 저장하면 Criteria Name이 변경 됩니다. ### 3. Criteria 복사 Criteria는 동일한 Application 내에서만 복제할 수 있습니다.
`Duplicate Criteria` 를 선택합니다.
복제된 Criteria Name은 기존 이름 뒤에 숫자가 붙은 형태로 생성됩니다. 예를 들어 `Default Criteria`를 복제하면 `Default Criteria (1)`로 생성됩니다.\ 동일한 이름의 복제본이 이미 있는 경우, 숫자가 순차적으로 증가하여 생성됩니다.
복제된 Criteria 는 상단 탭에서 확인할 수 있습니다. *** ## Subgroup 생성 및 관리 ### 1. Subgroup 생성
`+ New Subgroup` 버튼을 클릭하면 새로운 Subgroup을 생성할 수 있습니다.
Subgroup Name을 입력하면 `Complete` 버튼이 활성화 됩니다.
Subgroup 생성이 완료되면 생성된 Subgroup이 목록에 추가됩니다.\ 생성 직후에는 사용자가 추가된 위치를 쉽게 확인할 수 있도록 해당 Subgroup 영역이 하이라이트되어 표시됩니다. ### 2. Subgroup Name 수정
`Edit Subgroup` 을 선택하면 Subgroup Name 수정이 가능합니다.
Subgroup 이름을 수정한 후 `Complete` 버튼을 클릭하면 변경 내용이 저장됩니다.\ Subgroup 이름을 모두 삭제하면 `Complete` 버튼이 비활성화되며, 이름을 다시 입력해야 저장할 수 있습니다. ### 3. Subgroup 삭제
`Delete Subgroup` 을 선택합니다.
삭제를 원할 시, `Delete` 를 선택하고 삭제 취소를 원하는 경우 `Cancel` 을 선택합니다. > ⚠️ 주의 > > `Delete`를 하는 경우 속해 있는 Task도 모두 삭제 됩니다. *** ### 🔗 관련 문서 * E-2. Task 관리 — Task 기본 정보, Schema, Metric, Benchmark Set 관리 방법 * E-3. Benchmark Set 관리 — Benchmark Set 업로드 및 AI 기반 데이터 생성 방법 * E-4. Metric 추가 및 관리 — Metric 생성, Key Mapping, Preview 설정 방법 * E-5. Run Eval — 평가 Run 실행 및 이력 확인 방법 * E-6. Eval Result — 평가 결과 확인, Error, Retry 관리 방법 * E-7. Dashboard — 평가 결과 시각화 및 분석 방법