> For the complete documentation index, see [llms.txt](https://docs.datumo.com/llms.txt). Markdown versions of documentation pages are available by appending `.md` to page URLs; this page is available as [Markdown](https://docs.datumo.com/documentation/evaluation-lab/undefined-1/1.-task.md).

# 1. Task 생성 및 설정

> Human Red Teaming을 시작하려면 먼저 Task를 생성해야 합니다. Task는 Target Model, Objective, Judge으로 구성됩니다.

***

### 화면 구성 <a href="#undefined" id="undefined"></a>

#### 메뉴 진입 <a href="#id-1" id="id-1"></a>

좌측 메뉴에서 Evaluation Lab을 클릭하면 Task 목록 페이지가 표시됩니다. 우측 상단 **+ New Task** 버튼을 클릭하여 생성을 시작합니다.

<figure><img src="/files/zkbO8tB5WDds5zTQQwVG" alt=""><figcaption></figcaption></figure>

***

#### 1) Task 기본 정보 <a href="#id-1-risk-taxonomy-architecture" id="id-1-risk-taxonomy-architecture"></a>

<figure><img src="/files/fhndoo41YYhcEIeZ973g" alt=""><figcaption></figcaption></figure>

Task Name과 Target Model을 입력합니다.

* Task Name: 필수 입력. 미입력 시 Next 버튼 비활성화
* Target Model: 평가할 모델 버전 선택. 필수 선택
* Description: 선택 입력

#### 2) Judge 및 Objective 설정 <a href="#id-2-dataset" id="id-2-dataset"></a>

<figure><img src="/files/0B0OVstooS0ecsiYwfmY" alt=""><figcaption></figcaption></figure>

**1) Default Judge 선택**

Task 전체에 적용할 기본 Judge를 선택합니다.

| Judge 종류        | 설명                 |
| --------------- | ------------------ |
| Preset Rubric   | 사전 정의된 안전성 기준 중 선택 |
| Custom Rubric   | 관리자가 직접 평가 기준 작성   |
| Self Evaluation | 테스터가 공격 결과를 직접 판단  |

**2) Objective 설정**

<figure><img src="/files/pSVitGEK9AxtVde1KjCj" alt=""><figcaption></figcaption></figure>

각 Objective는 테스터가 달성해야 할 공격 목표입니다.

* Objective 제목: 필수 입력
* Description : 해당 Objective의 설명
* Note to Tester : 성 공적인 공격의 기대 응답 (선택)
* Judge Edit : Objective별로 Default Judge와 다른 Judge 설정 가능
* Attack Success Threshold: Rubric 기준 성공 판정 기준 설정 (e.g. 3 of 3 criteria)
* Show Rubric to Testers: 테스터에게 Rubric 공개 여부 설정

***

#### **3) 확인 및 생성** <a href="#id-4-dataset" id="id-4-dataset"></a>

입력 내용을 최종 확인 후 Task를 생성합니다. 생성 즉시 Active한 상태로 테스터의 Annotation Queue에 노출됩니다.