Platform Docs
Try DatumoEval

모델 설정

설정 > 애플리케이션의 레드티밍 모델 설정(Model Setting)에서 레드티밍에 쓰는 기본 평가 모델(Judge Model), 기본 시드 생성 모델, 알고리즘별 기본 설정을 정합니다.

레드티밍 모델 설정은 설정 > 애플리케이션 > Red Teaming Model Setting에서 합니다. 왼쪽 메뉴의 애플리케이션 설정으로 설정을 연 뒤 애플리케이션 영역에서 고릅니다.

1. 기본 모델 선택

①이 화면에서 정하는 값

여기서 정한 값은 평가 생성과 시드 생성 화면의 처음 값이 됩니다. 같은 설정을 매번 다시 입력하지 않아도 됩니다.

항목하는 일처음 값으로 쓰이는 곳
기본 평가 모델각 시도를 안전/Unsafe로 판정평가 생성의 평가 모델
기본 시드 생성 모델택소노미로 새 시드를 생성시드 셋 생성의 생성 모델
알고리즘별 기본 구성알고리즘별 공격 모델, Scorer, 파라미터Advanced Setup의 설정
  • 목록에는 워크스페이스에 등록된 생성·평가 모델이 보입니다.
  • 처음에는 생성·평가 모델 페이지에 가장 먼저 등록한 모델이 선택되어 있습니다.
  • 각 값은 따로 바꿀 수 있습니다.

②미리 준비할 것

생성·평가 모델이 1개 이상 등록되어 있어야 합니다. 방법은 생성·평가 모델 등록에서 설명합니다.

  • 등록된 모델이 없으면 경고 배너가 보이고 모든 값이 흐리게 바뀌어 고를 수 없습니다.
  • Go to Gen & Judge Model Setting →을 누르면 설정의 생성·평가 모델 영역으로 이동합니다.

모델 목록은 워크스페이스 단위로 관리합니다. 모델 관리 (Gen & Judge) →을 누르면 설정 > 워크스페이스 > 모델 관리 (Gen & Judge)로 이동합니다.

  1. 1-1Model Setting 열기

    1. Settings 왼쪽 메뉴의 Application 영역에서 Red Teaming Model Setting을 클릭합니다.
    2. 모델 관리 위치 안내를 확인합니다. 모델을 추가하려면 Workspace Gen & Judge Model →을 클릭합니다.

    경고 배너가 보이면 미리 준비할 것을 먼저 확인하세요.

  2. 1-2기본 모델 고르기

    1. Default judge model을 고릅니다.
    2. Default seed-generation model을 고릅니다.

    각 값이 어디에 쓰이는지는 이 화면에서 정하는 값에 있습니다.


2. 알고리즘별 기본값 설정

①알고리즘 카드

알고리즘별 기본 구성에는 알고리즘마다 카드가 있습니다. 이 값은 Advanced Setup의 알고리즘 단계 설정 처음 값이 됩니다.

항목설명
공격 모델공격 질의를 만드는 모델
점수공격 결과를 채점하는 모델
파라미터알고리즘마다 다릅니다(예: max_iterations, threshold, max_depth, max_turn).
  • 입력칸 오른쪽에 허용 최댓값(예: Max: 150)이 보입니다.
  • 파라미터 이름 옆 ⓘ에 마우스를 올리면 파라미터 설명이 보입니다.
  • 공격 모델, 점수 옆 ⓘ에는 역할 설명과 Recommended Model이 보입니다.
  1. 2-1카드 값 정하기

    1. 설정할 알고리즘 카드를 찾습니다.
    2. Attacker와 Scorer 모델을 고릅니다.
    3. 파라미터 값을 입력합니다. 오른쪽 최댓값을 넘지 않게 합니다.
    4. ⓘ에 마우스를 올려 설명과 Recommended Model을 확인합니다.

3. 변경사항 저장

①저장

값을 바꾸면 오른쪽 위 저장이 활성화됩니다.

  • 저장을 눌러야 바뀐 값이 평가 생성과 시드 생성 화면에 적용됩니다.
  • 저장하지 않고 다른 탭이나 페이지로 이동하면 확인 창이 열립니다.
  1. 3-1저장

    1. 오른쪽 위 Save를 클릭합니다.

    저장하지 않고 나가면 확인 창이 열립니다.


자주 묻는 질문

설정값이 왜 흐리게 보이고 바꿀 수 없나요?등록된 생성·평가 모델이 없기 때문이에요.
원인
고를 모델이 없으면 기본값을 정할 수 없어요.
해결 방법
배너의 Go to Gen & Judge Model Setting →을 눌러 모델을 등록해 주세요.
다른 화면으로 가려는데 왜 확인 창이 뜨나요?바꾼 값을 저장하지 않았기 때문이에요.
원인
저장하지 않은 변경이 사라지지 않도록 한 번 더 물어봐요.
해결 방법
취소로 돌아가 저장을 누른 뒤 이동해 주세요.
모델 설정에서 바꾼 값이 왜 평가 생성에 보이지 않나요?저장하지 않았거나, 평가 생성에서 값을 직접 바꿨기 때문이에요.
원인
모델 설정 값은 평가 생성을 새로 시작할 때 처음 값으로만 들어가요.
해결 방법
저장을 눌렀는지 확인하고 평가 생성을 새로 시작해 주세요.

최종 수정일