Platform Docs
Try DatumoEval

시드 관리

레드티밍에 쓸 시드 셋을 조회하고, LLM으로 생성하거나 파일로 업로드하고, 상세 화면에서 편집하거나 시드를 추가합니다.

1. 시드 셋 목록 확인

①시드 셋

시드 셋은 공격 시뮬레이션에 쓰는 시드 묶음입니다. 시드마다 택소노미가 붙어 있고, 시드 셋은 도메인 하나에 속합니다. 택소노미 구성은 도메인마다 다릅니다.

  • 목록에는 현재 워크스페이스의 시드 셋이 모두 보입니다.
  • 행을 클릭하면 시드 셋 상세 화면이 열립니다.
  • 시드 셋은 평가 생성의 시드 단계에서 고릅니다. 방법은 평가 이력에서 설명합니다.
열설명
생성일생성일
시드 셋 이름이름
설명설명
도메인속한 도메인
시드 수시드 개수. 생성 중이면 진행 개수가 보입니다.
생성 유형 / 상태생성 방식과 현재 상태

②생성 방식과 상태

유형 · 상태뜻
기본 제공기본 제공 시드 셋. 삭제·추가·수정할 수 없습니다.
업로드 완료파일을 올려 만든 시드 셋
생성 완료생성이 끝난 시드 셋
생성 중생성 중. 로딩 표시가 함께 보입니다.
오류오류가 1개 이상 났습니다. 목록에서 전체를 재시도하거나 상세 화면에서 시드별로 재시도합니다.
업로드 중업로드 중. 흐리게 보이고 들어갈 수 없습니다.

③미리 준비할 것

시드를 LLM으로 생성하려면 생성·평가 모델이 1개 이상 있어야 합니다. 모델이 없으면 경고 배너가 보이고 생성 버튼이 비활성화됩니다. 방법은 생성·평가 모델 등록에서 설명합니다.

  1. 1-1목록 열기

    1. 왼쪽 메뉴 Red Teaming 아래 Seed Management를 클릭합니다.
    2. 열 이름을 확인합니다. 뜻은 Seed Set에 있습니다.
  2. 1-2상태 확인

    1. Generating 행에서 생성 진행 상황을 확인합니다.
    2. Error 행은 Retry로 전체를 다시 시도합니다.
    3. Uploading 행은 업로드가 끝날 때까지 기다립니다.

    상태별 뜻은 생성 방식과 상태를 참고하세요.

  3. 1-3Seed Set 열기

    1. 열어 볼 Seed Set 행을 클릭합니다.

    상세 화면은 4. Seed Set 상세 확인과 편집에서 설명합니다.


2. 시드 셋 생성

①입력 항목

시드 셋 생성을 누르면 생성 화면이 열립니다. 왼쪽에서 설정을 입력하고, 오른쪽 미리보기에서 샘플을 확인한 뒤 전체 데이터를 만듭니다.

영역항목설명
1 기본 정보시드 셋 이름 *시드 셋 이름
설명구분용. 생성 결과에는 영향을 주지 않습니다.
시드 개수 *만들 시드 수. 기본값은 100입니다.
2 도메인 & 택소노미도메인 *지금은 Open Domain만 고를 수 있습니다. Finance, 법적 고지, Commerce는 Coming soon입니다.
택소노미 *택소노미를 하나 이상 골라야 합니다. 택소노미 목록은 도메인마다 다릅니다(Open Domain은 19가지).
3 생성 방식생성 방식 *Datumo Seed Generator Lv.1 또는 Lv.2를 고릅니다.
Lv.2 문서와 캡션Lv.2를 고르면 PDF 1개를 올리고, 이 문서를 어떻게 활용해 시드를 만들지 캡션란에 씁니다. Lv.2에서는 캡션이 필수입니다. 지금은 PDF 1개만 올릴 수 있습니다.
생성 요구사항선택이지만 입력을 권장합니다. 페르소나, 목적, 제약을 한 줄에 하나씩 씁니다.
4 생성 옵션언어 *KR 또는 ENG
생성 모델 *처음 값은 모델 설정의 기본 시드 생성 모델입니다.

②택소노미 비율

택소노미를 고르면 Equal split — about N seeds per taxonomy 안내가 보입니다. 시드는 택소노미마다 같은 수로 나뉩니다.

  • 비율을 직접 정하려면 사용자 지정을 클릭합니다.
  • 택소노미별 비율의 합은 100%여야 합니다.

③샘플과 전체 생성

필수 항목을 모두 입력하면 Generate 15 Sample Data 버튼이 활성화됩니다.

  • 샘플 생성이 끝나면 요약(Generated {N} seeds across {N} taxonomies using {Model}…)과 걸린 시간·비용이 보입니다.
  • 미리보기는 최대 15행입니다. 샘플은 아직 저장되지 않은 상태입니다.
  • 생성에 실패한 행에는 ⚠와 에러 문구가 보입니다. 행의 재시도(↺)로 다시 만듭니다.
  • 에러가 있어도 전체 데이터 생성으로 전체 생성을 진행할 수 있습니다.
  • 전체 생성을 시작하면 목록에 생성 중 상태로 추가됩니다.

④초안

초안은 생성 설정과 그 결과를 묶은 작업본입니다.

  • 생성 화면에 들어가면 Draft #1이 시작됩니다.
  • 초안 이력에서 이전 초안의 설정과 생성된 시드를 확인합니다.
  • Create New Draft를 누르면 현재 설정을 그대로 가져온 새 초안이 만들어집니다.
  1. 2-1생성 화면 열기

    1. 오른쪽 위 Generate Seed Set을 클릭합니다.
    2. Basic Info에 Seed Set Name과 Number of Seeds를 입력합니다.

    항목 뜻은 입력 항목에 있습니다.

  2. 2-2Domain과 Taxonomy

    1. Domain을 고릅니다.
    2. 19가지 Taxonomy 중 하나 이상 고릅니다.
    3. 비율을 바꾸려면 Customize를 클릭해 합이 100%가 되도록 정합니다.

    기본은 Taxonomy마다 같은 수로 나눕니다.

  3. 2-3생성 방식과 옵션

    1. Generation Method를 고릅니다.
    2. Generation Requirements를 입력합니다. 칸을 더하려면 Add Requirements를 클릭합니다.
    3. Language와 Generation Model을 고릅니다.
  4. 2-4샘플 확인

    1. Generate 15 Sample Data를 클릭합니다.
    2. 요약과 걸린 시간·비용을 확인합니다.
    3. ⚠ 행이 있으면 재시도(↺)를 클릭합니다.

    샘플은 아직 저장되지 않습니다.

  5. 2-5전체 생성

    1. Generate Full Data를 클릭합니다.
    2. 확인 창에서 Generate를 클릭합니다.

    목록에 Generating 상태로 추가됩니다.

  6. 2-6Draft 관리

    1. 이전 설정을 보려면 Draft History를 클릭합니다.
    2. 설정을 바꿔 다시 만들려면 Create New Draft를 클릭합니다.

    새 Draft는 현재 설정을 그대로 가져옵니다.


3. 파일로 업로드

①업로드 항목

파일 업로드를 누르면 두 단계로 진행합니다. 파일은 1개만 올릴 수 있습니다.

단계항목설명
1시드 셋 이름 *시드 셋 이름
도메인 *지금은 Open Domain으로 고정됩니다.
설명설명
2컬럼 매핑파일의 열을 seed, taxonomy(필수)에 연결합니다. 나머지 열은 메타데이터로 처리할지 고릅니다.
택소노미 매핑택소노미 열의 고유값마다 도메인의 택소노미를 하나씩 연결합니다.
  • ✦ Automatically map (AI)는 직접 연결하지 않은 값만 채웁니다.
  • 모든 택소노미 값을 연결해야 업로드를 마칠 수 있습니다.
  1. 3-1파일과 기본 정보

    1. 목록 오른쪽 위 Upload File을 클릭합니다.
    2. 파일을 끌어다 놓거나 골라 올립니다.
    3. Seed Set Name을 입력하고 Domain을 확인합니다.
    4. Next를 클릭합니다.

    필수 항목을 모두 입력해야 Next가 활성화됩니다.

  2. 3-2열과 Taxonomy 매핑

    1. seed와 taxonomy에 파일의 열을 연결합니다.
    2. Taxonomy 값마다 연결할 Taxonomy를 고르거나 ✦ Automatically map (AI)를 클릭합니다.
    3. 빈 칸이 없는지 확인하고 Upload를 클릭합니다.

    매핑하지 않은 값이 있으면 업로드를 마칠 수 없습니다.


4. 시드 셋 상세 확인과 편집

①유형별 기능

상세 화면에서 ID, 시드, 택소노미, 메타데이터와 전체 데이터 개수를 확인합니다. 도메인과 택소노미로 거를 수 있습니다.

기능기본 제공업로드 완료 / 생성 완료
내보내기가능가능
삭제버튼 없음가능
시드 생성버튼 없음가능
파일 업로드버튼 없음가능
수정버튼 없음가능

②편집과 시드 추가

  • 수정을 누르면 편집 상태가 됩니다. 고칠 행을 클릭해 시드와 메타데이터는 직접 고치고, 택소노미는 목록에서 바꿉니다.
  • 시드 생성이나 파일 업로드로 기존 시드 셋에 시드를 더합니다. 순서는 새로 만들 때와 같습니다.
  • 기존 설정을 그대로 쓰므로 일부 항목은 보이지 않습니다.
추가 방법보이지 않는 항목
시드 생성시드 셋 이름, 도메인 선택
파일 업로드시드 셋 이름, 설명, 도메인 선택
  1. 4-1상세 확인

    1. 목록에서 Seed Set 행을 클릭합니다.
    2. Seed, Taxonomy, Metadata를 확인합니다.
    3. 아래쪽에서 전체 데이터 개수를 확인합니다.

    Built in Seed Set은 Export만 쓸 수 있습니다.

  2. 4-2편집

    1. Edit을 클릭합니다.
    2. 고칠 행을 클릭해 Seed를 고치거나 Taxonomy를 바꿉니다.
  3. 4-3Seed 추가와 내보내기

    1. Seed를 더 만들려면 Generate Seed를 클릭합니다.
    2. 파일로 더하려면 Upload File을 클릭합니다.
    3. CSV로 받으려면 Export를 클릭합니다.

    추가할 때 보이지 않는 항목은 편집과 Seed 추가에 있습니다.


자주 묻는 질문

시드 셋 생성이 왜 눌리지 않고 경고 배너가 보이나요?등록된 생성·평가 모델이 없기 때문이에요.
원인
시드를 LLM으로 만들려면 생성 모델이 필요해요. 업로드, 수정, 내보내기, 삭제는 그대로 쓸 수 있어요.
해결 방법
배너의 Go to Gen & Judge Model Setting →을 눌러 모델을 등록해 주세요.
Generate 15 Sample Data가 왜 눌리지 않나요?필수 항목을 모두 입력하지 않았기 때문이에요.
원인
시드 셋 이름, 도메인·택소노미, 생성 방식이 모두 있어야 샘플을 만들 수 있어요.
해결 방법
빠진 항목을 입력해 주세요.
Finance, Legal, Commerce는 왜 고를 수 없나요?아직 제공하지 않는 도메인이기 때문이에요.
원인
지금은 Open Domain만 쓸 수 있어요(Coming soon).
해결 방법
Open Domain을 골라 주세요.
미리보기 행에 왜 ⚠가 보이나요?그 행의 샘플을 만들지 못했기 때문이에요.
원인
생성 모델의 응답이 늦거나 실패하면 그 행만 오류가 돼요.
해결 방법
행의 재시도(↺)를 눌러 주세요. 에러가 있어도 전체 생성은 진행할 수 있어요.
업로드 중 상태인 시드 셋에 왜 들어갈 수 없나요?업로드가 아직 끝나지 않았기 때문이에요.
원인
업로드 중인 시드 셋은 흐리게 보이고 열 수 없어요.
해결 방법
업로드가 끝난 뒤 다시 열어 주세요.
업로드를 왜 마칠 수 없나요?매핑하지 않은 택소노미 값이 있기 때문이에요.
원인
파일의 택소노미 값을 모두 도메인의 택소노미에 연결해야 해요.
해결 방법
빈 칸을 채우거나 ✦ Automatically map (AI)를 눌러 주세요.
Built-in 시드 셋에는 왜 수정, 삭제 버튼이 없나요?기본 제공 시드 셋이라 바꿀 수 없기 때문이에요. 내보내기만 쓸 수 있어요.
원인
기본 제공 시드 셋은 삭제·추가·수정할 수 없고 내보내기만 쓸 수 있어요.
해결 방법
내용을 바꾸려면 내보내기로 받은 파일을 고쳐 새 시드 셋으로 올려 주세요.

최종 수정일