Platform Docs
Try DatumoEval

개요

평가 현황(Run Activity)과 시드 현황(Seed Activity)으로 진행 상황을 확인하고, 바로가기(Where to go)에서 평가 이력(Runs)·대시보드·시드 관리(Seed Management)로 이동합니다.

1. 평가 진행 현황 확인

①평가 현황

평가 현황은 최근 평가의 상태를 배너로 보여 줍니다. 평가 1개마다 배너 1개가 표시됩니다.

  • 배너는 Error > Pending > Running > Completed > Stopped 순서로 정렬됩니다.
  • 배너를 클릭하면 그 평가만 걸러진 평가 이력 화면으로 이동합니다.
  • 평가와 배치의 관계는 레드티밍 핵심 개념에서 설명합니다.

②평가 배너 상태

평가 상태에 따라 배너 문구와 할 수 있는 일이 다릅니다.

상태표시 조건할 수 있는 일
오류평가에 오류가 1개 이상 있거나 평가를 실행할 수 없습니다.재시도(↺)
설정 필요평가가 시작을 기다리고 있습니다.—
실행 중평가가 실행 중입니다. 진행률과 ETA가 함께 보입니다.—
완료평가가 오류 없이 끝났습니다. ASR이 함께 보입니다.✕ 버튼으로 배너 닫기
중지됨사용자가 평가를 멈췄습니다.✕ 버튼으로 배너 닫기

③재시도

오류 배너의 재시도(↺)를 누르면 오류가 난 부분을 다시 실행합니다.

  • 평가 하나는 최대 3회까지 재시도할 수 있습니다.
  1. 1-1Overview 열기

    1. 왼쪽 메뉴에서 Overview를 클릭합니다.
    2. Run Activity에서 Run마다 배너 상태를 확인합니다.

    배너는 Error > Pending > Running > Completed > Stopped 순서로 정렬됩니다.

  2. 1-2Error 재시도

    1. Error 배너에서 Error 개수를 확인합니다.
    2. 배너 오른쪽 재시도(↺)를 클릭합니다.

    재시도는 Run마다 최대 3회입니다. 재시도를 참고하세요.

  3. 1-3Run 목록으로 이동

    1. 확인할 Run 배너를 클릭합니다.

    그 Run만 걸러진 Runs 화면이 열립니다. Runs 화면은 Run 실행 및 결과 확인 문서에서 설명합니다.

  4. 1-4배너 닫기

    1. Completed나 Stopped 배너 오른쪽 ✕를 클릭합니다.

    닫지 않아도 Completed 배너는 36시간 뒤 자동으로 사라집니다.


2. 시드 생성 현황 확인

①시드 현황

시드 현황은 시드 셋을 생성(시드 셋 생성)하는 상태를 배너로 보여 줍니다. 시드 셋 1개마다 배너 1개가 표시됩니다.

  • 배너는 Error > Generating > Generated 순서로 정렬됩니다.
  • 배너를 클릭하면 시드 관리의 그 시드 셋 상세 화면으로 이동합니다.

②시드 배너 상태

상태표시 조건할 수 있는 일
오류시드 생성 중 오류가 났습니다.재시도(↺)
생성 중시드 셋을 만드는 중입니다. 진행률과 생성된 시드 수가 함께 보입니다.—
생성 완료시드 셋 생성이 정상으로 끝났습니다.✕ 버튼으로 배너 닫기
  1. 2-1생성 상태 확인

    1. Seed Activity에서 Seed Set마다 배너 상태를 확인합니다.
    2. Generating 배너에서 진행률과 생성된 Seed 수를 확인합니다.
  2. 2-2Seed Set 열기

    1. Generated 배너를 클릭합니다.

    Seed Management에서 그 Seed Set의 상세 화면이 열립니다.


3. 다른 화면으로 이동

①바로가기

바로가기 영역의 카드를 클릭하면 자주 쓰는 화면으로 바로 이동합니다.

카드이동 위치하는 일
전체 평가 보기평가 이력상태로 필터링하고 평가 상세로 들어갑니다.
심층 분석대시보드여러 평가를 나란히 비교합니다.
시드 관리시드 관리실행에 쓸 시드 셋을 업로드하거나 생성합니다.
  1. 3-1바로가기

    1. 모든 Run을 보려면 Browse all runs를 클릭합니다.
    2. Run 결과를 비교하려면 Analyze deeply를 클릭합니다.
    3. Seed Set을 관리하려면 Manage seeds를 클릭합니다.

자주 묻는 질문

오류 배너에 왜 재시도 아이콘이 없나요?이미 3번 재시도한 평가이기 때문이에요.
원인
평가는 최대 3회까지 재시도할 수 있어요. 3회 뒤에도 오류가 남으면 아이콘이 사라져요.
해결 방법
배너를 클릭해 평가 이력 화면에서 평가 상세를 확인해 주세요. 다시 실행하려면 평가 생성을 새로 만들어 주세요.
배너가 왜 사라졌나요?표시 기간이 지나 자동으로 삭제됐기 때문이에요.
원인
평가의 오류 배너는 72시간, 완료와 생성 완료 배너는 36시간 뒤에 사라져요.
해결 방법
전체 평가 보기나 시드 관리에서 평가와 시드 셋을 확인해 주세요.
시드 현황에 왜 오류가 뜨나요?시드 생성 중 일부가 실패했기 때문이에요.
원인
생성 모델 응답 오류 같은 이유로 시드 일부를 만들지 못하면 오류가 표시돼요.
해결 방법
배너의 재시도(↺)를 누르거나, 시드 관리 상세 화면에서 시드별로 다시 시도해 주세요.

최종 수정일