모델 평가 결과 보기와 실행 일정

게시한 평가는 모델 페이지의 Evaluations 탭에서 확인합니다. 왼쪽 사이드바의 평가 집합을 선택하면 Overview에 그 집합의 평가가 표시됩니다.

기본 목록은 모든 브랜치의 평가를 모델 버전별로 묶습니다. 그룹은 평가 대상 모델 버전의 생성 시각을 기준으로 최신순입니다. 표 위의 Branch로 특정 브랜치를 필터링하고 Group by로 그룹 기준을 바꿉니다.

지표 선택과 비교

평가 행 위에 포인터를 올리고 Actions > View metrics를 선택합니다.

Metrics 탭에 해당 평가의 지표가 나타납니다. Compare evaluations에서 평가를 추가하여 비교합니다. 선택기는 Overview와 마찬가지로 모델 버전별 그룹을 최신순으로 나열합니다.

선택한 평가 위에 포인터를 올리면 모델 버전 메타데이터와 해당 모델 버전으로 돌아가는 링크가 표시됩니다.

수동 실행

평가 보기 위쪽의 Run을 선택하면 실행 대화상자가 열립니다. 평가할 정확한 모델 버전을 선택하면 원본 저장소의 최신 평가 로직으로 실행합니다.

일정 구성

헤더의 Actions > Manage schedules에서 일정을 만듭니다. 새 모델 버전을 게시할 때 자동으로 평가하거나 주기적으로 실행하여 드리프트를 조사할 수 있습니다.

Metrics

기록한 숫자 지표를 표로 보여 줍니다. 기본값은 부분집합별 그룹이며 접두사가 없는 지표는 Overall 그룹에 둡니다. Group by로 기준을 바꿀 수 있습니다. 여러 평가를 선택하면 지표를 나란히 표시합니다.

Images

카드 하나가 이미지 하나에 대응합니다. 여러 평가에서 이름이 같은 이미지는 나란히 보여 줍니다. 이미지를 선택하면 확대하고 Download로 저장할 수 있습니다.

Plots

카드 하나가 플롯 하나에 대응합니다. 평가를 비교할 때 이름이 같은 플롯을 나란히 표시합니다. 점 위의 값 확인, 이동과 확대를 사용할 수 있습니다.

Tables

선택한 표는 카드 하나에 표시합니다. 표 이름 선택기로 다른 표를 확인합니다.

각 탭에 자료를 기록하는 log_metric, log_metrics, log_image, log_plot 및 log_table은 평가 Python API에서 설명합니다.