모델 제출물의 검사와 승인 상태

Modeling Objective 검사는 후보 모델의 품질 조건과 검토 토론을 관리합니다. 파이프라인 팀의 smoke test 확인, 데이터 과학 팀의 지표 검토, 윤리 검토자의 데이터 균형 및 공정성 검토처럼 서로 다른 책임을 별도 검사로 나눌 수 있습니다.

모든 검사에 승인해야만 릴리스를 생성할 수 있는 구조는 아닙니다. 검사 상태와 논의 결과를 확인하는 운영 절차 및 릴리스 권한을 함께 관리해야 합니다.

검사 설정

목표 오른쪽 사이드바의 Settings > Checks에서 이름, 설명과 승인할 수 있는 사용자 또는 그룹을 지정합니다. 예를 들어 pcl-team 또는 Administrators 그룹을 지정하면 두 그룹 중 누구라도 승인하여 해당 검사를 승인 상태로 만들 수 있습니다.

필요한 검사들을 추가하면 목표의 모든 모델 제출물에 검토할 항목으로 나타납니다.

제출물별 검토

모델 제출 페이지의 Checks에서 승인, 거부 또는 댓글을 남깁니다. 지표 화면 같은 첨부 자료를 추가하거나 사용자 그룹을 태그하여 논의를 이어갈 수 있습니다. 항목별 토론을 분리하면 각 검토자의 판단과 다음 모델 개선에 필요한 피드백을 구분할 수 있습니다.

평가 결과를 사용하는 자동 검사

입력 데이터셋과 평가 라이브러리의 지표 조건으로 검사 상태를 정할 수도 있습니다.

선택할 수 있는 데이터셋과 평가 라이브러리는 목표의 평가 대시보드 구성에서 가져옵니다. 해당 대시보드에서 빌드한 지표를 사용합니다.

검사 보관

Settings에서 검사 옆의 disable 아이콘으로 보관할 수 있습니다. 보관한 검사는 제출물의 기본 검사 보기에 나타나지 않지만 댓글과 승인 이력은 삭제하지 않습니다. 제출물 Checks의 View archive에서 이전 기록을 확인합니다.

상태로 후보 필터링

Models > All models에서 제출물과 전체 검사 상태를 확인합니다. 왼쪽 Check status에서 특정 검사와 상태를 선택하여 모두 통과한 후보 또는 검토 대기 중인 후보를 찾을 수 있습니다.