Workflow Lineage의 AIP 지표
Workshop이나 함수 저장소에서 macOS는 Cmd+I, Windows는 Ctrl+I로 관련 Workflow Lineage 그래프를 엽니다. 노드와 아래 패널에서 사용량, 실행 횟수와 시간 지표를 확인할 수 있습니다.
모델 요청과 토큰
Model usage 색상 모드에서 지표와 집계 범위를 선택합니다.
| 범위 | 의미 |
|---|---|
| Successful | 선택한 모델의 성공한 요청 또는 해당 범위의 토큰 사용량 |
| Attempted | 성공과 호출 제한을 포함한 시도 전체 |
| Rate-limited | 호출 제한에 걸린 시도 |
Model requests는 모델 노드의 해당 요청 수를 보여 줍니다.
Token usage는 Workshop, Automate와 타사 OSDK 애플리케이션의 토큰 수를 보여 줍니다. Logic 노드에 표시하는 토큰은 Logic 애플리케이션의 디버거에서 사용한 토큰입니다.
시간별 추이
Workshop, 자동화 또는 타사 OSDK 앱 노드를 선택하고 아래 Model usage charts를 열면 요청 수나 토큰 수의 선 그래프를 볼 수 있습니다. 그래프에 포인터를 올리면 특정 리소스의 값을 확인하며, 색상 범례와 같은 필터를 사용할 수 있습니다.
함수 지표
Logic 함수 노드를 선택하고 Function metrics를 엽니다.
- Executions는 시간별 성공 및 실패 실행 수입니다.
- P95 duration은 최근 실행에 더 큰 가중치를 둔 실행 시간의 이동 95백분위수입니다.
Workshop 주간 사용량
Workshop 노드를 선택하고 아래의 주간 조회 패널을 엽니다. 화면에는 Weekly views 또는 Weekly Usage로 표시될 수 있습니다. 선택한 모듈의 총조회와 고유 조회 지표를 최근 4주 동안 주별로 묶은 막대그래프로 표시합니다.
세부 실행 이력, 분산 추적과 로그는 온톨로지 및 AIP 관측에서 조사합니다.