Data Lineage 운영 질문

객체 유형의 기반 데이터와 writeback 데이터는 어디서 보는가

오른쪽 검색 패널에서 Object types로 범위를 좁히고 객체 유형을 찾아 그래프에 추가합니다. 유형 노드 왼쪽 화살표로 조상 노드를 펼칩니다.

단일 기반 데이터셋을 사용하는 기본 구성에서는 읽기 전용 객체 유형에 기반 노드 하나가 나타나고, writeback 데이터셋을 사용하는 구성에서는 기반 데이터셋과 writeback 데이터셋 두 노드를 볼 수 있습니다. 이 표시 예시를 모든 온톨로지 저장 구성의 고정 노드 수로 해석하지는 않습니다.

Node color options > Resource overview를 선택하면 writeback 데이터셋을 범례의 색상으로 구분할 수 있습니다. 기반 스키마 데이터셋의 색상은 생성 변환 유형에 따릅니다. 관련 데이터셋의 오른쪽 위에는 작은 지구본 아이콘도 표시됩니다.

같은 열을 가진 데이터셋은 어떻게 찾는가

조사할 데이터셋을 먼저 그래프에 추가하고 Tools의 Select 또는 Drag select로 대상을 선택합니다. 오른쪽 Histogram of selection properties의 Frequent columns에서 열 이름을 고르면 선택한 범위 중 그 열을 가진 데이터셋이 강조됩니다.

마지막 수정자를 어떻게 찾는가

대상 데이터셋을 그래프에 추가하여 선택한 뒤 Histogram of selection properties를 엽니다. Last Modified 영역에서 마지막 수정 사용자들을 확인하고 사용자를 선택하면 그 사람이 마지막으로 수정한 데이터셋이 강조됩니다.

열린 트랜잭션이 있는 데이터셋을 찾으려면

오른쪽 위 색상 메뉴에서 Build Status를 선택합니다. 현재 실행 중인 데이터셋을 찾으면 진행 중인 작업의 열린 트랜잭션을 조사할 수 있습니다. 선택 노드의 History와 빌드 상세에서 해당 실행을 확인합니다.

파이프라인의 리소스가 어느 폴더에 모여 있는가

관심 있는 데이터셋을 모두 그래프에 추가하고 선택한 뒤 Histogram의 Frequent folder paths를 봅니다. 자주 등장하는 Foundry 폴더 경로가 표시됩니다.

경로를 선택하면 그 위치의 리소스가 강조되고 포인터를 올리면 전체 경로를 확인합니다. 여러 속성을 선택하여 조건에 맞는 리소스를 강조할 수도 있습니다. 이 목록은 Foundry의 논리적 폴더 위치이며 가상 테이블의 물리 저장소를 표시하는 Storage 색상과 다릅니다.

저장하지 않은 그래프를 공유할 수 있는가

오른쪽 위 Save 근처의 메뉴에서 quick share link를 만들 수 있습니다. 링크는 읽기 전용이며 같은 조직 사용자 사이에서 사용합니다. 조직을 넘어 공유하려면 양쪽 조직이 접근 가능한 공유 프로젝트에 그래프를 저장합니다.

데이터셋이 최신이 아닌 이유를 찾으려면

현재 데이터셋의 빌드 실패, 아직 갱신하지 않은 상위 데이터셋과 원천의 최신 데이터 미도착을 구분합니다.

대상 노드를 우클릭하여 Expand node를 선택한 뒤 Expand parents의 이중 왼쪽 화살표로 모든 조상을 펼칩니다. Node color options > Build status로 전체 경로의 실행 상태를 보고 실패가 시작된 지점을 찾습니다. 데이터 및 로직의 최신성 차이는 Out-of-date 색상으로 따로 확인할 수 있습니다.