데이터 연결 방식 선택

Foundry에 데이터를 연결할 때에는 원천 시스템, 데이터 형식, 갱신 방식에 맞는 수단을 선택합니다. 연결 대상에는 클라우드 객체 저장소, 파일시스템, 데이터베이스와 데이터 웨어하우스가 포함됩니다.

Data Connection

Data Connection은 외부 시스템에 대한 연결과 수집 구성을 관리합니다. 배치 동기화, 스트리밍 동기화, 미디어 동기화, 변경 데이터 캡처(CDC) 동기화를 실행하거나 가상 테이블을 사용할 수 있습니다. 가상 테이블은 외부 테이블을 가리키는 리소스이므로, 모든 연결이 데이터를 Foundry로 복사하는 것은 아닙니다.

데이터셋으로 수집하는 경우에는 트랜잭션을 통해 개별 버전을 관리합니다. 어떤 동기화 작업이 어느 데이터 버전을 생성했는지 계보를 추적할 수 있습니다. 매번 전체 데이터를 적재할 수 없는 원천에서는 필요한 데이터만 동기화하는 구성을 사용합니다.

동기화의 조회와 편집 권한은 세분화할 수 있습니다. 개별 동기화나 동기화 모음을 특정 팀에만 공개하거나 편집 가능하게 설정하며, 역할 기반 또는 분류 기반 접근 제어를 적용합니다. 여러 팀이 수집 작업을 분담하더라도 원천 시스템과 데이터에 필요한 보안 경계를 유지해야 합니다.

동기화 메타데이터는 실제 동기화 정의와 독립적으로 관리할 수 있습니다. 새 구성을 브랜치에서 분리해 시험한 뒤 반영하면 하위 변환 작업에 바로 영향을 주지 않고 변경을 검토할 수 있습니다.

HyperAuto

HyperAuto는 소프트웨어 정의 데이터 통합(Software-Defined Data Integration, SDDI)을 지원합니다. 일반적인 ERP와 CRM 시스템에 연결한 뒤, 데이터를 정제하고 공통 형식으로 정규화하며 서로 조화시키는 파이프라인을 프로그램 방식으로 생성합니다.

생성된 데이터 자산은 온톨로지의 입력으로 사용할 수 있습니다. 원천 테이블을 개별적으로 복사하는 작업에 더해 공통 업무 데이터 모델로 연결하는 파이프라인이 필요한 경우에 검토합니다.

외부 Python 변환

REST API를 사용해 외부 시스템의 데이터를 정기적으로 수집하거나 Foundry 데이터를 내보낼 때에는 Code Repositories에서 외부 Python 변환을 작성할 수 있습니다. 외부 연결을 코드로 구성하는 데 권장되는 경로입니다.

변환에 데이터셋 입력과 미디어 집합 출력을 추가할 수도 있습니다. 외부 API와의 통신뿐 아니라 Foundry 내부 데이터 처리와 연결되는 입출력까지 변환에 선언합니다. API 호출에 필요한 인증 정보와 외부 통신 설정은 해당 소스의 접근 조건을 따라야 합니다.