스트리밍 데이터셋 API (V2)
Foundry 스트림은 콜드 저장소 역할의 스트리밍 데이터셋과 최근 데이터를 담는 핫 버퍼로 구성됩니다. 초 단위 지연이 필요한 지속적인 운영 데이터 분석과 처리에 사용합니다. 저장과 일관성의 범위는 스트림의 저장 구조를 따릅니다.
스트리밍 데이터셋의 각 브랜치에는 활성 스트림이 하나 있을 수 있습니다. Create Streaming Dataset은 데이터셋과 초기 스트림을 함께 생성하며, 기존 데이터셋의 새 브랜치에는 Create Stream을 사용합니다.
생성할 때 실제 상위 폴더, 이름과 스키마를 지정합니다. 사용자 폴더에는 스트리밍 데이터셋을 생성할 수 없습니다. 초기 브랜치를 생략하면 기본 브랜치가 선택되며 대부분의 플랫폼 인스턴스에서는 master입니다.
파티션 키는 같은 키의 레코드를 묶어 처리 순서를 유지하는 설정입니다. 키만 지정하여 중복을 제거하지는 않습니다. 전체 행을 받아 최신 상태를 결정해야 한다면 스키마의 CDC 구성도 함께 사용합니다.