2025년 9월 23일: 고성능 아키텍처를 사용하는 Snowpipe Streaming(일반 공급)

이제 Snowpipe Streaming을 위한 고성능 아키텍처가 AWS의 모든 계정에 일반 공급으로 제공됩니다. 이 새로운 아키텍처는 처리량이 높고 대기 시간이 짧은 대규모 실시간 데이터 수집을 위해 처음부터 설계되었습니다.

주요 기능 및 이점

높은 성능과 짧은 대기 시간: 테이블당 초당 최대 10GB의 속도로 데이터를 수집하며, 수집에서 쿼리까지의 대기 시간은 일반적으로 10초 미만입니다.

다국어 클라이언트 지원: 효율성을 위해 공유된 Rust 코어를 기반으로 구축된 새로운 고성능 Java 및 Python SDKs를 사용합니다. REST API는 경량 및 서버리스 수집 워크로드에도 사용할 수 있습니다.

단순화된 데이터 파이프라인: PIPE 오브젝트를 사용하여 수집 논리를 중앙 집중화합니다. 새로운 아키텍처는 스키마 유효성 검사를 서버 측으로 이동하고 익숙한 COPY 명령 구문을 사용하여 진행 중인 데이터 변환을 지원해 클라이언트 측 복잡성을 줄입니다.

비용 효율성 개선: 예측 가능한 비용을 제공하는 새로운 처리량 기반 가격 모델의 이점을 누릴 수 있습니다.

클래식 아키텍처와의 주요 차이점

이 새로운 아키텍처에서는 새로운 SDKs 또는 REST API를 사용해야 합니다.. 이제 변환 및 스키마 유효성 검사를 포함한 모든 수집 구성은 테이블로의 모든 스트리밍 데이터의 진입점 역할을 하는 서버 측 PIPE 오브젝트를 통해 관리됩니다.

언어: 한국어