23 septembre 2025 : Snowpipe Streaming avec une architecture haute performance (Mise à disposition générale)

L’architecture hautes performances pour Snowpipe Streaming est désormais mise à la disposition générale pour tous les comptes sur AWS. Cette nouvelle architecture est conçue dès le départ pour l’ingestion de données à grande échelle et en temps réel avec un débit élevé et une faible latence.

Fonctions clés et avantages

Hautes performances et faible latence : ingérez des données jusqu’à 10 GB par seconde et par table, avec des latences d’ingestion à requête généralement inférieures à 10 secondes.

Prise en charge client multilingue : utilisez des nouveaux SDKs Java et Python hautes performances, construits sur un cœur de Rust partagé pour plus d’efficacité. Une API REST est également disponible pour les charges de travail d’ingestion légères et sans serveur.

Pipelines de données simplifiés : centralisez votre logique d’ingestion à l’aide de l’objet PIPE. La nouvelle architecture déplace la validation des schémas vers le côté serveur et prend en charge les transformations de données en cours à l’aide de la syntaxe de commande familière COPY, réduisant ainsi la complexité côté client.

Amélioration du rapport coût-efficacité : bénéficiez d’un nouveau modèle de tarif basé sur le débit qui fournit des coûts prévisibles.

Différence majeure par rapport à l’architecture classique

Cette nouvelle architecture nécessite l’utilisation de nouveaux SDKs ou de l’ APIREST. L’ensemble de la configuration de l’ingestion, y compris les transformations et la validation des schémas, est désormais gérée via l’objetPIPE côté serveur, qui sert de point d’entrée pour toutes les données en continu dans une table.