23 septembre 2025 : Snowpipe Streaming avec une architecture haute performance (Mise à disposition générale)¶
L’architecture hautes performances pour Snowpipe Streaming est désormais mise à la disposition générale pour tous les comptes sur AWS. Cette nouvelle architecture est conçue dès le départ pour l’ingestion de données à grande échelle et en temps réel avec un débit élevé et une faible latence.
Fonctions clés et avantages¶
Hautes performances et faible latence : ingérez des données jusqu’à 10 GB par seconde et par table, avec des latences d’ingestion à requête généralement inférieures à 10 secondes.
Prise en charge client multilingue : utilisez des nouveaux SDKs Java et Python hautes performances, construits sur un cœur de Rust partagé pour plus d’efficacité. Une API REST est également disponible pour les charges de travail d’ingestion légères et sans serveur.
Pipelines de données simplifiés : centralisez votre logique d’ingestion à l’aide de l’objet PIPE. La nouvelle architecture déplace la validation des schémas vers le côté serveur et prend en charge les transformations de données en cours à l’aide de la syntaxe de commande familière COPY, réduisant ainsi la complexité côté client.
Amélioration du rapport coût-efficacité : bénéficiez d’un nouveau modèle de tarif basé sur le débit qui fournit des coûts prévisibles.
Différence majeure par rapport à l’architecture classique¶
Cette nouvelle architecture nécessite l’utilisation de nouveaux SDKs ou de l’ APIREST. L’ensemble de la configuration de l’ingestion, y compris les transformations et la validation des schémas, est désormais gérée via l’objetPIPE côté serveur, qui sert de point d’entrée pour toutes les données en continu dans une table.
Cas d’utilisation recommandés¶
Cette architecture est recommandée pour les charges de travail en continu cohérentes et à volume élevé, telles que l’alimentation de tableaux de bord d’analyse en temps réel, l’analyse des journaux et des événements, et l’intégration de données à partir des appareils IoT.
Pour plus d’informations, voir Snowpipe Streaming : Architecture haute performance.