Automatisation du chargement continu des données à l’aide de la messagerie Cloud

Les chargements de données automatisés exploitent les notifications d’événement pour le stockage dans le Cloud pour informer Snowpipe de l’arrivée de nouveaux fichiers de données à charger. Snowpipe copie les fichiers dans une file d’attente, à partir de laquelle ils sont chargés dans la table cible de manière continue, sans serveur, en fonction de paramètres définis dans un objet de canal spécifié.

Note

Snowpipe automatisé utilise des notifications d’événement pour déterminer quand de nouveaux fichiers arrivent dans le stockage Cloud surveillé et sont prêts à être chargés. Les notifications identifient l’événement de stockage Cloud et incluent une liste des noms de fichiers. Elles n’incluent pas les données réelles dans les fichiers.

Le tableau suivant indique les services de stockage Cloud pris en charge pour le chargement de données automatique dans votre compte Snowflake à l’aide de notifications d’événements de stockage Cloud, en fonction de la plate-forme Cloud qui héberge votre compte :

Hôte de compte Snowflake

Amazon S3

Google Cloud Storage

Stockage Microsoft Azure Blob

Microsoft Data Lake Storage Gen2

Microsoft Azure à usage général v2

Amazon Web Services

Google Cloud Platform

Microsoft Azure

Chapitres suivants :