Atualizações automatizadas dos metadados da tabela de diretório¶
Você pode atualizar automaticamente os metadados de uma tabela de diretório usando os seguintes serviços de notificação de eventos:
Amazon S3: Amazon SQS (Simple Queue Service)
Google Cloud Storage: Google Cloud Pub/Sub
Microsoft Azure: Microsoft Azure Event Grid
A operação de atualização sincroniza os metadados com o conjunto mais recente de arquivos associados no armazenamento e ocorre em resposta aos seguintes tipos de alterações:
Novos arquivos no caminho são adicionados aos metadados da tabela.
Os arquivos do caminho são atualizados nos metadados da tabela.
Os arquivos que não estão mais no caminho são removidos dos metadados da tabela.
Para definir atualizações automatizadas, consulte o tópico do serviço de armazenamento em nuvem onde seus arquivos estão localizados:
Atualização automática de tabelas de diretório para Amazon S3
Atualização automática de tabelas de diretório para Google Cloud Storage
Atualização automática de tabelas de diretório para o armazenamento de blobs do Azure
Suporte entre nuvens¶
O Snowflake oferece suporte a atualizações automatizadas de tabelas de diretório entre nuvens e regiões.
A tabela a seguir mostra as opções entre nuvens e o Snowflake oferece suporte para atualizações automatizadas de tabelas de diretório, com base na plataforma de nuvem que hospeda sua conta Snowflake.
Amazon S3 |
Google Cloud Storage |
Armazenamento de blobs do Microsoft Azure |
Microsoft Data Lake Storage Gen2 |
Microsoft Azure de uso geral v2 |
|
---|---|---|---|---|---|
Contas hospedadas no AWS |
✔ |
✔ |
✔ |
✔ |
✔ |
Contas hospedadas no GCP |
✔ |
✔ |
✔ |
✔ |
✔ |
Contas hospedadas no Azure |
✔ |
✔ |
✔ |
✔ |
✔ |
Considerações¶
Atualizações automatizadas são baseadas em evento e oferecem melhor desempenho que atualizações manuais para estágios grandes ou em rápido crescimento.
O Snowflake não oferece suporte à atualização de metadados da tabela de diretório em um estágio interno. Você precisa atualizar manualmente os metadados de tabelas de diretório para um estágio interno. Para obter instruções, consulte Atualização manual.
Próximos tópicos: