23 de setembro de 2025: Snowpipe Streaming com arquitetura de alto desempenho (disponibilidade geral)¶
A arquitetura de alto desempenho do Snowpipe Streaming já está disponível para todas as contas na AWS. Essa nova arquitetura foi projetada do zero para ingestão de dados em larga escala e em tempo real, com alto rendimento e baixa latência.
Principais recursos e benefícios¶
Alto desempenho e baixa latência: ingira dados a até 10 GB por segundo por tabela, com latências entre ingestão e consulta normalmente inferiores a 10 segundos.
Suporte a clientes multilíngues: utilize os novos SDKs Java e Python de alto desempenho, construídos em um núcleo Rust compartilhado para maior eficiência. Um REST API também está disponível para cargas de trabalho de ingestão leves e sem servidor.
Pipelines de dados simplificados: centralize sua lógica de ingestão usando o objeto PIPE. A nova arquitetura move a validação de esquemas para o lado do servidor e oferece suporte a transformações de dados em andamento usando a já conhecida sintaxe de comando COPY, reduzindo a complexidade do lado do cliente.
Melhor custo-benefício: aproveite um novo modelo de precificação baseado em rendimento que oferece custos previsíveis.
Principal diferença em relação à arquitetura clássica¶
Essa nova arquitetura requer o uso de novos SDKs ou de REST API. Todas as configurações de ingestão, incluindo transformações e validação de esquema, agora são gerenciadas por meio do objeto PIPE do lado do servidor, que atua como ponto de entrada para todos os dados de streaming em uma tabela.
Casos de uso recomendados¶
Essa arquitetura é recomendada para cargas de trabalho de streaming consistentes e de alto volume, como ativação de painéis de análise em tempo real, análise de logs e eventos e integração de dados de dispositivos de IoT.
Para obter mais informações, consulte Snowpipe Streaming: arquitetura de alto desempenho.