Compreensão da inicialização e atualização de tabelas dinâmicas¶

Compreensão da inicialização de tabelas dinâmicas¶

Quando você cria uma tabela dinâmica, a atualização inicial ocorre de forma síncrona na criação ou em um horário programado. O preenchimento inicial de dados, ou inicialização, depende de quando a atualização inicial ocorre.

As tabelas dinâmicas são atualizadas com base no atraso de destino especificado, que define o atraso máximo permitido entre as atualizações das tabelas base e o conteúdo da tabela dinâmica. Se você definir INITIALIZE = ON_CREATE (padrão), a tabela será inicializada imediatamente. Se você definir INITIALIZE = ON_SCHEDULE, a inicialização ocorrerá dentro do período de atraso de destino especificado.

Por exemplo, considere uma tabela dinâmica, DT1, com um atraso de destino de 30 minutos. O preenchimento inicial de dados para DT1 pode ocorrer da seguinte forma:

• Se DT1 estiver configurada para ser atualizada de forma síncrona na criação (ON_CREATE), ela será inicializada na criação.

• Se DT1 estiver configurada para ser atualizada em um horário programado (ON_SCHEDULE), ela será inicializada em 30 minutos.

Em cenários com dependências downstream, o comportamento de atualização depende das dependências. Por exemplo, se a tabela dinâmica DT1 tiver um atraso de destino downstream e DT2, que depende de DT1, tiver um atraso de destino de 30 minutos, DT1 será atualizada somente quando DT2 for atualizada.

Para DT1:

• Se for definido para atualizar de forma síncrona na criação, ela será inicializada imediatamente. Se a inicialização falhar, o processo de criação será interrompido, fornecendo feedback imediato sobre quaisquer erros.

• Se for definida para atualizar em um horário programado, a inicialização dependerá de quando DT2 for atualizada.

A inicialização pode levar algum tempo, dependendo da quantidade de dados digitalizados. Para acompanhar o progresso, consulte Solução de problemas de criação de tabela dinâmica.

Entendendo as opções de atualização manual e programada¶

As tabelas dinâmicas são atualizadas em um cronograma determinado pelo atraso de destino. Toda vez que uma tabela dinâmica é lida, a atualização dos dados está dentro do período de tempo definido pelo atraso de destino.

Você pode atualizar manualmente suas tabelas dinâmicas para obter os dados mais recentes usando o comando ALTER DYNAMIC TABLE … REFRESH ou Snowsight. Para obter mais informações, consulte Atualize manualmente as tabelas dinâmicas.

Os tempos limite de atualização de tabela dinâmica são controlados pelo parâmetro STATEMENT_TIMEOUT_IN_SECONDS, que define a duração máxima permitida no nível da conta ou do warehouse antes que uma atualização seja automaticamente cancelada.

CREATE TASK my_task
  SCHEDULE = 'USING CRON <expr> <time_zone>'
  AS
    ALTER DYNAMIC TABLE my_dynamic_table REFRESH;

Modos de atualização de tabelas dinâmicas¶

As tabelas dinâmicas oferecem suporte a dois modos de atualização: incremental e total. Você pode definir o modo de atualização como AUTO ou defini-lo explicitamente:

• Modo de atualização AUTO: quando você usa o parâmetro AUTO, o Snowflake seleciona automaticamente o modo de atualização mais econômico e eficiente em termos de tempo com base na complexidade da consulta, nas construções compatíveis, nos operadores, nas funções e no desempenho esperado. Se a atualização incremental não for compatível ou tiver um desempenho ruim, o Snowflake seleciona automaticamente a atualização completa.

• Modo de atualização incremental: esse modo analisa a consulta da tabela dinâmica e calcula as alterações desde a última atualização. Em seguida, ele mescla essas alterações na tabela.

• Modo de atualização completa: esse modo executa a consulta da tabela dinâmica e substitui completamente os resultados materializados anteriormente.

Após criar uma tabela dinâmica, você pode monitorar a tabela para determinar se atualizações incrementais ou completas são usadas para atualizar essa tabela.

SHOW DYNAMIC TABLES;

Como os dados são atualizados quando uma tabela dinâmica depende de outras tabelas dinâmicas¶

Quando o atraso de uma tabela dinâmica é definido como uma medida de tempo, o processo de atualização automatizado programa as atualizações para melhor atender aos tempos de atraso de destino.

Para manter os dados consistentes nos casos em que uma tabela dinâmica depende de outra, o processo atualiza todas as tabelas dinâmicas em uma conta em horários compatíveis. O momento das atualizações menos frequentes coincide com o momento das atualizações mais frequentes. Se as atualizações demorarem muito, o agendador poderá ignorar as atualizações para tentar se manter atualizado. No entanto, o isolamento do instantâneo é preservado.

Por exemplo, suponha que a tabela dinâmica DT1 tenha um atraso de destino de dois minutos e consulte a tabela dinâmica DT2, que tem um atraso de destino de um minuto. O processo pode determinar que DT1 deve ser atualizada a cada 96 segundos e DT2 a cada 48 segundos. Como resultado, o processo pode aplicar o seguinte cronograma:

Isso significa que, a qualquer momento, ao consultar um conjunto de tabelas dinâmicas que dependem umas das outras, você está consultando o mesmo “instantâneo” dos dados nessas tabelas.

Observe que a meta de atraso de uma tabela dinâmica não pode ser menor que a meta de atraso das tabelas dinâmicas das quais ela depende. Por exemplo, suponha que você especifique o seguinte:

• DT1 consulta as tabelas dinâmicas DT2 e DT3.

• DT2 tem um atraso de destino de cinco minutos.

• DT3 tem um atraso de destino de um minuto.

Isso significa que o tempo de atraso de destino para DT1 não deve ser inferior a cinco minutos (ou seja, não deve ser inferior ao maior dos tempos de atraso para DT2 e DT3).

Se você definir o atraso para DT1 para cinco minutos, o processo define um cronograma de atualização com essas metas:

• Atualize a DT3 com frequência suficiente para manter o atraso abaixo de um minuto.

• Atualize DT1 e DT2 juntas e com frequência suficiente para manter seus atrasos abaixo de cinco minutos.

• Certifique-se de que a atualização de DT1 e DT2 coincida com uma atualização de DT3 para garantir o isolamento do instantâneo.

Como compreender os efeitos das alterações nas colunas das tabelas de base¶

Quando os objetos subjacentes associados a uma tabela dinâmica mudam, os seguintes comportamentos se aplicam:

Práticas recomendadas para atualização de tabelas dinâmicas¶