Warehouses multicluster¶

O que é um warehouse multicluster?¶

Por padrão, um warehouse virtual consiste em um único cluster de recursos computacionais disponíveis ao warehouse para a execução de consultas. À medida que as consultas são enviadas a um warehouse, ele aloca recursos para cada consulta e começa a executar as consultas. Se não houver recursos suficientes para executar todas as consultas enviadas ao warehouse, o Snowflake enfileira as consultas adicionais até que os recursos necessários se tornem disponíveis.

Com warehouses multicluster, o Snowflake oferece suporte para a alocação, estática ou dinâmica, de clusters adicionais para tornar disponível um maior pool de recursos computacionais. Um warehouse multicluster é definido especificando as seguintes propriedades:

• Número máximo de clusters, maior que 1. O valor mais alto que você pode especificar depende do tamanho do warehouse. Para saber o limite superior do número de clusters para cada tamanho de warehouse, consulte Limite superior do número de clusters para um warehouse multicluster (neste tópico).

• Número mínimo de clusters, igual ou menor que o máximo.

Além disso, warehouses multicluster oferecem suporte para todas as mesmas propriedades e ações que os warehouses de um só cluster, inclusive:

• Especificação do tamanho do warehouse.

• Redimensionamento de um warehouse a qualquer momento.

• Autossuspensão de um warehouse em funcionamento devido a inatividade; observe que isso não se aplica a clusters individuais, mas sim a todo o warehouse multicluster.

• Retomada automática de um warehouse suspenso quando novas consultas são enviadas.

Exemplos de uso de crédito multicluster¶

Os quatro exemplos a seguir ilustram o uso de crédito para um warehouse multicluster. Consulte Uso de crédito do warehouse virtual para ver o número de créditos faturados por hora completa por tamanho de warehouse.

Criação de um warehouse multicluster¶

Você pode criar um warehouse multicluster em Snowsight ou usando o SQL:

Snowsight:

Clique em Admin » Warehouses » + Warehouse

1. Expanda o Advanced Options.

2. Marque a caixa de seleção Multi-cluster Warehouse.

3. No campo Max Clusters, selecione um valor maior que 1.

   Nota

   Atualmente, o valor mais alto que você pode escolher na Snowsight é 10. Os tamanhos máximos mostrados em Limite superior do número de clusters para um warehouse multicluster aplicam-se somente aos comandos CREATE WAREHOUSE e ALTER WAREHOUSE no SQL.

4. No campo Min Clusters, opcionalmente, selecione um valor maior que 1.

5. Insira outras informações para o warehouse, conforme necessário, e clique em Create Warehouse.

SQL:

Execute um comando CREATE WAREHOUSE.

• MAX_CLUSTER_COUNT definido como um valor maior que 1. Para saber o valor mais alto que você pode especificar, dependendo do tamanho do warehouse, consulte Limite superior do número de clusters para um warehouse multicluster (neste tópico).

• MIN_CLUSTER_COUNT (opcionalmente) definido como um valor maior que 1.

Para ver informações sobre os warehouses multicluster que você criar:

Snowsight:

Clique em Admin » Warehouses.

A coluna Clusters exibe os clusters mínimo e máximo para cada warehouse, assim como o número de clusters que estão atualmente em funcionamento se o warehouse foi iniciado. Você pode classificar pela coluna Clusters em ordem decrescente para listar os warehouses multiclusters na parte superior.

Classic Console:

Clique em Warehouses

SQL:

Execute um comando SHOW WAREHOUSES.

A saída inclui três colunas (min_cluster_count, max_cluster_count, started_clusters) que exibem as mesmas informações fornecidas na coluna Clusters na interface da web.

Dica

Se a saída do SHOW WAREHOUSES for difícil de ler porque inclui muitas colunas, você pode segui-la com outra consulta que inclua apenas as colunas desejadas, juntamente com outras cláusulas para filtragem e classificação. Use uma consulta como a seguinte e ajuste-a para atender às suas necessidades. Os nomes das colunas estão entre aspas porque diferenciam maiúsculas de minúsculas na saída de SHOW WAREHOUSES.

-- Must do the SHOW first to produce the full result set.
SHOW WAREHOUSES;
-- result_scan() helps to customize a report using the result set from the previous query.
SELECT "name", "state", "size", "max_cluster_count", "started_clusters", "type"
  FROM TABLE(result_scan(-1))
  WHERE "state" IN ('STARTED','SUSPENDED')
  ORDER BY "type" DESC, "name";

Copy

Todas as outras tarefas para warehouses com vários clientes (exceto as tarefas restantes descritas neste tópico) são idênticas às tarefas de warehouses de um só cluster.

Como definir a política de escalonamento para um warehouse multicluster¶

Para ajudar a controlar os créditos consumidos por um warehouse multicluster em execução no modo Dimensionamento automático, o Snowflake oferece políticas de dimensionamento. O Snowflake usa as políticas de dimensionamento para determinar como ajustar a capacidade do seu warehouse multicluster, iniciando ou desativando clusters individuais enquanto o warehouse está em execução. Você pode especificar uma política de dimensionamento para fazer com que o Snowflake priorize a capacidade de resposta e a taxa de transferência das consultas nesse warehouse ou para minimizar os custos desse warehouse.

A política de escalonamento para um warehouse multicluster só se aplica se ele estiver funcionando em modo de dimensionamento automático. No modo Maximizado, todos os clusters funcionam simultaneamente, então não há necessidade de iniciar ou encerrar clusters individuais.

O Snowflake oferece suporte para as seguintes políticas de escalonamento:

Você pode definir a política de dimensionamento para um warehouse multicluster quando ele for criado ou a qualquer momento depois, seja na Snowsight ou usando o SQL:

Snowsight:

Quando você seleciona Multi-cluster Warehouse em Advanced Options na caixa de diálogo New Warehouse, pode selecionar a política de dimensionamento na lista suspensa Scaling Policy.

Para um warehouse multicluster existente, clique em Admin » Warehouses. Em seguida, selecione Edit no menu More (…).

No campo Scaling Policy, selecione o valor desejado na lista suspensa.

Dica

A lista suspensa Scaling Policy só é exibida quando o warehouse selecionado é um warehouse multicluster e o valor máximo de clusters é maior do que o valor mínimo de clusters.

Classic Console:

Clique em:

• Warehouses » Create ou

• Warehouses » <warehouse_name> » Configure

No campo Scaling Policy, selecione o valor desejado na lista suspensa.

SQL:

Execute um comando CREATE WAREHOUSE ou ALTER WAREHOUSE com SCALING_POLICY definido para o valor desejado.

Por exemplo, em SQL:

CREATE WAREHOUSE mywh WITH MAX_CLUSTER_COUNT = 2, SCALING_POLICY = 'STANDARD';
ALTER WAREHOUSE mywh SET SCALING_POLICY = 'ECONOMY';

Copy

Como aumentar ou diminuir os clusters para um warehouse multicluster¶

Você pode aumentar ou diminuir o número máximo e mínimo de clusters de um warehouse a qualquer momento, mesmo quando ele estiver em execução e executando instruções. Você pode ajustar os clusters máximo e mínimo para um warehouse na Snowsight ou usando o SQL:

Snowsight:

Clique em Admin » Warehouses.

Clique no nome do warehouse para visualizar suas propriedades e o histórico de atividades. Selecione Edit no menu More (…). Você também pode desmarcar a caixa de seleção Multi-cluster Warehouse para redefinir as configurações de cluster máximo e mínimo para 1, alterando o warehouse para um de cluster único.

Classic Console:

Clique em Warehouses » <warehouse_name> » Configure

SQL:

Execute um comando ALTER WAREHOUSE.

O efeito de mudar os clusters máximo e mínimo para um warehouse em funcionamento depende de se ele está funcionando no modo Maximizado ou de dimensionamento automático:

• Maximizado:

  ↑ máx e mín:

  O número especificado de clusters começa imediatamente.

  ↓ máx e mín:

  O número especificado de clusters são encerrados quando terminam de executar as instruções e o período de autossuspensão acaba.

• Dimensionamento automático:

  ↑ máx:

  Se new_max_clusters > running_clusters, não haverá mudanças até que sejam necessários clusters adicionais.

  ↓ máx:

  Se new_max_clusters < running_clusters, os clusters em excesso são encerrados quando terminam de executar instruções e as condições da política de escalonamento são cumpridas.

  ↑ mín:

  Se new_min_clusters > running_clusters, clusters adicionais imediatamente começaram a cumprir o mínimo.

  ↓ mín:

  Se new_min_clusters < running_clusters, os clusters em excesso são encerrados quando terminam de executar instruções e as condições da política de escalonamento são cumpridas.

Monitoramento de warehouses multicluster¶

Você pode monitorar o uso de warehouses multicluster através da interface da web:

Snowsight:

Clique em Admin » Warehouses e selecione o nome do warehouse.

Dessa forma, você pode monitorar um warehouse com detalhes precisos, como a visualização de consultas que estão em execução ou enfileiradas no momento.

Você também pode clicar em Monitoring » Query History. Essa página permite que você visualize a atividade em vários warehouses da sua conta. Para ver a atividade de só um warehouse, selecione Warehouse no menu suspenso Filters. Em seguida, selecione o nome do warehouse na lista.

Classic Console:

Clique em History

Quando você monitora um warehouse multicluster, pode ver todas as consultas que o warehouse processou. Para cada consulta, você pode ver detalhes como o tempo que levou, quantos bytes foram escaneados e quantas linhas foram retornadas. Você também pode ver o cluster usado para executar cada instrução que o warehouse processou. Para escolher os detalhes a serem exibidos, selecione itens como Cluster Number, Duration, Rows e assim por diante no menu suspenso Columns.