Initialisierung und Aktualisierung dynamischer Tabellen verstehen¶

Erläuterungen zur Initialisierung dynamischer Tabellen¶

Wenn Sie eine dynamische Tabelle erstellen, erfolgt ihre erste Aktualisierung entweder synchron bei der Erstellung oder zu einem geplanten Zeitpunkt. Die erstmalige Datenbefüllung oder Initialisierung hängt davon ab, wann diese erste Aktualisierung stattfindet.

Dynamische Tabellen werden auf der Grundlage der angegebenen Zielverzögerung aktualisiert. Diese legt die maximal zulässige Verzögerung zwischen Aktualisierungen der Basistabellen und dem Inhalt der dynamischen Tabelle fest. Wenn Sie INITIALIZE = ON_CREATE (Standard) einstellen, wird die Tabelle sofort initialisiert. Wenn Sie INITIALIZE = ON_SCHEDULE einstellen, erfolgt die Initialisierung innerhalb des angegebenen Zeitrahmens für die Zielverzögerung.

Nehmen wir zum Beispiel eine dynamische Tabelle, DT1, mit einer Zielverzögerung von 30 Minuten. Die Grundgesamtheit der Daten für DT1 kann wie folgt aussehen:

• Wenn DT1 so eingestellt ist, dass sie bei der Erstellung synchron aktualisiert wird (ON_CREATE), wird sie bei der Erstellung initialisiert.

• Wenn DT1 so eingestellt ist, dass sie zu einer geplanten Zeit aktualisiert wird (ON_SCHEDULE), wird sie innerhalb von 30 Minuten initialisiert.

In Szenarien mit nachgelagerten Abhängigkeiten hängt das Aktualisierungsverhalten von den Abhängigkeiten ab. Wenn zum Beispiel die dynamische Tabelle DT1 eine nachgelagerte Zielverzögerung hat und DT2, die von DT1 abhängt, eine Zielverzögerung von 30 Minuten hat, wird DT1 nur aktualisiert, wenn DT2 aktualisiert wird.

DT1:

• Wenn Sie bei der Erstellung eine synchrone Aktualisierung einstellen, wird sie sofort initialisiert. Wenn die Initialisierung fehlschlägt, wird der Erstellungsprozess angehalten und es wird sofort eine Fehlermeldung angezeigt.

• Wenn Sie die Aktualisierung zu einem bestimmten Zeitpunkt festlegen, hängt die Initialisierung davon ab, wann DT2 aktualisiert wird.

Die Initialisierung kann einige Zeit dauern, je nachdem, wie viele Daten gescannt werden. Um den Fortschritt zu verfolgen, siehe Probleme beim Erstellen dynamischer Tabellen lösen.

Manuelle und geplante Aktualisierungsoptionen verstehen¶

Dynamische Tabellen werden nach einem Zeitplan aktualisiert, der von der Zielverzögerung bestimmt wird. Jedes Mal, wenn eine dynamische Tabelle gelesen wird, liegt die Datenaktualität innerhalb des durch die Zielverzögerung definierten Zeitraums.

Sie können Ihre dynamischen Tabellen manuell mit dem Befehl ALTER DYNAMIC TABLE … REFRESH oder Snowsight aktualisieren, um die neuesten Daten zu erhalten. Weitere Informationen dazu finden Sie unter Dynamische Tabellen manuell aktualisieren.

Zeitüberschreitungen bei der Aktualisierung von dynamischen Tabellen werden durch den Parameter STATEMENT_TIMEOUT_IN_SECONDS gesteuert, der die maximal zulässige Dauer auf Konto- oder Warehouse-Ebene festlegt, bevor eine Aktualisierung automatisch abgebrochen wird.

CREATE TASK my_task
  SCHEDULE = 'USING CRON <expr> <time_zone>'
  AS
    ALTER DYNAMIC TABLE my_dynamic_table REFRESH;

Aktualisierungsmodi für dynamische Tabellen¶

Dynamische Tabellen unterstützen zwei Aktualisierungsmodi: inkrementell und vollständig. Sie können den Aktualisierungsmodus entweder auf AUTO einstellen oder ihn explizit festlegen:

• AUTO-Aktualisierungsmodus: Wenn Sie den Parameter AUTO verwenden, wählt Snowflake automatisch den kosten- und zeiteffizientesten Aktualisierungsmodus auf der Grundlage der Komplexität der Abfrage, der unterstützten Konstrukte, Operatoren, Funktionen und der erwarteten Leistung. Wenn die inkrementelle Aktualisierung nicht unterstützt wird oder wahrscheinlich schlecht funktioniert, wählt Snowflake stattdessen automatisch die vollständige Aktualisierung.

• Inkrementeller Aktualisierungsmodus: Dieser Modus analysiert die Abfrage der dynamischen Tabelle und berechnet die Änderungen seit der letzten Aktualisierung. Anschließend werden diese Änderungen in die Tabelle eingefügt.

• Vollständiger Aktualisierungsmodus: In diesem Modus wird die Abfrage der dynamischen Tabelle ausgeführt und die zuvor materialisierten Ergebnisse werden vollständig ersetzt.

Nachdem Sie eine dynamische Tabelle erstellt haben, können Sie die Tabelle überwachen, um festzustellen, ob zur Aktualisierung dieser Tabelle inkrementelle oder vollständige Aktualisierungen verwendet werden.

SHOW DYNAMIC TABLES;

Aktualisierung von Daten, wenn eine dynamische Tabelle von anderen abhängt¶

Wenn die Verzögerung einer dynamischen Tabelle als Zeitmaß festgelegt wird, plant der automatische Aktualisierungsprozess die Aktualisierungen so, dass die Zielverzögerungszeiten bestmöglich eingehalten werden.

Um die Daten konsistent zu halten, wenn eine dynamische Tabelle von einer anderen abhängt, aktualisiert der Prozess alle dynamischen Tabellen in einem Konto zu kompatiblen Zeiten. Der Zeitpunkt der weniger häufigen Aktualisierungen stimmt mit dem Zeitpunkt der häufigeren Aktualisierungen überein. Wenn die Aktualisierungen zu lange dauern, überspringt der Planer möglicherweise Aktualisierungen, um auf dem neuesten Stand zu bleiben. Die Snapshot-Isolation bleibt jedoch erhalten.

Angenommen, die dynamische Tabelle DT1 hat eine Zielverzögerung von zwei Minuten und fragt die dynamische Tabelle DT2 ab, die eine Zielverzögerung von einer Minute hat. Der Prozess könnte festlegen, dass DT1 alle 96 Sekunden und DT2 alle 48 Sekunden aktualisiert werden soll. Im Ergebnis könnte der Prozess folgenden Zeitplan anwenden:

Das bedeutet, dass Sie bei der Abfrage einer Menge von dynamischen Tabellen, die voneinander abhängen, zu jedem Zeitpunkt denselben „Snapshot“ der Daten in diesen Tabellen abfragen.

Beachten Sie, dass die Zielverzögerung einer dynamischen Tabelle nicht kürzer sein kann als die Zielverzögerung der dynamischen Tabellen, von denen sie abhängt. Folgendes wird angenommen:

• DT1 fragt die dynamischen Tabellen DT2 und DT3 ab.

• DT2 hat eine Zielverzögerung von fünf Minuten.

• DT3 hat eine Zielverzögerung von einer Minute.

Das bedeutet, dass die Zielverzögerung für DT1 nicht kürzer als fünf Minuten sein darf (d. h. nicht kürzer als die längere der Verzögerungszeiten für DT2 und DT3).

Wenn Sie die Verzögerung für DT1 auf fünf Minuten einstellen, wird ein Aktualisierungsplan mit diesen Zielen erstellt:

• Aktualisieren von DT3 häufig genug, um die Verzögerung unter einer Minute zu halten.

• Aktualisieren von DT1 und DT2 zusammen und häufig genug, um ihre Verzögerungen unter fünf Minuten zu halten.

• Stellen Sie sicher, dass die Aktualisierung von DT1 und DT2 mit einer Aktualisierung von DT3 zusammenfällt, um die Snapshot-Isolation zu gewährleisten.

Erläuterungen zu den Auswirkungen von Änderungen an Spalten in Basistabellen¶

Wenn sich die zugrunde liegenden Objekte, die mit einer dynamischen Tabelle verbunden sind, ändern, hat dies folgende Auswirkungen:

Best Practices für das Aktualisieren dynamischer Tabellen¶