PutSnowpipeStreaming2 2025.10.2.19¶
Bundle¶
com.snowflake.openflow.runtime | runtime-snowpipe-streaming-2-processors-nar
Beschreibung¶
Sendet Datensätze, die im „Newline Delimited“ JSON-Format formatiert sind, mit Snowpipe Streaming Version 2 an Snowflake Datenbank-Pipes.
Eingabeanforderung¶
REQUIRED
Unterstützt sensible dynamische Eigenschaften¶
false
Eigenschaften¶
Eigenschaft |
Beschreibung |
|---|---|
Konto |
Snowflake-Kontobezeichner mit dem Organisationsnamen und Kontonamen, formatiert als [organisation-name]-[account-name] |
Authentication Strategy |
Strategie zur Authentifizierung von Snowflake-Verbindungen |
Channel Group |
Gruppe zum Verwalten verschiedener Snowpipe Streaming-Kanäle mit Partitionierung |
Channel Insert Timeout |
Maximale Dauer für das wiederholte Einfügen von Datensätzen, bevor das Problem fehlschlägt, mit einer Obergrenze von 5 Minuten |
Datenbank |
Snowflake-Datenbankziel für verarbeitete Datensätze |
File Fragment Count |
Maximale Anzahl von Dateifragmenten, die von Eingabe-FlowFiles an den Objektspeicher für die Snowpipe Streaming-Erfassung gesendet werden. Muss zwischen 1 und 100 liegen. |
File Fragment Size |
Maximale Größe in Bytes für jedes Dateifragment, das an den Objektspeicher zur Snowpipe Streaming-Erfassung gesendet wird. Muss zwischen 1 KB und 256 MB liegen |
Endausdruck des Offset-Tokens |
Ausdruckssprachendefinition, um das höchste Offset-Token für ein FlowFile als monoton zunehmende Zahl zu erzeugen |
Offset Token Record Pointer |
JSON-Zeiger auf das Offset-Token in jedem Datensatz, der erforderlich ist, wenn sich das zuletzt übertragene Offset-Token zwischen Start- und Endgrenzen befindet |
Startausdruck des Offset-Tokens |
Ausdruckssprachendefinition, um das niedrigste Offset-Token für ein FlowFile als monoton zunehmende Zahl zu erzeugen |
Offset Tracking Timeout |
Maximale Dauer für das Abfragen des Kanalstatus für bestätigte Offset-Token |
Pipe |
Snowflake Pipe-Ziel für verarbeitete Datensätze |
Private Key Service |
RSA Private Key Service zur Authentifizierung von Verbindungen |
Schema |
Snowflake Schema-Ziel für verarbeitete Datensätze |
Transfer Strategy |
Strategie für die Übertragung von Datensätzen an Snowpipe Streaming |
Benutzer |
Snowflake-Benutzer für die Authentifizierung von Verbindungen |
Web Client Service Provider |
Web Client Service Provider, der HTTP-Verarbeitung von Anfragen und Antworten unterstützt |
Beziehungen¶
Name |
Beschreibung |
|---|---|
failure |
FlowFiles, die nicht in Snowflake hochgeladen werden konnten |
invalid |
FlowFiles, in denen Snowflake eine oder mehrere ungültige Zeilen identifiziert hat, was zu einer teilweisen Übertragung führte |
success |
Erfolgreich in Snowflake hochgeladene FlowFiles |