Snowpark Connect for Spark-Versionshinweise 2026

Snowflake verwendet semantische Versionierung für Snowpark Connect for Spark-Aktualisierungen.

Die entsprechende Dokumentation finden Sie unter Apache Spark™-Workloads auf Snowflake mit Snowpark Connect for Spark ausführen und Ausführen von Spark-Batch-Workloads über Snowpark Submit.

1.10.0 (22. Januar 2026)

Snowpark Connect for Spark

Fehlerkorrekturen

  • Fehler mit nicht gesetzter Konfiguration für die Sitzungskonfiguration behoben.

  • Verwenden Sie „Kopieren in“, um CSV-Dateien parallel zu laden.

  • Problem mit Schreibvorgängen bei DataFrames mithilfe von äußeren Verknüpfungen behoben.

  • Verarbeiten von Nullen in Scala-UDFs.

  • Optimieren der CTE-Abfragegenerierung mit Parameterschutz.

  • Vermeiden Sie die Umwandlung von Argumenten von DATEDIFF.

  • Problem mit Anhängen von partitionierten Dateien und Lesen von Nullpartitionen behoben.

  • Beschleunigen Sie mit SQL die Konvertierung zwischen Dezimal- und Hexadezimalwerten um den Faktor 10.

Neue Features

  • Bei Parquet-Dateien werden nur geänderte Partitionen überschrieben.

Sonstige Updates

  • Die Logik, mit der erkannt wird, ob Snowpark Connect for Spark auf XP ausgeführt wird, wurde aktualisiert.

  • Unterstützung für das Schreiben in eine Tabelle mit dem Datentyp „Variant“ in Snowflake.

  • Entfernen unnötiger Info-Protokolle.

  • Verschieben von Java-Tests aus dem Scala-Testjob in einen separaten Job.

  • Aktualisieren Sie die Version der Abhängigkeit für gcsfs.

Snowpark Submit

Keine.

1.9.0 (14. Januar 2026)

Snowpark Connect for Spark

Fehlerkorrekturen

  • Problem mit der Serialisierung von Scala-Tupeln behoben.

  • Problem mit dem Laden großer JSON-Dateien behoben.

  • Kleine Korrekturen für Kundenprobleme implementiert.

  • Korrekturen für struct-Vergleiche implementiert.

  • Verarbeitung von DataFrames mit 0 Spalten hinzugefügt.

  • Pfad zum Hochladen der Datei korrigiert.

  • Das Problem, dass Upload_files_if_needed nicht parallel ausgeführt wird, wurde behoben.

  • Verbesserung bei der Ableitung von Eingabetypen, wenn UDF-Eingabetypen nicht in der Proto-Datei definiert sind.

  • Problem mit NA-Grenzfällen wurde behoben.

Neue Features

  • Unterstützung für das Lesen von einzelnen JSON BZ2-Dateien.

  • Unterstützung von Scala-UDFs in serverseitigem Snowpark Connect for Spark.

  • Implementieren der Umwandlung zwischen Zeichenfolge und daytime.

  • Unterstützung für Scala-UDFs in group_map hinzugefügt.

Snowpark Submit

Fehlerkorrekturen

  • Reduzieren Sie generierte Workload-Namen.

1.8.0 (7. Januar 2026)

Snowpark Connect for Spark

Fehlerkorrekturen

  • Problem mit JAVA_HOME-Handhabung in Windows behoben.

Neue Features

  • Unterstützung der neo4j-Datenquelle über JDBC.

Snowpark Submit

Keine.