Snowpark Connect for Spark-Versionshinweise 2026¶
Snowflake verwendet semantische Versionierung für Snowpark Connect for Spark-Aktualisierungen.
Die entsprechende Dokumentation finden Sie unter Apache Spark™-Workloads auf Snowflake mit Snowpark Connect for Spark ausführen und Ausführen von Spark-Batch-Workloads über Snowpark Submit.
1.10.0 (22. Januar 2026)¶
Snowpark Connect for Spark¶
Fehlerkorrekturen¶
Fehler mit nicht gesetzter Konfiguration für die Sitzungskonfiguration behoben.
Verwenden Sie „Kopieren in“, um CSV-Dateien parallel zu laden.
Problem mit Schreibvorgängen bei DataFrames mithilfe von äußeren Verknüpfungen behoben.
Verarbeiten von Nullen in Scala-UDFs.
Optimieren der CTE-Abfragegenerierung mit Parameterschutz.
Vermeiden Sie die Umwandlung von Argumenten von
DATEDIFF.Problem mit Anhängen von partitionierten Dateien und Lesen von Nullpartitionen behoben.
Beschleunigen Sie mit SQL die Konvertierung zwischen Dezimal- und Hexadezimalwerten um den Faktor 10.
Neue Features¶
Bei Parquet-Dateien werden nur geänderte Partitionen überschrieben.
Sonstige Updates¶
Die Logik, mit der erkannt wird, ob Snowpark Connect for Spark auf XP ausgeführt wird, wurde aktualisiert.
Unterstützung für das Schreiben in eine Tabelle mit dem Datentyp „Variant“ in Snowflake.
Entfernen unnötiger Info-Protokolle.
Verschieben von Java-Tests aus dem Scala-Testjob in einen separaten Job.
Aktualisieren Sie die Version der Abhängigkeit für gcsfs.
Snowpark Submit¶
Keine.
1.9.0 (14. Januar 2026)¶
Snowpark Connect for Spark¶
Fehlerkorrekturen¶
Problem mit der Serialisierung von Scala-Tupeln behoben.
Problem mit dem Laden großer JSON-Dateien behoben.
Kleine Korrekturen für Kundenprobleme implementiert.
Korrekturen für struct-Vergleiche implementiert.
Verarbeitung von DataFrames mit 0 Spalten hinzugefügt.
Pfad zum Hochladen der Datei korrigiert.
Das Problem, dass
Upload_files_if_needednicht parallel ausgeführt wird, wurde behoben.Verbesserung bei der Ableitung von Eingabetypen, wenn UDF-Eingabetypen nicht in der Proto-Datei definiert sind.
Problem mit NA-Grenzfällen wurde behoben.
Neue Features¶
Unterstützung für das Lesen von einzelnen JSON BZ2-Dateien.
Unterstützung von Scala-UDFs in serverseitigem Snowpark Connect for Spark.
Implementieren der Umwandlung zwischen Zeichenfolge und
daytime.Unterstützung für Scala-UDFs in
group_maphinzugefügt.
Snowpark Submit¶
Fehlerkorrekturen¶
Reduzieren Sie generierte Workload-Namen.
1.8.0 (7. Januar 2026)¶
Snowpark Connect for Spark¶
Fehlerkorrekturen¶
Problem mit JAVA_HOME-Handhabung in Windows behoben.
Neue Features¶
Unterstützung der
neo4j-Datenquelle über JDBC.
Snowpark Submit¶
Keine.