Notas de lançamento do Snowpark Connect for Spark para 2026¶

Tipo de tabela de cache ao executar saveAsTable

Otimizar entrada literal para conversão de subcadeia de caracteres e tipo para coalesce

Tratamento do estouro decimal em avg/mean e correção da coerção do tipo decimal

Iceberg: preservar concessões ao substituir

Padronizar modo de passagem SQL

Otimizar from_utc_timestamp/to_utc_timestamp para fuso horário literal

Manipular valores nulos JSON em tipos estruturados para corresponder à semântica do Spark

Emular tipos integrais na criação de tabelas com base em SQL

Corrigir caso de borda com mapeamento de linhas aninhadas em UDFs Scala

Corrigir como o Parquet lida com leitura e gravação de tipos de dados estruturados complexos

Oferecer suporte ao argumento “save ignore” para arquivos Parquet

Adicionar suporte para repositório de artefatos

Corrigir nulidade de matriz em UDxF Scala

Corrigir log1p para argumentos da faixa (-1, 0)

Corrigir first_value e last_value em contexto agregado

Corrigir a leitura:code:DayTimeIntervalType para cliente Scala

Manusear fusos horários corretamente em UDFs Scala

Oferecer suporte a Java 11 e 17 sem nenhuma configuração

Oferecer suporte a snowpark-submit para Python 3.9

Aprimorar init_spark_session para ser usado no fluxo de trabalho de snowpark-submit

Corrigido o problema da função split

Realizado o downgrade da dependência snowflake-snowpark-python para a versão 1.44

Corrigido o dialeto Neo4j correspondente para melhorar a tradução de SQL

Corrigido o ID da operação retornado em respostas de execução para manter a consistência

Corrigido o tratamento de metadados do gRPC para conexões de canal TCP

Adicionado suporte para partition_hint em operações mapPartitions

Adicionado suporte do leitor XML para cenários com esquemas definidos pelo usuário

Preservar colunas ocultas após vários operadores DataFrame

Corrigir problemas de tipos de entrada udf Scala (byte, binary, scala.math.BigDecimal)

Adicionar argumentos snowpark-submit definidos pelo usuário para comentar

Corrigido o erro do comando config unset na configuração de sessão.

Uso de «copiar em» para carregar arquivos CSV em paralelo.

Correção das gravações de DataFrames usando junções externas.

Tratamento de nulos em UDFs do Scala.

Otimização da geração de consultas CTE com proteção de parâmetros.

Evitar converter argumentos de DATEDIFF.

Corrigida a anexação de arquivos particionados e a leitura de partições nulas.

Melhoria feita no desempenho em 10 vezes para conversão entre base 10 e 16 usando SQL.

Substituição somente de partições modificadas para arquivos parquet.

Lógica atualizada para detectar se o Snowpark Connect for Spark está em execução no XP.

Suporte à gravação em tabela com tipo de dados «variante» no Snowflake.

Remoção de logs de informação desnecessários.

Os testes do Java foram movidos do trabalho de testes do Scala para um trabalho separado.

Atualização da versão de dependência para gcsfs.

Correção da serialização de tuplas do Scala.

Correção do carregamento de arquivos JSON enormes.

Implementação de pequenas correções de problemas de clientes.

Implementação de correções para comparações com struct (estrutura).

Adição de tratamento para DataFrames de coluna 0.

Caminho correto do arquivo de carregamento.

Correção de Upload_files_if_needed que não era executado em paralelo.

Melhoria na inferência de tipo de entrada quando tipos de entrada de UDF não são definidos no proto.

Correção de casos de borda NA.

Suporte à leitura de único arquivo JSON BZ2.

Suporte a UDFs do Scala no Snowpark Connect for Spark do lado do servidor.

Implementação de conversão entre cadeia de caracteres e daytime.

Suporte adicionado para UDFs do Scala em group_map.

Redução dos nomes gerados de carga de trabalho.

Tratamento de JAVA_HOME corrigido para Windows.

Suporte para fonte de dados neo4j via JDBC.