Notas de lançamento do Snowpark Connect for Spark para 2026¶
Snowflake usa controle de versão semântico para atualizações de Snowpark Connect for Spark.
Para ver a documentação, consulte Execução de cargas de trabalho do Apache Spark™ no Snowflake com Snowpark Connect for Spark e Execução de cargas de trabalho em lote do Spark de Snowpark Submit.
1.10.0 (22 de janeiro de 2026)¶
Snowpark Connect for Spark¶
Correções de bugs¶
Corrigido o erro do comando config unset na configuração de sessão.
Uso de «copiar em» para carregar arquivos CSV em paralelo.
Correção das gravações de DataFrames usando junções externas.
Tratamento de nulos em UDFs do Scala.
Otimização da geração de consultas CTE com proteção de parâmetros.
Evitar converter argumentos de
DATEDIFF.Corrigida a anexação de arquivos particionados e a leitura de partições nulas.
Melhoria feita no desempenho em 10 vezes para conversão entre base 10 e 16 usando SQL.
Novos recursos¶
Substituição somente de partições modificadas para arquivos parquet.
Outras atualizações¶
Lógica atualizada para detectar se o Snowpark Connect for Spark está em execução no XP.
Suporte à gravação em tabela com tipo de dados «variante» no Snowflake.
Remoção de logs de informação desnecessários.
Os testes do Java foram movidos do trabalho de testes do Scala para um trabalho separado.
Atualização da versão de dependência para gcsfs.
Snowpark Submit¶
Nenhum.
1.9.0 (14 de janeiro de 2026)¶
Snowpark Connect for Spark¶
Correções de bugs¶
Correção da serialização de tuplas do Scala.
Correção do carregamento de arquivos JSON enormes.
Implementação de pequenas correções de problemas de clientes.
Implementação de correções para comparações com struct (estrutura).
Adição de tratamento para DataFrames de coluna 0.
Caminho correto do arquivo de carregamento.
Correção de
Upload_files_if_neededque não era executado em paralelo.Melhoria na inferência de tipo de entrada quando tipos de entrada de UDF não são definidos no proto.
Correção de casos de borda NA.
Novos recursos¶
Suporte à leitura de único arquivo JSON BZ2.
Suporte a UDFs do Scala no Snowpark Connect for Spark do lado do servidor.
Implementação de conversão entre cadeia de caracteres e
daytime.Suporte adicionado para UDFs do Scala em
group_map.
Snowpark Submit¶
Correções de bugs¶
Redução dos nomes gerados de carga de trabalho.
1.8.0 (7 de janeiro de 2026)¶
Snowpark Connect for Spark¶
Correções de bugs¶
Tratamento de JAVA_HOME corrigido para Windows.
Novos recursos¶
Suporte para fonte de dados
neo4jvia JDBC.
Snowpark Submit¶
Nenhum.