Notas de lançamento do Snowpark Connect for Spark para 2026

Snowflake usa controle de versão semântico para atualizações de Snowpark Connect for Spark.

Para ver a documentação, consulte Execução de cargas de trabalho do Apache Spark™ no Snowflake com Snowpark Connect for Spark e Execução de cargas de trabalho em lote do Spark de Snowpark Submit.

1.10.0 (22 de janeiro de 2026)

Snowpark Connect for Spark

Correções de bugs

  • Corrigido o erro do comando config unset na configuração de sessão.

  • Uso de «copiar em» para carregar arquivos CSV em paralelo.

  • Correção das gravações de DataFrames usando junções externas.

  • Tratamento de nulos em UDFs do Scala.

  • Otimização da geração de consultas CTE com proteção de parâmetros.

  • Evitar converter argumentos de DATEDIFF.

  • Corrigida a anexação de arquivos particionados e a leitura de partições nulas.

  • Melhoria feita no desempenho em 10 vezes para conversão entre base 10 e 16 usando SQL.

Novos recursos

  • Substituição somente de partições modificadas para arquivos parquet.

Outras atualizações

  • Lógica atualizada para detectar se o Snowpark Connect for Spark está em execução no XP.

  • Suporte à gravação em tabela com tipo de dados «variante» no Snowflake.

  • Remoção de logs de informação desnecessários.

  • Os testes do Java foram movidos do trabalho de testes do Scala para um trabalho separado.

  • Atualização da versão de dependência para gcsfs.

Snowpark Submit

Nenhum.

1.9.0 (14 de janeiro de 2026)

Snowpark Connect for Spark

Correções de bugs

  • Correção da serialização de tuplas do Scala.

  • Correção do carregamento de arquivos JSON enormes.

  • Implementação de pequenas correções de problemas de clientes.

  • Implementação de correções para comparações com struct (estrutura).

  • Adição de tratamento para DataFrames de coluna 0.

  • Caminho correto do arquivo de carregamento.

  • Correção de Upload_files_if_needed que não era executado em paralelo.

  • Melhoria na inferência de tipo de entrada quando tipos de entrada de UDF não são definidos no proto.

  • Correção de casos de borda NA.

Novos recursos

  • Suporte à leitura de único arquivo JSON BZ2.

  • Suporte a UDFs do Scala no Snowpark Connect for Spark do lado do servidor.

  • Implementação de conversão entre cadeia de caracteres e daytime.

  • Suporte adicionado para UDFs do Scala em group_map.

Snowpark Submit

Correções de bugs

  • Redução dos nomes gerados de carga de trabalho.

1.8.0 (7 de janeiro de 2026)

Snowpark Connect for Spark

Correções de bugs

  • Tratamento de JAVA_HOME corrigido para Windows.

Novos recursos

  • Suporte para fonte de dados neo4j via JDBC.

Snowpark Submit

Nenhum.