2026年の Snowpark Connect for Spark リリースノート

Snowflake は、 Snowpark Connect for Spark の更新にセマンティックバージョニングを使用します。

ドキュメントについては、 Snowpark Connect for Spark を使用してSnowflakeで Apache Spark™ ワークロードを実行する および Sparkバッチワークロードを Snowpark Submit から実行する をご参照ください。

1.10.0(2026年1月22日)

Snowpark Connect for Spark

バグ修正

  • セッション構成の構成解除エラーを修正します。

  • CSV ファイルを並列にロードするには、copy intoを使用します。

  • 外部結合を使用した DataFrames の書き込みを修正します。

  • Scala UDFs でnullを処理します。

  • パラメーター保護を使用して CTE クエリ生成を最適化します。

  • DATEDIFF の引数のキャストを回避します。

  • パーティション化されたファイルの追加とnullパーティションの読み取りを修正しました。

  • SQL を使用して10進法と16進法間の変換パフォーマンスを10倍向上させます。

新機能

  • Parquetファイルの変更されたパーティションのみを上書きします。

その他の更新

  • Snowpark Connect for Spark が XP 上で実行されているかどうかを検出するためのロジックを更新しました。

  • Snowflakeでバリアントデータ型のテーブルへの書き込みをサポートします。

  • 不要な情報ログを削除します。

  • JavaテストをScalaテストジョブから別のジョブに移動します。

  • gcsfsの依存関係バージョンを更新します。

Snowpark Submit

なし。

1.9.0(2026年1月14日)

Snowpark Connect for Spark

バグ修正

  • Scalaタプルのシリアル化を修正しました。

  • 巨大な JSON ファイルの読み込みを修正しました。

  • 顧客の問題に対する小さな修正を実装します。

  • 構造比較の修正を実装します。

  • 0列の DataFrames の処理を追加します。

  • アップロードファイルのパスを修正します。

  • Upload_files_if_needed が並行実行されない問題を修正しました。

  • UDF 入力型がprotoで定義されていない場合の入力型推論を改善します。

  • NA エッジケースを修正します。

新機能

  • シングル JSONBZ2 ファイルの読み取りをサポートします。

  • サーバー側 Snowpark Connect for Spark でScala UDFs をサポートします。

  • 文字列と daytime の間のキャストを実装します。

  • group_map にScala UDFs のサポートを追加します。

Snowpark Submit

バグ修正

  • 生成されたワークロード名を減らします。

1.8.0(2026年1月7日)

Snowpark Connect for Spark

バグ修正

  • Windowsの JAVA_HOME 処理を修正しました。

新機能

  • JDBC 経由で neo4j データソースをサポートします。

Snowpark Submit

なし。