2026년 Snowpark Connect for Spark 릴리스 정보

Snowflake는 Snowpark Connect for Spark 업데이트에 의미 체계 버전 관리를 사용합니다.

설명서는 Snowpark Connect for Spark 를 사용하여 Snowflake에서 Apache Spark™ 워크로드 실행Snowpark Submit 에서 Spark 일괄 워크로드 실행하기 섹션을 참조하세요.

1.10.0(2026년 1월 22일)

Snowpark Connect for Spark

버그 수정 사항

  • 세션 구성에 대한 구성 설정 해제 오류를 수정했습니다.

  • 복사를 사용하여 CSV 파일을 병렬로 로드합니다.

  • 외부 조인을 사용하여 DataFrames에 대한 작성을 수정합니다.

  • Scala UDFs에서 null을 처리합니다.

  • 매개 변수 보호를 사용한 CTE 쿼리 생성을 최적화합니다.

  • :code:`DATEDIFF`의 인자 캐스팅을 방지합니다.

  • 분할된 파일 추가 및 null 파티션 읽기를 수정했습니다.

  • SQL을 사용하여 기수 10과 16 사이의 변환 성능을 10배 개선했습니다.

새로운 기능

  • Parquet 파일의 수정된 파티션만 덮어씁니다.

기타 업데이트

  • |spconnect|가 XP에서 실행 중인 경우 감지하도록 논리를 업데이트했습니다.

  • Snowflake에서 베리언트 데이터 타입이 있는 테이블에 작성을 지원합니다.

  • 불필요한 정보 로그를 제거합니다.

  • Scala 테스트 작업에서 별도의 작업으로 Java 테스트를 이동합니다.

  • gcsfs의 종속성 버전을 업데이트합니다.

Snowpark Submit

없습니다.

1.9.0(2026년 1월 14일)

Snowpark Connect for Spark

버그 수정 사항

  • Scala 튜플 직렬화를 수정합니다.

  • 대용량 JSON 파일 로딩을 수정합니다.

  • 고객 문제에 대한 작은 수정 사항을 구현합니다.

  • 구조체 비교에 대한 수정 사항을 구현합니다.

  • 0-열 DataFrames에 대한 처리를 추가합니다.

  • 업로드 파일 경로를 수정합니다.

  • :code:`Upload_files_if_needed`가 병렬로 실행되지 않는 문제를 수정합니다.

  • UDF 입력 유형이 proto에 정의되지 않은 경우 입력 유형 추론을 개선합니다.

  • NA 에지 케이스를 수정합니다.

새로운 기능

  • 단일 JSON BZ2 파일 읽기를 지원합니다.

  • 서버 측 |spconnect|에서 Scala UDFs를 지원합니다.

  • 문자열 및 daytime 간의 캐스트를 구현합니다.

  • :code:`group_map`에서 Scala UDFs에 대한 지원을 추가합니다.

Snowpark Submit

버그 수정 사항

  • 생성된 워크로드 이름을 줄입니다.

1.8.0(2026년 1월 7일)

Snowpark Connect for Spark

버그 수정 사항

  • Windows용 JAVA_HOME 처리를 수정했습니다.

새로운 기능

  • JDBC를 통해 neo4j 데이터 원본을 지원합니다.

Snowpark Submit

없습니다.