2024년 Snowflake Connector for Kafka 릴리스 정보¶
이 문서에는 Snowflake Connector for Kafka 에 대한 릴리스 정보가 있는데, 해당되는 경우 다음을 포함합니다.
동작 변경 사항
새로운 기능
고객이 직면한 버그 수정
Snowflake는 Snowflake Connector for Kafka 업데이트에 의미 체계 버전 관리를 사용합니다.
설명서는 Kafka용 Snowflake 커넥터 섹션을 참조하십시오.
버전 2.4.1(2024년 9월 19일)¶
새로운 기능과 업데이트¶
Snowflake Ingest Java SDK를 버전 2.2.2로 업그레이드했습니다.
버그 수정 사항¶
스키마화 관련 문제를 수정했습니다.
버전 2.4.0(2024년 8월 15일)¶
새로운 기능과 업데이트¶
Snowflake Ingest Java SDK를 버전 2.2.0으로 업그레이드했으며, 여기에는 스트림 및 동적 테이블에 대해
change_tracking을 활성화할 때 발생할 수 있는 잠재적인 문제에 대한 중요한 수정 사항이 포함되어 있습니다.Snowflake JDBC 드라이버를 버전 3.14.5에서 버전 3.18.0으로 업그레이드했습니다.
다양한 구성 요소의 로깅 환경을 개선하여 문제 해결 경험을 개선했습니다.
채널 재개 논리를 개선했습니다.
참고
모든 Snowpipe Streaming 사용의 경우 Snowflake에서는 Kafka 커넥터 버전 2.4.0 이상을 사용할 것을 권장합니다.
버그 수정 사항¶
알려진 취약점이 있는 종속성을 업데이트했습니다.
버전 2.3.0(2024년 7월 10일)¶
새로운 기능과 업데이트¶
Snowpipe Streaming 채널을 동시에 닫는 지원 기능을 추가하여 재조정에 걸리는 시간을 대폭 단축했습니다.
커넥터가 메시지를 푸시한 시간을 나타내는 메타데이터에 새로운
SnowflakeConnectorPushTime속성을 추가했습니다.
버그 수정 사항¶
알려진 취약점이 있는 종속성을 업데이트했습니다.
버전 2.2.2(2024년 5월 7일)¶
버그 수정 사항¶
스테이징된 파일이 올바르게 정리되지 않는 문제를 수정했습니다.
버전 2.2.1(2024년 3월 15일)¶
새로운 기능과 업데이트¶
누락되거나 중복된 데이터가 없는지 확인하기 위해 오프셋 검증 논리가 추가되었습니다.
Snowpipe Streaming을 위한 클라이언트 공급자 재정의 맵을 추가했습니다. 맵은 쉼표로 구분된 키 값 쌍을 입력으로 사용합니다.
다음 버전으로 업그레이드했습니다.
JDBC 버전을 3.14.5로 업그레이드했습니다.
kafka connect-api 버전을 3.7.0으로 업그레이드했습니다.
jackson-core 및 jackson-databind를 2.16.1로 업그레이드했습니다.
commons-compress를 1.26.0으로 업그레이드했습니다.
버그 수정 사항¶
SinkTask stop ()이 호출될 때 스트리밍 수집 스레드를 정리했습니다.
버전 2.2.0(2024년 2월 6일)¶
BCR(동작 변경 릴리스) 변경 사항¶
스키마화를 위해 ARRAY 열에 들어가는 이전 데이터 타입을 유지했습니다.
새로운 기능과 업데이트¶
AVRO 논리 유형에 대한 지원을 추가했습니다.
새로운 채널 이름 형식으로 인해 잠재적인 데이터 중복을 방지하기 위해 변경 사항을 구현했습니다.
스키마화를 위해 ARRAY 열에 들어가는 이전 데이터 타입을 유지하기 위해 변경 사항을 구현했습니다.
스키마 진화에서 열 추가 작업이 멱등성을 갖도록 변경 사항을 구현했습니다.
Kafka 커넥터에서 Ingest SDK
MAX_CLIENT_LAG구성을 활성화했습니다.
버그 수정 사항¶
정확히 1회 전달이 이루어지지 않도록 할 수 있는 스키마 진화 사례를 수정했습니다.
Java 라이브러리 생성 및 구축과 관련된 문제를 해결했습니다.
Kafka 오프셋이 올바르게 재설정되지 않는 문제를 해결했습니다.