Snowflake Connector for Spark¶

Spark用Snowflakeコネクター（Sparkコネクター）は、SnowflakeをApache Sparkエコシステムに取り込み、SparkがSnowflakeからデータを読み書きできるようにします。Sparkの観点から見ると、Snowflakeは他のSparkデータソース（PostgreSQL、 HDFS、S3など）に似ています。

Snowflakeは複数のバージョンのSparkコネクタをサポートしています。

• Spark Connector 2.x：Sparkバージョン3.2、3.3、3.4。

  • Snowflakeコネクタには、Sparkのバージョンごとに個別のバージョンがあります。Sparkのバージョンに合った正しいバージョンのコネクタを使用します。

• Spark Connector 3.x：Sparkバージョン3.2、3.3、3.4、3.5。

  • 各Spark Connector 3パッケージは、ほとんどのバージョンのSparkをサポートしています。

コネクタはSparkプラグインとして実行され、Sparkパッケージ（spark-snowflake）として提供されます。