|spconnect|の開発クライアント

Snowflake Notebooks、Jupyter Notebooks、VSコード、Sparkクラスターを管理する必要がないPythonベースのインターフェースなどのクライアント側からインタラクティブにSparkワークロードを実行できます。ワークロードはSnowflakeインフラストラクチャ上で実行されます。

Sparkワークロードを Snowpark Connect for Spark とインタラクティブに開発すると、次のタスクを実行できます。

  • インフラストラクチャを設定することなく、ローカルツールからSparkワークロードを実行する。

  • PySparkAPIs およびワークフローと互換性のあるコードを実行する。

  • クエリと変換を実行するために、Snowflakeコンピューティングリソースにアクセスする。

  • Sparkを既存のデータサイエンスや探索、または開発ワークフローに統合する。

  • 最新エンタープライズアクセス制御に合わせた安全な認証のため、プログラムのアクセストークン(PATs)を認証する。

次のテーブルは、SnowflakeでSparkワークロードを操作するときに使用できるツールのいくつかを示しています。

目的

ツール

Snowflakeで実行されるSparkワークロードをインタラクティブに開発します。

Sparkワークロードをバッチとして実行する。