Clientes de desenvolvimento para Snowpark Connect for Spark¶
É possível executar cargas de trabalho do Spark interativamente por meio de clientes como Snowflake Notebooks, Jupyter Notebooks e VS Code ou qualquer interface baseada em Python sem precisar gerenciar um cluster Spark. As cargas de trabalho são executadas na infraestrutura do Snowflake.
Quando você desenvolve cargas de trabalho do Spark interativamente com Snowpark Connect for Spark, você pode executar as seguintes tarefas:
Execute cargas de trabalho do Spark por meio de ferramentas locais sem configurar nenhuma infraestrutura.
Execute o código compatível com PySpark APIs e fluxos de trabalho.
Acesse os recursos de computação do Snowflake para executar consultas e transformações.
Integre o Spark aos fluxos de trabalho existentes de ciência de dados, exploração ou desenvolvimento.
Autentique com tokens de acesso programático (PATs) para autenticação segura, alinhada com os controles de acesso empresariais modernas.
A tabela a seguir lista algumas das ferramentas que você pode usar ao trabalhar com cargas de trabalho do Spark no Snowflake:
Objetivo |
Ferramentas |
---|---|
Desenvolva interativamente cargas de trabalho do Spark que são executadas no Snowflake. |
|
Execute cargas de trabalho do Spark como um lote. |