Snowpark Migration Accelerator: Configurações padrão¶
Valores padrão¶
Ativar/desativar todo o recurso: ativado.
Coleta de métodos definidos pelo usuário que retornam o tipo DataFrame: False.
Lista de funções PySpark relevantes a serem coletadas: consulte a tabela abaixo.
Amostra: 100%.
Modo: Esquema.
Habilitado: Sempre verdadeiro.
Funções PySpark padrão a serem coletadas¶
Tipo |
Pacotes PySpark |
|---|---|
Criação |
pyspark.sql.session.SparkSession.createDataFrame<br>pyspark.sql.readwriter.DataFrameReader.csv<br>pyspark.sql.readwriter.DataFrameReader.jdbc<br>pyspark.sql.readwriter.DataFrameReader.json<br>pyspark.sql.readwriter.DataFrameReader.load<br>pyspark.sql.readwriter.DataFrameReader.orc<br>pyspark.sql.readwriter.DataFrameReader.parquet<br>pyspark.sql.readwriter.DataFrameReader.table<br>pyspark.sql.readwriter.DataFrameReader.text<br>pyspark.rdd.RDD.toDF |
Transformação |
pyspark.sql.dataframe.DataFrame.union<br>pyspark.sql.dataframe.DataFrame.intersect<br>pyspark.sql.dataframe.DataFrame.join<br>pyspark.sql.group.GroupedData.pivot |