Snowpark Migration Accelerator : Paramètres par défaut

Valeurs par défaut

  • Activer/désactiver toute la fonctionnalité Activé

  • Collecter les méthodes définies par l’utilisateur qui renvoient le typeDataFrame : False.

  • Liste des fonctions PySpark pertinentes à collecter : (voir le tableau ci-dessous).

  • Exemple : 100 %.

  • Mode : Schéma :

  • Activé : Toujours vrai.

Fonctions PySpark par défaut à collecter

Type

Paquets PySpark

Création

pyspark.sql.session.SparkSession.createDataFrame
pyspark.sql.readwriter.DataFrameReader.csv
pyspark.sql.readwriter.DataFrameReader.jdbc
pyspark.sql.readwriter.DataFrameReader.json
pyspark.sql.readwriter.DataFrameReader.load
pyspark.sql.readwriter.DataFrameReader.orc
pyspark.sql.readwriter.DataFrameReader.parquet
pyspark.sql.readwriter.DataFrameReader.table
pyspark.sql.readwriter.DataFrameReader.text
pyspark.rdd.RDD.toDF

Transformation

pyspark.sql.dataframe.DataFrame.union
pyspark.sql.dataframe.DataFrame.intersect
pyspark.sql.dataframe.DataFrame.join
pyspark.sql.group.GroupedData.pivot