Snowpark Migration Accelerator : Paramètres par défaut¶
Valeurs par défaut¶
Activer/désactiver toute la fonctionnalité Activé
Collecter les méthodes définies par l’utilisateur qui renvoient le typeDataFrame : False.
Liste des fonctions PySpark pertinentes à collecter : (voir le tableau ci-dessous).
Exemple : 100 %.
Mode : Schéma :
Activé : Toujours vrai.
Fonctions PySpark par défaut à collecter¶
Type |
Paquets PySpark |
|---|---|
Création |
pyspark.sql.session.SparkSession.createDataFrame<br>pyspark.sql.readwriter.DataFrameReader.csv<br>pyspark.sql.readwriter.DataFrameReader.jdbc<br>pyspark.sql.readwriter.DataFrameReader.json<br>pyspark.sql.readwriter.DataFrameReader.load<br>pyspark.sql.readwriter.DataFrameReader.orc<br>pyspark.sql.readwriter.DataFrameReader.parquet<br>pyspark.sql.readwriter.DataFrameReader.table<br>pyspark.sql.readwriter.DataFrameReader.text<br>pyspark.rdd.RDD.toDF |
Transformation |
pyspark.sql.dataframe.DataFrame.union<br>pyspark.sql.dataframe.DataFrame.intersect<br>pyspark.sql.dataframe.DataFrame.join<br>pyspark.sql.group.GroupedData.pivot |