Snowpark Migration Accelerator: Standardeinstellungen

Standardwerte

  • Ein-/Ausschalten des gesamten Features: Aktiviert

  • Sammeln Sie benutzerdefinierte Methoden, die den DataFrame-Typ zurückgeben: False.

  • Liste der relevanten zu erfassenden PySpark-Funktionen: (Siehe Tabelle unten).

  • Beispiel: 100 %.

  • Modus: Schema.

  • Aktiviert Immer „True“.

Zu erfassende standardmäßige PySpark-Funktionen

Typ

PySpark-Pakete

Erstellung

pyspark.sql.session.SparkSession.createDataFrame
pyspark.sql.readwriter.DataFrameReader.csv
pyspark.sql.readwriter.DataFrameReader.jdbc
pyspark.sql.readwriter.DataFrameReader.json
pyspark.sql.readwriter.DataFrameReader.load
pyspark.sql.readwriter.DataFrameReader.orc
pyspark.sql.readwriter.DataFrameReader.parquet
pyspark.sql.readwriter.DataFrameReader.table
pyspark.sql.readwriter.DataFrameReader.text
pyspark.rdd.RDD.toDF

Transformation

pyspark.sql.dataframe.DataFrame.union
pyspark.sql.dataframe.DataFrame.intersect
pyspark.sql.dataframe.DataFrame.join
pyspark.sql.group.GroupedData.pivot