Snowpark Migration Accelerator: 기본 설정

기본값

  • 전체 기능 켜기 및 끄기: 활성화됨.

  • DataFrame 유형을 반환하는 사용자 정의 메서드 수집: False.

  • 수집할 관련 PySpark 함수 목록: (아래 표 참조).

  • 샘플: 100%.

  • 모드: 스키마.

  • 활성화됨: 항상 True.

수집할 기본 PySpark 함수

타입

PySpark 패키지

만들기

pyspark.sql.session.SparkSession.createDataFrame
pyspark.sql.readwriter.DataFrameReader.csv
pyspark.sql.readwriter.DataFrameReader.jdbc
pyspark.sql.readwriter.DataFrameReader.json
pyspark.sql.readwriter.DataFrameReader.load
pyspark.sql.readwriter.DataFrameReader.orc
pyspark.sql.readwriter.DataFrameReader.parquet
pyspark.sql.readwriter.DataFrameReader.table
pyspark.sql.readwriter.DataFrameReader.text
pyspark.rdd.RDD.toDF

변환

pyspark.sql.dataframe.DataFrame.union
pyspark.sql.dataframe.DataFrame.intersect
pyspark.sql.dataframe.DataFrame.join
pyspark.sql.group.GroupedData.pivot