Python用Snowparkライブラリの2024年リリースノート¶

arg がpandas Series または collections.abc.Mapping の場合の Series.map を部分的なサポートを追加しました。 __missing__ を実装しているが collections.defaultdict のインスタンスではない dict のインスタンスはサポートされません。

DataFrame.align と Series.align の axis=1 と axis=None へのサポートを追加しました。

pd.json_normalize のサポートを追加しました。

axis=0、 freq=None、 および limit=None で GroupBy.pct_change のサポートを追加しました。

DataFrameGroupBy.__iter__ および SeriesGroupBy.__iter__ のサポートを追加しました。

np.sqrt、 np.trunc、 np.floor、numpy trig関数、 np.exp、 np.abs、 np.positive、および np.negative のサポートを追加しました。

データフレーム交換プロトコルのメソッド DataFrame.__dataframe__() の部分的なサポートを追加しました。

シリーズから単一の列をセットすると、予期しない None 値になる df.loc のバグを修正しました。

pandasのピボット解除演算子には、センチネル値の代わりに UNPIVOT INCLUDE NULLS を使用してください。

pd.read_excel のドキュメントを改善しました。

Index.to_numpy のサポートを追加しました。

axis=0 向けに DataFrame.align と Series.align のサポートを追加しました。

snowflake.snowpark.functions.window のサポートを追加しました。

pd.read_pickle のサポートを追加しました（処理にネイティブpandasを使用）。

pd.read_html のサポートを追加しました（処理にネイティブpandasを使用）。

pd.read_xml のサポートを追加しました（処理にネイティブpandasを使用）。

GroupBy.aggregate、 DataFrame.aggregate、 および Series.aggregate の集計関数 "size" と len のサポートを追加しました。

Series.str.len におけるリスト値のサポートを追加しました。

単一列のデータフレームを単一の呼び出し可能な関数（例: pd.DataFrame([0]).agg(np.mean)）で集計すると、結果の転置に失敗するバグを修正しました。

次の DataFrame.dropna() のバグを修正しました。

• 空の subset （例: []）を、列がないのではなくすべての列を指定したものとして扱う。

• その列だけをフィルターするのではなく、スカラー subset に対して TypeError を発生させる。

• インデックス内の列でフィルターをかける代わりに、 pandas.Index のタイプ subset に対して ValueError を発生させる。

ノートブック環境でダイナミックピボットを使用する際の TableNotFoundError を軽減するための、スコープ付き読み取り専用テーブルの作成。

axis = 1のとき、concat dataframeまたはseriesオブジェクトが同じdataframeから来ている場合のバグを修正しました。

不要な結合とテンポラリテーブルの作成を排除することで、スカラーx値を使用した np.where を改善しました。

結合でピボットをフラット化することで、 get_dummies パフォーマンスを向上しました。

snowflake.snowpark.functions モジュールでは利用できない機能のパッチのサポートを追加しました。

snowflake.snowpark.functions.any_value のサポートを追加しました。

Table.update が VariantType、 MapType、 ArrayType のデータ型を処理できないバグを修正しました。

DataFrame.join で列のエイリアスが正しく解決されず、結合された DataFrame から列を選択する際にエラーが発生するバグを修正しました。

ターゲットテーブルのインデックスがデフォルトの RangeIndex でない場合に Table.update と Table.merge が失敗することがあるバグを修正しました。

np.subtract、 np.multiply、 np.divide、 および np.true_divide のサポートを追加しました。

__array_ufunc__ の使用状況を追跡できるようになりました。

np.float_power、 np.mod、 np.remainder、 np.greater、 np.greater_equal、 np.less、 np.less_equal、 np.not_equal、および np.equal のnumpy互換性サポートを追加しました。

np.log、 np.log2、および np.log10 のnumpy互換性サポートを追加しました。

DataFrameGroupBy.bfill、 SeriesGroupBy.bfill、 DataFrameGroupBy.ffill、 および SeriesGroupBy.ffill のサポートを追加しました。

Resampler を使用した on パラメーターのサポートを追加しました。

value_counts() でタイムデルタ入力のサポートを追加しました。

Snowpark Python関数 snowflake_cortex_summarize の適用サポートを追加しました。

DataFrame.attrs および Series.attrs のサポートを追加しました。

DataFrame.style のサポートを追加しました。

np.full_like のnumpy互換性サポートを追加しました。

行キーがスライスである場合に、 head および iloc に対して生成される SQL クエリが改善されました。

Series、 DataFrame、 Series.dt、および DatetimeIndex で tz_convert と tz_localize に不明なタイムゾーンを渡す際のエラーメッセージを改善しました。

Series、 DataFrame、 Series.dt、および DatetimeIndex で tz_convert と tz_localize のドキュメントを改善し、サポートされるタイムゾーン形式を明記しました。

Snowpark関数を使用する際に、 df.apply と series.apply （さらには map と applymap）のkwargsサポートをさらに追加しました。これにより、最初の引数がpandasオブジェクトでないapplyと関数の間で位置に依存しない互換性を保つことができます。

行キーがスカラーの場合に iloc および iat に生成される SQL クエリを改善しました。

iterrows のすべての結合を削除しました。

サポートされていない機能を反映するため、 Series.map のドキュメントを改善しました。

多くのscikit-learn関数で内部的に使用される np.may_share_memory のサポートを追加しました。このメソッドは、Snowpark pandasオブジェクトで呼び出されると、常にfalseを返します。

入力にタイムデルタ列が含まれる場合、 DataFrame と Series pct_change() が TypeError を発生させるバグを修正しました。

replace() が Timedelta 型を replace() 経由で正しく伝搬しないことがあったバグを修正しました。代わりに、 Timedelta に対して replace() の NotImplementedError が発生します。

DataFrame と Series round() が Timedelta 列に対して AssertionError を発生させるバグを修正しました。代わりに、 Timedelta に対して round() の NotImplementedError が発生します。

新しいインデックスが元のインデックスと重複しない型を持つシリーズである場合に、 reindex に失敗するバグを修正しました。

DataFrameGroupBy オブジェクトに対して __getitem__ を呼び出すと、 as_index=False の場合に常に DataFrameGroupBy オブジェクトを返すバグを修正しました。

既存の列にタイムデルタ値を挿入すると、 NotImplementedError を発生させる代わりに値を警告なしに整数に変換してしまうバグを修正しました。

axis=0とaxis=1の DataFrame.shift() がタイムデルタ型の伝播に失敗するバグを修正しました。

DataFrame.abs()、 DataFrame.__neg__()、 DataFrame.stack()、および DataFrame.unstack() は、タイムデルタタイプの伝搬に失敗する代わりに、タイムデルタ入力に対して NotImplementedError を発生させるようになりました。

入力列名に対して DataFrame.alias が KeyError を発生させるバグを修正しました。

データに空の文字列が含まれる場合に、Snowflakeステージで to_csv が失敗するバグを修正しました。

TimedeltaIndex.mean メソッドのサポートが追加されました。

axis=0 の Timedelta 列を agg または aggregate で集計する場合の一部サポートを追加しました。

pd.merge_asof 向けに by、 left_by、 right_by、 left_index、 および right_index のサポートを追加しました。

Session.query_history にパラメーター include_describe を渡すためのサポートを追加しました。

DatetimeIndex.mean と DatetimeIndex.std メソッドのサポートを追加しました。

Resampler.asfreq、 Resampler.indices、 Resampler.nunique、 および Resampler.quantile のサポートを追加しました。

closed = "left" を使用した resample 頻度 W、 ME、 YE のサポートを追加しました。

pairwise = False とint window に DataFrame.rolling.corr と Series.rolling.corr のサポートを追加しました。

Rolling に文字列時間ベースの window と min_periods = None のサポートを追加しました。

DataFrameGroupBy.fillna および SeriesGroupBy.fillna のサポートを追加しました。

遅延 Series オブジェクトを使用した DataFrame と Index オブジェクトを data、 index、および columns 引数として構築するためのサポートを追加しました。

DataFrame/Series data に存在しない index と column の値を使用して Series と DataFrame オブジェクトを構築するためのサポートを追加しました。

pd.read_sas のサポートを追加しました（処理にネイティブpandasを使用）。

rolling().count() と expanding().count() を Timedelta 系列と列に適用するためのサポートを追加しました。

pd.bdate_range と pd.date_range の両方で tz のサポートを追加しました。

Series.items のサポートを追加しました。

pd.to_datetime での errors="ignore" のサポートを追加しました。

DataFrame.tz_localize および Series.tz_localize のサポートを追加しました。

DataFrame.tz_convert および Series.tz_convert のサポートを追加しました。

SnowparkのPython関数（例: sin）を Series.map、 Series.apply、 DataFrame.apply、 および DataFrame.applymap で適用するサポートを追加しました。

TIMESTAMP_TZ 型の元のタイムゾーンオフセットを維持するように to_pandas を改良しました。

TIMESTAMP_TZ 型の dtype の結果を改善し、正しいタイムゾーンオフセットを表示するようにしました。

TIMESTAMP_LTZ 型の dtype の結果を改善し、正しいタイムゾーンを表示するようにしました。

groupby集計で numeric_only にブール値以外を渡したときのエラーメッセージを改善しました。

sort_values の並べ替えアルゴリズムに関する不要な警告を削除しました。

SCOPED オブジェクトを内部で仮テーブルを作成するために使用します。SCOPED オブジェクトは、sproc内で作成された場合はsprocスコープになり、それ以外の場合はセッションスコープになり、スコープの終了時にオブジェクトは自動的にクリーニングされます。

予想外の遅さのマテリアライゼーションにつながる操作に対する警告メッセージを改善しました。

Series.apply の convert_dtype に関する不要な警告メッセージを削除しました。

Series/DataFrame から作成された Index オブジェクトが、元の Series/DataFrame にインプレース更新が適用された後、 Series/DataFrame のインデックス名が誤って更新されるバグを修正しました。

Timedelta 列を印刷する際に表示されることがあった無用な SettingWithCopyWarning を抑制しました。

他の Series オブジェクトから派生した Series オブジェクトの inplace 引数を修正しました。

系列名がインデックス列名と重なる場合、 Series.sort_values に失敗するバグを修正しました。

データフレームをトランスポーズすると、 Timedelta インデックスレベルが整数列レベルにマップされるバグを修正しました。

タイムデルタ列の Resampler メソッドが整数の結果を生成するバグを修正しました。

pd.to_numeric() が Timedelta の入力を整数に変換せずに Timedelta のままにするバグを修正しました。

DataFrame の単一行または複数行にSeries値を設定する際に設定される loc を修正しました。

UDF 呼び出しの入力として列を渡す際の型強制のサポートを追加しました。

Index.identical のサポートを追加しました。

DataFrameWriter.save_as_table の切り捨てモードが、 DataFrames を誤って処理して既存テーブルの列のサブセットのみを含むバグを修正しました。

関数 to_timestamp が、列のデータ型のデフォルトタイムゾーンを設定しないバグを修正しました。

以下の機能を含む、 Timedelta 型の限定サポートを追加しました。Snowpark pandasは、サポートされていない Timedelta ユースケースに対して NotImplementedError を発生します。

• copy、 cache_result、 shift、 sort_index、 assign、 bfill、 ffill、 fillna、 compare、 diff、 drop、 dropna、 duplicated、 empty、 equals、 insert、 isin、 isna、 items、 iterrows、 join、 len、 mask、 melt、 merge、 nlargest、 nsmallest、 to_pandas を介した Timedelta 型の追跡をサポートします。

• astype 経由での非タイムデルタからタイムデルタへの変換をサポートします。

• Timedelta をサポートしていない残りのメソッドに対しては、 NotImplementedError が発生します。

• Timedelta を取得するために2つのタイムスタンプを減算することをサポートします。

• Timedelta データ列よるインデックスをサポートします。

• タイムスタンプや Timedelta の加算や減算をサポートします。

• 2つの Timedelta 値間の2進演算をサポートします。

• 2進演算と、 Timedelta 間の値の比較をサポートします。

• 遅延 TimedeltaIndex をサポートします。

• pd.to_timedelta をサポートします。

• GroupBy 集計 min、 max、 mean、 idxmax、 idxmin、 std、 sum、 median、 count、 any、 all、 size、 nunique、 head、 tail、 aggregate をサポートします。

• GroupBy フィルター処理を first と last でサポートします。

• TimedeltaIndex 属性を days、 seconds、 microseconds、および nanoseconds でサポートします。

• axis=0 と axis=1 のタイムスタンプ列で diff をサポートします。

• ceil、 floor、および round で TimedeltaIndex メソッドをサポートします。

• TimedeltaIndex.total_seconds メソッドをサポートします。

インデックスの算術演算子と比較演算子のサポートを追加しました。

Series.dt.round のサポートを追加しました。

DatetimeIndex のドキュメントページを追加しました。

Index.name、 Index.names、 Index.rename、 および Index.set_names のサポートを追加しました。

Index.__repr__ のサポートを追加しました。

DatetimeIndex.month_name および DatetimeIndex.day_name のサポートを追加しました。

Series.dt.weekday、 Series.dt.time、および DatetimeIndex.time のサポートを追加しました。

Index.min および Index.max のサポートを追加しました。

pd.merge_asof のサポートを追加しました。

Series.dt.normalize および DatetimeIndex.normalize のサポートを追加しました。

Index.is_boolean、 Index.is_integer、 Index.is_floating、 Index.is_numeric、および Index.is_object のサポートを追加しました。

DatetimeIndex.round、 DatetimeIndex.floor、および DatetimeIndex.ceil のサポートを追加しました。

Series.dt.days_in_month および Series.dt.daysinmonth のサポートを追加しました。

DataFrameGroupBy.value_counts および SeriesGroupBy.value_counts のサポートを追加しました。

Series.is_monotonic_increasing および Series.is_monotonic_decreasing のサポートを追加しました。

Index.is_monotonic_increasing および Index.is_monotonic_decreasing のサポートを追加しました。

pd.crosstab のサポートを追加しました。

pd.bdate_range のサポートを追加し、 pd.date_range と pd.bdate_range の両方にビジネス頻度のサポート（B、 BME、 BMS、 BQE、 BQS、 BYE、 BYS）を含めました。

DataFrame.reindex と Series.reindex 内の labels として、遅延 Index オブジェクトのサポートを追加しました。

Series.dt.days、 Series.dt.seconds、 Series.dt.microseconds、 および Series.dt.nanoseconds のサポートを追加しました。

数値型または文字列型の Index から DatetimeIndex を作成できるようにサポートを追加しました。

Timedelta オブジェクトによる文字列インデックスのサポートを追加しました。

Series.dt.total_seconds メソッドのサポートが追加されました。

不要な結合を避けることにより、同じ DataFrame からの系列に対して操作が実行される場合の連結と結合のパフォーマンスが改善されました。

quoted_identifier_to_snowflake_type をリファクタリングし、型がローカルにキャッシュされている場合にメタデータクエリを回避するようにしました。

すべてのローカル入力ケースを処理できるように、 pd.to_datetime を改善しました。

クライアントにデータをプルすることなく、別の遅延インデックスから遅延インデックスを作成します。

Indexビット演算子で NotImplementedError が発生するようになりました。

Index.names がnon-list-likeオブジェクトに設定された場合、より明確なエラーメッセージを表示します。

MultiIndex 値がローカルにプルされるごとに警告を発生します。

仮テーブルの作成がトリガーされた場合、 pd.read_snowflake の警告メッセージに作成理由が含まれるように改善しました。

DataFrame.set_index、または DataFrame.index や Series.index を設定する際に、先行評価を必要とするチェックを回避することで、パフォーマンスが改善されました。その結果、現在の Series または DataFrame オブジェクトの長さに一致しない新しいインデックスが発生しても、 ValueError は発生しなくなりました。その代わり、 Series または DataFrame オブジェクトが提供されたインデックスよりも長い場合、 Series または DataFrame の新しいインデックスは、「余分な」要素のために NaN 値で埋められます。それ以外の場合は、提供されたインデックスの余分な値が無視されます。

pd.Timedelta スカラーでナノ秒の無視を中止しました。

2項演算のツリーの AssertionError を修正しました。

名前付き系列を使用した Series.dt.isocalendar 内のバグを修正しました。

DataFrame 列から派生したSeriesオブジェクトの inplace 引数を修正しました。

Series.reindex と DataFrame.reindex が、結果インデックスの名前を正しく更新しないバグを修正しました。

axis=1 の指定時に Series.take がエラーを発生しなかったバグを修正しました。

以下の APIs のサポートを追加しました。

• snowflake.snowpark.functions

  • rank

  • dense_rank

  • percent_rank

  • cume_dist

  • ntile

  • datediff

  • array_agg

• snowflake.snowpark.column.Column.within_group

モックプランの正規表現ステートメントにおけるフラグ解析のサポートを追加しました。これにより、上記の rlike と regexp の変更でパリティを維持します。

ウィンドウ関数 LEAD と LAG がオプション ignore_nulls を適切に処理しないバグを修正しました。

テーブルマージ操作の挿入中に、値が結果 DataFrame に入力されないバグを修正しました。

整数インデックスに関するpandas FutureWarning を修正しました。

DataFrame.backfill、 DataFrame.bfill、 Series.backfill、 および Series.bfill のサポートを追加しました。

DataFrame.compare と Series.compare のデフォルトパラメーターのサポートを追加しました。

Series.dt.microsecond および Series.dt.nanosecond のサポートを追加しました。

Index.is_unique および Index.has_duplicates のサポートを追加しました。

Index.equals のサポートを追加しました。

Index.value_counts のサポートを追加しました。

Series.dt.day_name および Series.dt.month_name のサポートを追加しました。

Indexでのインデックス、たとえば df.index[:10] のサポートを追加しました。

DataFrame.unstack および Series.unstack のサポートを追加しました。

DataFrame.asfreq および Series.asfreq のサポートを追加しました。

Series.dt.is_month_start および Series.dt.is_month_end のサポートを追加しました。

Index.all および Index.any のサポートを追加しました。

Series.dt.is_year_start および Series.dt.is_year_end のサポートを追加しました。

Series.dt.is_quarter_start および Series.dt.is_quarter_end のサポートを追加しました。

遅延 DatetimeIndex のサポートを追加しました。

Series.argmax および Series.argmin のサポートを追加しました。

Series.dt.is_leap_year のサポートを追加しました。

DataFrame.items のサポートを追加しました。

Series.dt.floor および Series.dt.ceil のサポートを追加しました。

Index.reindex のサポートを追加しました。

DatetimeIndex プロパティに year、 month、 day、 hour、 minute、 second、 microsecond、 nanosecond、 date、 dayofyear、 day_of_year、 dayofweek、 day_of_week、 weekday、 quarter、 is_month_start、 is_month_end、 is_quarter_start、 is_quarter_end、 is_year_start、 is_year_end、および is_leap_year のサポートを追加しました。

Resampler.fillna および Resampler.bfill のサポートを追加しました。

Timedelta 列や to_pandas の作成など、 Timedelta 型の限定サポートを追加しました。

Index.argmax および Index.argmin のサポートを追加しました。

Snowpark pandasをインポートする際の公開プレビューの警告メッセージを削除しました。

SnowflakeQueryCompiler.is_series_like メソッドから不要なカウントクエリを削除しました。

Dataframe.columns は、Snowpark Indexオブジェクトではなく、ネイティブのpandas Indexオブジェクトを返すようになりました。

クエリコンパイラから Index を作成するために、リファクタリングして Index コンストラクターに query_compiler 引数を導入しました。

pd.to_datetime は、 Series オブジェクトの代わりに DatetimeIndex オブジェクトを返すようになりました。

pd.date_range は、 Series オブジェクトの代わりに DatetimeIndex オブジェクトを返すようになりました。

サポートされていない集計関数を pivot_table に渡すと、 KeyError ではなく NotImplementedError が発生するようにしました。

サポートされていない集計に関するエラーメッセージとテレメトリから、軸ラベルと呼び出し可能な名前を削除しました。

sort_values の後に呼び出された Series.drop_duplicates と DataFrame.drop_duplicates にある AssertionError を修正しました。

名前が指定されていない場合に結果フレームの列名が間違っている場合がある Index.to_frame 内のバグを修正しました。

一部のIndex docstringsが無視されるバグを修正しました。

結果名が間違っている場合がある Series.reset_index(drop=True) 内のバグを修正しました。

基になるウィンドウ式内の正しい列による Groupby.first/last 順序付けで発生するバグを修正しました。

以下の APIs のサポートを追加しました。

• snowflake.snowpark.functions

  • random

モック関数を登録する際に、 patch 関数に新しいパラメーターを追加しました。

• distinct により、 SQL 関数を区別する必要がある場合に、代替関数を指定することができます。

• pass_column_index は、入力データのために、 pandas.Index を含むモック関数に名前付きパラメーター column_index を渡します。

• pass_row_index は、現在関数が操作している0インデックスの行番号であるモック関数に、名前付きパラメーター row_index を渡します。

• pass_input_data は、現在の式のために、入力データフレーム全体を含むモック関数に、名前付きパラメーター input_data を渡します。

• DataFrameWriter.save_as_table メソッドにある column_order パラメーターのサポートを追加しました。

DecimalType の列を BinaryExpressions で使用した場合、誤って整数精度に切り捨てられるバグを修正しました。

以下の新しい API サポートを追加しました。

• DataFrames

  • DataFrame.nlargest および DataFrame.nsmallest

  • DataFrame.assign

  • DataFrame.stack

  • DataFrame.pivot

  • DataFrame.to_csv

  • DataFrame.corr

  • DataFrame.corr

  • DataFrame.equals

  • DataFrame.reindex

  • DataFrame.at および DataFrame.iat

• Series

  • Series.nlargest および Series.nsmallest

  • Series.at および Series.iat

  • Series.dt.isocalendar

  • Series.equals

  • Series.reindex

  • Series.to_csv

  • Series.case_when。ただし、条件または置換が呼び出し可能な場合を除く。

  • マテリアライズしたデータのある series.plot() をローカルクライアントに

• GroupBy

  • DataFrameGroupBy.all および DataFrameGroupBy.any

  • DataFrameGroupBy および SeriesGroupBy 集合 first および last

  • DataFrameGroupBy.get_group

  • SeriesGroupBy.all および SeriesGroupBy.any

• 一般

  • pd.pivot

  • read_excel （処理にローカルpandasを使用）

  • マテリアライズしたデータのある df.plot() をローカルクライアントに

既存の APIs を以下のように拡張しました。

• DataFrame.sample と Series.sample で replace と frac > 1 のサポートを追加しました。

• table 内の値がシングルコードポイント文字列である Series.str.translate の部分的サポートを追加しました。

• method パラメーターが fillna で使用される場合の limit パラメーターのサポートを追加しました。

Index とその APIs のドキュメントページを追加しました。

スカラー other がリテラル0の場合に、np.whereとdf.whereを使用する際の問題を修正しました。

Snowpark pandas DataFrame または Series を dtype=np.uint64 で変換する際の精度損失に関するバグを修正しました。

pivot_table の際、 index と columns に DataFrame 内のすべての列が含まれる場合、 values が index に設定されるバグを修正しました。

Index.copy() のサポートを追加しました。

Index APIs に dtype、 values、 item()、 tolist()、 to_series()、および to_frame() のサポートを追加しました。

pd.pivot_table と DataFrame.pivot_table で、行がない DataFrames のサポートを拡大しました。

DataFrame.sort_index と Series.sort_index で inplace パラメーターのサポートが追加されました。

UDFs およびストアドプロシージャを登録する場合の strict パラメーターのサポートを追加しました。

convert_timezone で、 source_timezone パラメーターの設定がエラーを返すバグを修正しました。

DateType 型の空のデータで DataFrame を作成すると AttributeError が発生するバグを修正しました。

更新句があっても更新されない場合、テーブルマージに失敗するバグを修正しました。

to_char のモック実装において、着信列が連続しない行インデックスを持つ場合に IndexError が発生するバグを修正しました。

着信列が連続しない行インデックスを持つ場合に IndexError が発生する CaseExpr 式の処理でバグを修正しました。

Column.like の実装において、着信列が連続しない行インデックスを持つ場合に IndexError が発生するバグを修正しました。

DataFrame.replace、 DataFrame.dropna、およびモック関数 iff の実装に、型強制のサポートを追加しました。

freq と limit パラメーターのない DataFrame.pct_change と Series.pct_change の部分的サポートを追加しました。

Series.str.get のサポートを追加しました。

Series.dt.dayofweek、 Series.dt.day_of_week、 Series.dt.dayofyear、および Series.dt.day_of_year のサポートを追加しました。

Series.str.__getitem__ (Series.str[...]) のサポートを追加しました。

Series.str.lstrip と Series.str.rstrip のサポートを追加しました。

DataFrameGroupby.size と SeriesGroupby.size のサポートを追加しました。

axis=0 のある集計 count、 sum、 min、 max、 mean、 std、および var に DataFrame.expanding と Series.expanding のサポートを追加しました。

axis=0 のある集計カウントに DataFrame.rolling と Series.rolling のサポートを追加しました。

Series.str.match のサポートを追加しました。

集計サイズに DataFrame.resample と Series.resample のサポートを追加しました。

GroupBy.aggregate 列の出力順序が正しくないバグを修正しました。

異なる dtypes の列が重複しているフレームで DataFrame.describe を呼び出すと、エラーや不正な結果が発生するバグを修正しました。

DataFrame.rolling と Series.rolling のバグを修正して、 window=0 が、 ValueError の代わりに NotImplementedError をスローするようにしました。

axis=0 のある DataFrame.aggregate と Series.aggregate に名前付き集計のサポートを追加しました。

pd.read_csv は、ネイティブpandas CSV パーサーを使用して読み込み、parquetを使用してSnowflakeにデータをアップロードします。これにより、 read_csv でサポートされている日付パースや数値変換など、ほとんどのパラメーターを有効にすることができます。Parquet経由のアップロードは、 CSV 経由のアップロードのおよそ2倍の速さです。

pd.Index をSnowpark pandasで直接サポートするための初期作業。 pd.Index をSnowpark pandasのファーストクラスコンポーネントとしてサポートするため、現在積極的に開発中です。

遅延インデックスのコンストラクターを追加し、 len、 shape、 size、 empty、 to_pandas()、および names のサポートを追加しました。 df.index の場合、Snowpark pandasは遅延インデックスオブジェクトを作成します。

df.columns の場合、Snowpark pandasでは、データがすでにローカルに保存されているため、 Index の非遅延バージョンをサポートします。

ファイル形式 CSV および JSON に、以下の DataFrameReader 読み取りオプションのサポートを追加しました。

• PURGE

• PATTERN

• False 値のある INFER_SCHEMA

• UTF8 値のある ENCODING

DataFrame.analytics.moving_agg および DataFrame.analytics.cumulative_agg_agg のサポートを追加しました。

UDF およびストアドプロシージャ登録時の if_not_exists パラメーターのサポートを追加しました。

時間形式の処理において、秒の端数部分が正しく処理されないバグを修正しました。

* での関数呼び出しに失敗するバグを修正しました。

map および struct 型のオブジェクトを作成できないバグを修正しました。

関数 date_add が一部の数値型を処理できないバグを修正しました。

TimestampType のキャストが不正なデータになるバグを修正しました。

DecimalType データが不正な精度を持つ場合があるバグを修正しました。

欠落したテーブルやビューを参照すると IndexError が発生するバグを修正しました。

モック関数 to_timestamp_ntz が None データを処理できないバグを修正しました。

モックされた UDFs が None の出力データを不適切に扱うバグを修正しました。

DataFrame.with_column_renamed が結合操作後に親 DataFrames からの属性を無視するバグを修正しました。

pandas DataFrame に変換する際に、大きな値の整数精度が失われるバグを修正しました。

pandas DataFrame から DataFrame を作成する際、 datetime オブジェクトのスキーマが間違っていたバグを修正しました。

Column.equal_nan の実装において、nullデータが正しく処理されていなかったバグを修正しました。

DataFrame.drop が結合操作後に親 DataFrames からの属性を無視するバグを修正しました。

モック関数 date_part で列の型が正しく設定されないバグを修正しました。

DataFrameWriter.save_as_table でnull非許容型の列にnullデータを挿入した場合に例外が発生しない不具合を修正しました。

DataFrameWriter.save_as_table の実装における以下のバグを修正しました。

• 受信データが既存のテーブルと異なるスキーマを持つ場合、追加または切り捨てが失敗する。

• 受信データにnull許容型の列が指定されていない場合、切り捨てが失敗する。

使用されていない pyarrow の依存関係チェックを削除しました。

Column.cast のターゲット型範囲が改善され、ブール値型とすべての整数型へのキャストのサポートが追加されました。

UDFs およびストアドプロシージャを呼び出す際のエラーエクスペリエンスを調整しました。

UDFs およびストアドプロシージャ登録の is_permanent および anonymous オプションに適切なエラーメッセージを追加し、これらの機能がまだサポートされていないことを明確にしました。

サポートされていないオプションや値を使用したファイル読み取り操作で、警告や不明確なエラー情報の代わりに NotImplementedError が発生するようになりました。

モック関数 to_timestamp_ltz、 to_timestamp_ntz、 to_timestamp_tz、 to_timestamp で NumericType および VariantType のデータ変換のサポートを追加しました。

モック関数 to_char で DecimalType、 BinaryType、 ArrayType、 MapType、 TimestampType、 DateType、 TimeType のデータ変換のサポートを追加しました。

以下の APIs のサポートを追加しました。

• snowflake.snowpark.functions.to_varchar

• snowflake.snowpark.DataFrame.pivot

• snowflake.snowpark.Session.cancel_all

新しい例外クラス snowflake.snowpark.mock.exceptions.SnowparkLocalTestingException を導入しました。

FloatType へのキャストのサポートを追加しました。

ストアドプロシージャと UDFs が、クリーンアップステップ中に sys.path の既存のインポートを削除すべきではないのに削除してしまうバグを修正しました。

datetime 形式を処理する際、秒の端数部分が正しく処理されないバグを修正しました。

Windowsプラットフォーム上のファイル操作で、ディレクトリ名に含まれるファイル区切り文字を適切に処理できないバグを修正しました。

Windowsプラットフォームで、pandasデータフレームを読み込む際に、整数データを持つ IntervalType 列を処理できないバグを修正しました。

同じエイリアスを持つ複数の列を選択できないバグを修正しました。

識別子が引用符で囲まれている場合に、 Session.get_current_[schema |database| role |user| account|warehouse] が大文字の識別子を返すバグを修正しました。

関数 substr および substring がゼロベースの start_expr を処理できないバグを修正しました。

エラー時に SnowparkLocalTestingException を発生させることで、非ローカル実行時に発生する SnowparkSQLException と同等のエラーエクスペリエンスを標準化しました。

Session.write_pandas メソッドのエラーエクスペリエンスを改善し、 NotImplementError が呼び出されたときに発生するようにしました。

非ローカル実行でクローズされたセッションを再利用する際のエラーエクスペリエンスを調整しました。

モック関数 to_date で StringType、 TimestampType、 VariantType のデータ変換のサポートを追加しました。

以下の APIs のサポートを追加しました。

• snowflake.snowpark.functions:

  • get

  • concat

  • concat_ws

NaT および NaN の値が認識されない原因となっていたバグを修正しました。

スキーマを推論する際、すでに一重引用符で囲まれているステージファイル一重引用符が追加されるバグを修正しました。

DataFrameReader.csv で区切り文字を含む引用符付きの値を処理できないバグを修正しました。

算術計算に None の値がある場合、出力が math.nan ではなく None のままになるべきなのにそうならないバグを修正しました。

関数 sum および covar_pop で、データに math.nan 値がある場合、出力も math.nan になるべきなのにそうならないバグを修正しました。

ステージ操作でディレクトリを処理できないバグを修正しました。

DataFrame.to_pandas が精度38のSnowflake数値型を int64 として受け取るべきなのにそうならないバグを修正しました。

UDFs およびストアドプロシージャの登録のサポートを追加しました。

以下の APIs のサポートを追加しました。

• snowflake.snowpark.Session:

  • file.put

  • file.put_stream

  • file.get

  • file.get_stream

  • read.json

  • add_import

  • remove_import

  • get_imports

  • clear_imports

  • add_packages

  • add_requirements

  • clear_packages

  • remove_package

  • udf.register

  • udf.register_from_file

  • sproc.register

  • sproc.register_from_file

• snowflake.snowpark.functions

  • current_database

  • current_session

  • date_trunc

  • object_construct

  • object_construct_keep_null

  • pow

  • sqrt

  • udf

  • sproc

モック関数 to_time で StringType、 TimestampType、 VariantType のデータ変換のサポートを追加しました。

定数関数の列がnull充填されるバグを修正しました。

to_object、 to_array、 to_binary のnull入力をより適切に処理できるように修正しました。

タイムスタンプデータの比較で、2262年以降を処理できないバグを修正しました。

Session.builder.getOrCreate が作成されたモックセッションを返すべきなのにそうならないバグを修正しました。