Openflow Connector for MySQL について¶

テーブルの複製方法¶

テーブルは以下のステージで複製されます。

1. スキーマのイントロスペクション: コネクタは、列名やタイプを含むソーステーブルの列を検出し、Snowflakeとコネクタの 制限事項 に対してそれらを検証します。検証に失敗するとこのステージは失敗し、サイクルが完了します。このステージが正常に終了すると、コネクタは空の宛先テーブルを作成します。

2. スナップショットロード: コネクタは、ソーステーブルで利用可能なすべてのデータを宛先テーブルにコピーします。このステージが失敗した場合、それ以上のデータは複製されません。正常に完了すると、ソーステーブルのデータが宛先テーブルで利用可能になります。

3. 増分ロード: コネクタはソーステーブルの変更を追跡し、その変更を宛先テーブルに適用します。このプロセスはテーブルが複製から削除されるまで続きます。このステージで失敗すると、問題が解決するまでソーステーブルの複製が永久的に停止します。

ワークフロー¶

1. MySQL データベース管理者 は以下のタスクを実行します。

   • MySQL 複製設定を構成する

   • コネクタの認証情報を作成する

   • （オプション） SSL 証明書を提供します。

2. Snowflakeアカウント管理者 は以下のタスクを実行します。

   1. コネクタのサービスユーザー、コネクタのウェアハウス、複製データの宛先データベースを作成します。

   2. コネクタをインストールします。

   3. フローテンプレートに必要なパラメーターを指定します。

   4. フローを実行します。コネクタは、Openflowの実行時に以下のタスクを実行します。

      1. ジャーナルテーブルのスキーマを作成します。

      2. 複製用に構成されたソーステーブルと一致するスキーマと宛先テーブルを作成します。

      3. テーブルの複製を開始します。複製プロセスの詳細については、 テーブルの複製方法 をご参照ください。

サポートされている MySQL バージョン¶

以下のテーブルに、テスト済みで公式にサポートされている MySQL バージョンを一覧表示します。

Openflow要件¶

• ランタイムのサイズはM以上である必要があります。大量のデータを複製する場合、特に行サイズが大きい場合は、より大きなランタイムを使用します。

• コネクタは、マルチノードのOpenflowランタイムをサポートしていません。このコネクタのランタイムを、 Min nodes および Max nodes を 1 に設定して構成します。

制限事項¶

• コネクタは、 MySQL バージョン8以降をサポートしています。

• コネクタは、 MySQL を使用したユーザー名とパスワードによる認証のみをサポートしています。

• コネクタは、 Snowflakeのタイプ制限 を超えるデータを持つテーブルを複製しません。

• コネクタは、 GEOMETRY、 GEOMETRYCOLLECTION、 LINESTRING、 MULTILINESTRING、 MULTIPOINT、 MULTIPOLYGON、 POINT、 POLYGON のタイプの列を複製しません。

• コネクタには、 MySQL のグループ複製制限 があります。これは、1つのトランザクションが4 GB 以下のサイズのバイナリログメッセージに収まらなければならないことを意味します。

• コネクタでは、複製されるすべてのテーブルに主キーが必要です。

• コネクタは、主キー定義の変更と数値列の精度やスケールの変更を除いて、ソーステーブルのスキーマ変更をサポートします。

次のステップ¶

の設定 Openflow Connector for MySQL