データ統合¶
一般的に ETL と呼ばれるデータ統合には、次の3つの主要な操作が含まれます。
- 抽出:
指定されたデータソースからデータをエクスポートします。
- 変換:
ルール、マージ、ルックアップテーブルまたはその他の変換方法を使用して、ターゲットに一致するようにソースデータを(必要に応じて)変更します。
- 読み込み:
結果の変換されたデータをターゲットデータベースにインポートします。
用語の最新の使用法は ELT で、特にロード中またはロード後の変換をサポートするSnowflakeなどのシステムでは、プロセスの変換部分を必ずしもロード前に実行する必要がないことを強調しています。
さらに、データ統合の範囲が拡張され、次のような幅広い操作が含まれるようになりました。
データ準備。
データの移行、移動、および管理。
データウェアハウスの自動化。
以下のデータ統合ツールとテクノロジーでは、Snowflakeにネイティブで接続できることが判明しています。
解決策 |
バージョン / インストール 要件 |
メモ |
|
---|---|---|---|
Ab Initio: 要件なし---詳細についてはAb Initioにお問い合わせください Snowflake: ODBCドライバー --- ODBC ダウンロード ページからダウンロード |
|||
Agile Data Engine: 要件なし Snowflake: 要件なし |
|||
Airbyte: 要件なし Snowflake: 要件なし |
|
||
Alteryx Designer Cloud: 要件なし Snowflake: 要件なし |
|
||
Amazon Data Firehose: 要件なし Snowflake: 要件なし |
追加のリソース: |
||
Ascend.io: 要件なし Snowflake: 要件なし |
|
||
Azure Data Factory: 要件なし Snowflake: 要件なし |
|
||
Boomi: DCP 4.2(またはそれ以上)または2020年7月の統合(またはそれ以上) Snowflake: 要件なし |
|||
Coalesce: 要件なし Snowflake: 要件なし |
|
||
CData ソフトウェア: ドライバー/コネクタ/アプリケーションの 最新バージョン が常に推奨されますが、ライセンスが付与されている場合は、レガシーバージョンが引き続き機能します。 変更の実装方法によっては、ドライバーのリリース以降のSnowflakeに対する変更がドライバーで使用できない場合があることに注意してください。 Snowflake: 要件なし |
|
||
Census: 要件なし Snowflake: 要件なし |
|
||
Datameer: v7 Snowflake: 要件なし |
|
||
DataVirtuality: 要件なし Snowflake: 要件なし |
|
||
dbt: v0.13(またはそれ以上) Snowflake: 要件なし |
|
||
Denodo: Denodoプラットフォーム6.0(またはそれ以上) Snowflake: 要件なし |
|
||
Diyotta: 要件なし Snowflake: 要件なし |
|
||
Etleap: 要件なし Snowflake: 要件なし |
|
||
Etlworks: 要件なし Snowflake: 要件なし |
|
||
Fivetran: 要件なし Snowflake: 要件なし |
|
||
Google Cloud Data Fusion: Snowflakeプラグイン Snowflake: 要件なし |
|
||
Google Cloud Dataflow: Apache Beam Snowflake: 要件なし |
|
||
Heap: 接続 Snowflake: 要件なし |
|
||
Hevo Data: 要件なし Snowflake: 要件なし |
|
||
Hightouch: 要件なし Snowflake: 要件なし |
|
||
HVR: 要件なし Snowflake: ODBCドライバー --- ODBC ダウンロード ページからダウンロード |
|
||
DataStage: InfoSphere 情報サーバー11.7 Snowflake: JDBCドライバー --- Maven Central Repositoryの JDBC ドライバーページ からダウンロード |
|
||
Informatica Cloud:
Snowflake:
|
|
||
Informatica Data Loader: 要件なし Snowflake: 要件なし |
|
||
Informatica PowerCenter:
Snowflake:
|
|
||
Apache Kafka: 要件なし Kafka Connect: API 2.0.0から2.2.0(他のすべてのバージョンはサポートされていません) Snowflake: Kafka用のSnowflakeコネクタ。 --- Maven からダウンロード |
|
||
Keboola: 要件なし Snowflake: 要件なし |
|
||
Knoema: 要件なし Snowflake: 要件なし |
|
||
Matillion Data Loader: 要件なし Snowflake: 要件なし |
|
||
Matillion ETL : 要件なし Snowflake: 要件なし |
|
||
Nexla: 要件なし Snowflake: 要件なし(ODBC、 JDBC、および API オプション) |
|
||
Pentahoデータ統合(PDI):
Snowflake:
|
|
||
Attunity Replicate: 要件なし Snowflake: ODBCドライバー --- ODBC ダウンロード ページからダウンロード |
|
||
Rivery: 要件なし Snowflake: 要件なし |
|
||
SAP データサービス: 4.2 SP12 (またはそれ以上) Snowflake: ODBCドライバー --- ODBC ダウンロード ページからダウンロード |
|
||
セグメント: 要件なし Snowflake: 要件なし |
|
||
Skyvia: 要件なし Snowflake: 要件なし |
|
||
Solace: 要件なし Snowflake: 要件なし |
|
||
Snaplogic: Snowflake Snap Packで4.7.0(またはそれ以上) Snowflake: JDBCドライバー --- Maven Central Repositoryの JDBC ドライバーページ からダウンロード |
|
||
Snowplow: Snowflake Loader --- GitHub からダウンロード Snowflake: 要件なし |
|
||
Stitch: 要件なし Snowflake: 要件なし |
|
||
StreamSets: 要件なし Snowflake: 要件なし |
|
||
Striim: 要件なし Snowflake: 要件なし |
|
||
Chartio: 要件なし Snowflake: 要件なし |
|
||
Tableau: Prep 2018.3(またはそれ以上) Snowflake: ODBCドライバー --- ODBC ダウンロード ページからダウンロード |
|
||
Talend:
Snowflake: 要件なし |
|
||
TIBCO ActiveMatrix BusinessWorks:
Snowflake: JDBCドライバー --- Maven Central Repositoryの JDBC ドライバーページ からダウンロード |
|
||
TMMData: 要件なし Snowflake: 要件なし |
|||
Trifacta: 要件なし Snowflake: 要件なし |
|
||
Wherescape: 要件なし Snowflake: 要件なし |
|
||
Workato: 要件なし Snowflake: 要件なし |
|