Intégration des données

.

Rubriques connexes

• Vue d’ensemble du chargement des données

• Transformation des données pendant un chargement

Communément appelée processus ETL, l’intégration des données englobe les trois opérations principales suivantes :

Extraction

Exportation de données à partir de sources de données spécifiées.

Transformation

Modifier les données sources (si nécessaire), en utilisant des règles, des fusions, des tables de recherche ou d’autres méthodes de conversion pour qu’elles correspondent à la cible.

Chargement

Importation des données transformées dans une base de données cible.

L’usage le plus récent du terme est ELT, soulignant que l’opération de transformation n’a pas nécessairement besoin d’être effectuée avant le chargement, en particulier dans des systèmes tels que Snowflake qui prennent en charge la transformation pendant ou après le chargement.

En outre, la portée de l’intégration de données s’est élargie pour inclure un plus large éventail d’opérations, dont :

• Préparation de données.

• Migration, circulation et gestion des données.

• Automatisation de l’entrepôt de données.

Les outils et technologies d’intégration de données suivants sont connus pour fournir une connectivité native à Snowflake :

Solution		Version / Configuration requise pour l’installation	Remarques
		Ab Initio : aucune exigence — contactez Ab Initio pour plus de détails. Snowflake : Pilote ODBC — téléchargement à partir de la page Télécharger ODBC
		Agile Data Engine : aucune exigence Snowflake : aucune exigence
		Azure Data Factory : Aucune exigence Snowflake : aucune exigence	Ressources supplémentaires : Activité de copie dans Azure Data Factory (documentation Azure Data Factory) Copiez des données depuis et vers Snowflake à l’aide d’Azure Data Factory (documentation Azure Data Factory)
		Boomi : DCP 4.2 (ou supérieur) ou intégration juillet 2020 (ou plus) Snowflake : aucune exigence	Validé par Snowflake Ready Technology Validation Program.
		CData Software : la dernière version du pilote/du connecteur/de l’application est toujours recommandée, mais les anciennes versions continueront à fonctionner si elles disposent d’une licence. Notez que toute modification apportée à Snowflake depuis la publication d’un pilote peut ne pas être disponible dans le pilote, en fonction de la manière dont les modifications sont mises en œuvre. Snowflake : aucune exigence	Ressources supplémentaires : Snowflake - Documentation du pilote (Document CData Software) Guides et tutoriels sur l’intégration de Snowflake (Base de connaissances CData Software)
		Datameer : v7 Snowflake : aucune exigence	Ressources supplémentaires : Connecteurs pour stockages dans le cloud — Snowflake (documentation Datameer) Exportation vers Snowflake (Documentation Datameer)
		DataVirtuality : aucune exigence Snowflake : aucune exigence	Ressources supplémentaires : Connecteur Snowflake Data Warehouse (site Web de DataVirtuality)
		dbt : version 0.13 (ou supérieure) Snowflake : aucune exigence	Disponible à l’essai via Snowflake Partner Connect. Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : Mise en route > Bases de données prises en charge > Snowflake (documentation dbt) Construction de modèles > Configurations spécifiques à l’entrepôt > Snowflake (documentation dbt) Comment nous configurons Snowflake (blog Fishtown Analytics)
		Denodo : Denodo Platform 6.0 (ou supérieur) Snowflake : aucune exigence	Ressources supplémentaires : Fiche technique de la plate-forme Denodo 8.0 (site Web de Denodo) Comment se connecter à Snowflake à partir de Denodo (Base de connaissances Denodo)
		Diyotta : aucune exigence Snowflake : aucune exigence	Ressources supplémentaires : Utiliser un objet de données Snowflake (site Web de Diyotta)
		Etleap : aucune exigence Snowflake : aucune exigence	Disponible à l’essai via Snowflake Partner Connect. Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : Etleap lance l’intégration de Snowflake (Blog d’Etleap)
		Etlworks : aucune exigence Snowflake : aucune exigence	Ressources supplémentaires : Etlworks et Snowflake (site Web Etlworks) Utilisation de Snowflake (documentation Etlworks)
		Fivetran : aucune exigence Snowflake : aucune exigence	Disponible à l’essai via Snowflake Partner Connect. Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : Intégration de Fivetran et Snowflake (site Web Fivetran)
		Google Cloud Data Fusion : plugin Snowflake Snowflake : aucune exigence	Ressources supplémentaires : Plugins pour Cloud Data Fusion (site Web de Google Cloud) Cloud Storage to Snowflake Action (GitHub)
		Google Cloud Dataflow : Apache Beam Snowflake : aucune exigence	Ressources supplémentaires : Snowflake I/O (documentation Apache Beam) Class SnowflakeIO (Apache Beam Javadoc)
		Heap : Connect Snowflake : aucune exigence	Ressources supplémentaires : Heap Connect pour Snowflake (documentation Heap)
		Hevo Data : aucune exigence Snowflake : aucune exigence	Ressources supplémentaires : Destinations > Entrepôts de données > Snowflake (Documentation Hevo)
		Hightouch : aucune exigence Snowflake : aucune exigence	Ressources supplémentaires : Activer le Data Cloud (site Web de Hightouch) Sources > Snowflake (documentation de Hightouch)
		HVR : aucune exigence Snowflake : Pilote ODBC — téléchargement à partir de la page Télécharger ODBC	Disponible à l’essai via Snowflake Partner Connect. Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : Configuration requise pour Snowflake (documentation HVR) Démarrage rapide pour HVR - Snowflake (documentation HVR)
		DataStage : InfoSphere Information Server 11.7.0 Snowflake : Pilote JDBC — téléchargement depuis Maven	Ressources supplémentaires : Connecteur Snowflake (Centre de connaissances IBM)
		Informatica Cloud : Connecteur Cloud pour Snowflake — disponible directement dans l’interface Cloud d’Informatica ou en téléchargement depuis l’Informatica Marketplace. Secure Agent — téléchargement et installation à partir de l’interface Cloud d’Informatica Snowflake : Pour l’optimisation du push-down : Pilote ODBC — télécharger à partir de la page Télécharger ODBC Pour toutes les autres fonctionnalités : aucune exigence	Disponible à l’essai via Snowflake Partner Connect. Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : FAQ : connecteur Cloud d’Informatica pour Snowflake (communauté Snowflake) Requêtes relatives au connecteur Cloud Data Warehouse de Snowflake (Informatica Network)
		Informatica Data Loader : aucune exigence Snowflake : aucune exigence	Disponible à l’essai via Snowflake Partner Connect. Ressources supplémentaires : Tuto vidéo - Premiers pas avec Informatica Data Loader pour Snowflake (vidéos Informatica)
		Informatica PowerCenter : PowerCenter 10.2 (ou supérieur) PowerExchange pour Snowflake Snowflake : Pour l’optimisation du push-down : Pilote ODBC — télécharger à partir de la page Télécharger ODBC Pour toutes les autres fonctionnalités : aucune exigence	Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : Requêtes relatives au connecteur Cloud Data Warehouse de Snowflake (Informatica Network) Guide de l’utilisateur de PowerExchange pour Snowflake (documentation d’Informatica) FAQ : Quelles sont les étapes à suivre pour remplacer les objets d’entrepôt de données par des objets Snowflake dans les mappages et sessions PowerCenter … (Informatica Network)
		Apache Kafka : aucune exigence Kafka Connect : API 2.0.0 à 2.2.0 (toutes les autres versions ne sont pas prises en charge) Snowflake : Connecteur Snowflake pour Kafka — téléchargement depuis Maven	Exigences supplémentaires si vous utilisez le format Avro ; pour plus de détails, voir Connecteur Snowflake pour Kafka.
		Keboola : aucune exigence Snowflake : aucune exigence	Ressources supplémentaires : Stockage (documentation Keboola) Transformation Snowflake (documentation Keboola)
		Knoema : aucune exigence Snowflake : aucune exigence	Disponible à l’essai via Snowflake Partner Connect.
		Chargeur de données Matillion : aucune exigence Snowflake : aucune exigence	Disponible à l’essai via Snowflake Partner Connect. Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : Comment créer un pipeline de données à l’aide du chargeur de données Matillion (blog de Matillion)
		Matillion ETL : aucune exigence Snowflake : aucune exigence	Disponible à l’essai via Snowflake Partner Connect. Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : Snowflake : Débuter (site Web de Matillion) Articles Snowflake avec vidéos (communauté de Matillion)
		Intégration de données Pentaho (PDI) : Pentaho 8.3 (ou version supérieure) : plugin Snowflake — en téléchargement à partir du portail client Pentaho (nécessite un identifiant de connexion) Pentaho 8.2 (ou version inférieure) : aucune exigence Pentaho mais des exigences Snowflake Snowflake : Pentaho 8.3 (ou version supérieure) : aucune exigence Pentaho 8.2 (ou version inférieure) : . Pilote JDBC — téléchargement depuis Maven . ou . connecteur tiers (PentahoSnowflakePlugin) — téléchargement depuis GitHub	Ressources supplémentaires : PDI et Snowflake (documentation de Pentaho) Chargement en masse dans Snowflake (documentation de Pentaho) PentahoSnowflakePlugin Lisez-moi (GitHub) Configuration d’une connexion JDBC à Snowflake en utilisant Pentaho (communauté Snowflake)
		Qlik Replicate : aucune exigence Snowflake : Pilote ODBC — téléchargement à partir de la page Télécharger ODBC	Anciennement Attunity Replicate Disponible à l’essai via Snowflake Partner Connect. Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : Partenaires technologiques > Snowflake (site Web de Qlik)
		Rivery : aucune exigence Snowflake : aucune exigence	Disponible à l’essai via Snowflake Partner Connect. Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : Maintenant compatible avec Snowflake (site Web Rivery) Intégrations : Snowflake (site Web Rivery) Spotlight client : Roomjoom (site Web Rivery)
		SAP Data Services : 4.2 SP12 (ou supérieur) Snowflake : Pilote ODBC — téléchargement à partir de la page Télécharger ODBC	Ressources supplémentaires : Data Services — Nouveautés (Portail d’aide de SAP) Data Services Supplement pour Big Data (Portail d’aide de SAP)
		Segment : aucune exigence Snowflake : aucune exigence	Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : Destination Snowflake (documentation Segment)
		Skyvia : aucune exigence Snowflake : aucune exigence	Ressources supplémentaires : Intégration de Skyvia et Snowflake (site Web de Skyvia) Utiliser Snowflake (documentation de Skyvia)
		Snaplogic : 4.7.0 (ou supérieur) avec Snowflake Snap Pack Snowflake : Pilote JDBC — téléchargement depuis Maven	Disponible à l’essai via Snowflake Partner Connect. Ressources supplémentaires : Snowflake Snap Pack (documentation SnapLogic)
		Snowplow : Snowflake Loader — téléchargement de GitHub Snowflake : aucune exigence	Ressources supplémentaires : Snowflake Loader (documentation de Snowplow)
		Stitch : aucune exigence Snowflake : aucune exigence	Disponible à l’essai via Snowflake Partner Connect. Ressources supplémentaires : Connexion d’un entrepôt de données Snowflake à Stitch (documentation Stitch)
		StreamSets : aucune exigence Snowflake : aucune exigence	Utilise Snowpipe pour un chargement continu. Disponible à l’essai via Snowflake Partner Connect. Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : Apprivoiser Snowflake avec StreamSets (site Web de StreamSets)
		Striim : aucune exigence Snowflake : aucune exigence	Disponible à l’essai via Snowflake Partner Connect. Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : Striim pour l’entrepôt de données de Snowflake (site Web de Striim)
		Supermetrics : aucune exigence Snowflake : aucune exigence	Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : Entrepôt de données Snowflake : premiers pas (documentation de Supermetrics)
		Tableau : Prep 2018.3 (ou version supérieure) Snowflake : Pilote ODBC — téléchargement à partir de la page Télécharger ODBC	Ressources supplémentaires : Snowflake pour Tableau Prep (site Web Tableau)
		Talend : Talend 6.4 (ou version supérieure) : aucune exigence Talend 6.3 (ou version inférieure) : composant Snowflake requis — contactez Talend pour plus de détails Snowflake : aucune exigence	Disponible à l’essai via Snowflake Partner Connect. Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : Composants Snowflake dans Talend (documentation Talend) Centralisation des métadonnées Snowflake (documentation Talend)
		TIBCO ActiveMatrix BusinessWorks : 6.x (ou plus) Plug-in pour Snowflake 6.x (ou supérieur) Snowflake : Pilote JDBC — téléchargement depuis Maven	Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : Guide de l’utilisateur du plug-in TIBCO ActiveMatrix BusinessWorks pour Snowflake (documentation TIBCO)
		TMMData : aucune exigence Snowflake : aucune exigence
		Trifacta : aucune exigence Snowflake : aucune exigence	Ressources supplémentaires : Trifacta pour Snowflake (site Web Trifacta) Trifacta pour Snowflake : Préparation des données pour votre entrepôt ou lac de données dans le Cloud — Partie 1 (blog de Trifacta)
		Wherescape : aucune exigence Snowflake : aucune exigence	Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : Automatisation Wherescape pour Snowflake (site Web Wherescape)
		Workato : aucune exigence Snowflake : aucune exigence	Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : Workato est prêt pour Snowflake… (blog de Workato) Connecteurs > Snowflake (documentation Workato)