Intégration des données¶

Communément appelée processus ETL, l’intégration des données englobe les trois opérations principales suivantes :

Extraction: Exportation de données à partir de sources de données spécifiées.
Transformation: Modifier les données sources (si nécessaire), en utilisant des règles, des fusions, des tables de recherche ou d’autres méthodes de conversion pour qu’elles correspondent à la cible.
Chargement: Importation des données transformées dans une base de données cible.

L’usage le plus récent du terme est ELT, soulignant que l’opération de transformation n’a pas nécessairement besoin d’être effectuée avant le chargement, en particulier dans des systèmes tels que Snowflake qui prennent en charge la transformation pendant ou après le chargement.

En outre, la portée de l’intégration de données s’est élargie pour inclure un plus large éventail d’opérations, dont :

Préparation de données.
Migration, circulation et gestion des données.
Automatisation de l’entrepôt de données.

Les outils et technologies d’intégration de données suivants sont connus pour fournir une connectivité native à Snowflake :

Solution		Version / Configuration requise pour l’installation	Remarques
		Ab Initio : aucune exigence — contactez Ab Initio pour plus de détails. Snowflake : Pilote ODBC — téléchargement depuis le Snowflake Client Repository
		Azure Data Factory : Aucune exigence Snowflake : aucune exigence	Ressources supplémentaires : Activité de copie dans Azure Data Factory (documentation Azure Data Factory) Copiez des données depuis et vers Snowflake à l’aide d’Azure Data Factory (documentation Azure Data Factory)
		Boomi : DCP 4.2 (ou supérieur) ou intégration juillet 2020 (ou plus) Snowflake : aucune exigence	Validé par Snowflake Ready Technology Validation Program.
		Datameer : v7 Snowflake : aucune exigence	Ressources supplémentaires : Connecteurs pour stockages dans le cloud — Snowflake (documentation Datameer) Exportation vers Snowflake (Documentation Datameer)
		DataVirtuality : aucune exigence Snowflake : aucune exigence	Ressources supplémentaires : Intégrez vos données dans Snowflake (site Web DataVirtuality)
		dbt : version 0.13 (ou supérieure) Snowflake : aucune exigence	Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : Mise en route > Bases de données prises en charge > Snowflake (documentation dbt) Construction de modèles > Configurations spécifiques à l’entrepôt > Snowflake (documentation dbt) Comment nous configurons Snowflake (blog Fishtown Analytics)
		Denodo : Denodo Platform 6.0 (ou supérieur) Snowflake : aucune exigence	Ressources supplémentaires : Denodo Platform 6.0 (fiche technique Denodo)
		Diyotta : aucune exigence Snowflake : aucune exigence	Ressources supplémentaires : Diyotta et Snowflake (site Web Diyotta) Changement de plate-forme : de Netezza à Snowflake (fiche technique Diyotta — nécessite une inscription)
		Etleap : aucune exigence Snowflake : aucune exigence	Disponible à l’essai via Snowflake Partner Connect. Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : Etleap lance l’intégration de Snowflake (Blog d’Etleap)
		Etlworks : aucune exigence Snowflake : aucune exigence	Ressources supplémentaires : Etlworks et Snowflake (site Web Etlworks) Utilisation de Snowflake (documentation Etlworks)
		Fivetran : aucune exigence Snowflake : aucune exigence	Disponible à l’essai via Snowflake Partner Connect. Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : Intégration de Fivetran et Snowflake (site Web Fivetran)
		Google Cloud Data Fusion : plugin Snowflake Snowflake : aucune exigence	Ressources supplémentaires : Plugins pour Cloud Data Fusion (site Web de Google Cloud) Cloud Storage to Snowflake Action (GitHub)
		Google Cloud Dataflow : Apache Beam Snowflake : aucune exigence	Ressources supplémentaires : Snowflake I/O (documentation Apache Beam) Class SnowflakeIO (Apache Beam Javadoc)
		Heap : Connect Snowflake : aucune exigence	Ressources supplémentaires : Heap Connect pour Snowflake (documentation Heap)
		HVR : aucune exigence Snowflake : Pilote ODBC — téléchargement depuis le Snowflake Client Repository	Disponible à l’essai via Snowflake Partner Connect. Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : Configuration requise pour Snowflake (documentation HVR) Démarrage rapide pour HVR - Snowflake (documentation HVR)
		DataStage : InfoSphere Information Server 11.7.0 Snowflake : Pilote JDBC — téléchargement depuis Maven	Ressources supplémentaires : Connecteur Snowflake (Centre de connaissances IBM)
		Informatica Cloud : Connecteur Cloud pour Snowflake — disponible directement dans l’interface Cloud d’Informatica ou en téléchargement depuis l’Informatica Marketplace. Secure Agent — téléchargement et installation à partir de l’interface Cloud d’Informatica Snowflake : Pour l’optimisation « Push down » : Pilote ODBC — téléchargement depuis le Snowflake Client Repository Pour toutes les autres fonctionnalités : aucune exigence	Disponible à l’essai via Snowflake Partner Connect. Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : FAQ : connecteur Cloud d’Informatica pour Snowflake (communauté Snowflake) Requêtes relatives au connecteur Cloud Data Warehouse de Snowflake (Informatica Network)
		Informatica PowerCenter : PowerCenter 10.2 (ou supérieur) PowerExchange pour Snowflake Snowflake : Pour l’optimisation « Push down » : Pilote ODBC — téléchargement depuis le Snowflake Client Repository Pour toutes les autres fonctionnalités : aucune exigence	Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : Requêtes relatives au connecteur Cloud Data Warehouse de Snowflake (Informatica Network) PowerExchange pour le guide de l’utilisateur Snowflake (documentation Informatica) FAQ : Quelles sont les étapes à suivre pour remplacer les objets d’entrepôt de données par des objets Snowflake dans les mappages et sessions PowerCenter … (Informatica Network)
		Apache Kafka : aucune exigence Kafka Connect : API 2.0.0 à 2.2.0 (toutes les autres versions ne sont pas prises en charge) Snowflake : Connecteur Snowflake pour Kafka — téléchargement depuis Maven	Exigences supplémentaires si vous utilisez le format Avro ; pour plus de détails, voir Connecteur Snowflake pour Kafka.
		Keboola : aucune exigence Snowflake : aucune exigence	Ressources supplémentaires : Stockage (documentation Keboola) Transformation Snowflake (documentation Keboola)
		Chargeur de données Matillion : aucune exigence Snowflake : aucune exigence	Disponible à l’essai via Snowflake Partner Connect. Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : Comment créer un pipeline de données à l’aide du chargeur de données Matillion (blog de Matillion)
		Matillion ETL : aucune exigence Snowflake : aucune exigence	Disponible à l’essai via Snowflake Partner Connect. Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : Snowflake : Débuter (site Web de Matillion) Articles Snowflake avec vidéos (communauté de Matillion)
		Intégration de données Pentaho (PDI) : Pentaho 8.3 (ou version supérieure) : plugin Snowflake — en téléchargement à partir du portail client Pentaho (nécessite un identifiant de connexion) Pentaho 8.2 (ou version inférieure) : aucune exigence Pentaho mais des exigences Snowflake Snowflake : Pentaho 8.3 (ou version supérieure) : aucune exigence Pentaho 8.2 (ou version inférieure) : . Pilote JDBC — téléchargement depuis Maven . ou . connecteur tiers (PentahoSnowflakePlugin) — téléchargement depuis GitHub	Ressources supplémentaires : PDI et Snowflake (documentation de Pentaho) Chargement en masse dans Snowflake (documentation de Pentaho) PentahoSnowflakePlugin Lisez-moi (GitHub) Configuration d’une connexion JDBC à Snowflake en utilisant Pentaho (communauté Snowflake)
		Qlik Replicate : aucune exigence Snowflake : Pilote ODBC — téléchargement depuis le Snowflake Client Repository	Anciennement Attunity Replicate Disponible à l’essai via Snowflake Partner Connect. Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : Partenaires technologiques > Snowflake (site Web de Qlik)
		Rivery : aucune exigence Snowflake : aucune exigence	Disponible à l’essai via Snowflake Partner Connect. Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : Maintenant compatible avec Snowflake (site Web Rivery) Intégrations : Snowflake (site Web Rivery) Spotlight client : Roomjoom (site Web Rivery)
		SAP Data Services : 4.2 SP12 (ou version supérieure) Snowflake : Pilote ODBC — téléchargement depuis le Snowflake Client Repository	Ressources supplémentaires : Data Services — Nouveautés (Portail d’aide de SAP) Data Services Supplement pour Big Data (Portail d’aide de SAP)
		Segment : aucune exigence Snowflake : aucune exigence	Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : Destination Snowflake (documentation Segment)
		Snaplogic : 4.7.0 (ou supérieur) avec Snowflake Snap Pack Snowflake : Pilote JDBC — téléchargement depuis Maven	Disponible à l’essai via Snowflake Partner Connect. Ressources supplémentaires : Snowflake Snap Pack (documentation SnapLogic)
		Snowplow : Snowflake Loader — téléchargement de GitHub Snowflake : aucune exigence	Ressources supplémentaires : Sortie de Snowplow Snowflake DB Loader (blog Snowplow)
		Stitch : aucune exigence Snowflake : aucune exigence	Disponible à l’essai via Snowflake Partner Connect. Ressources supplémentaires : Connexion d’un entrepôt de données Snowflake à Stitch (documentation Stitch)
		StreamSets : aucune exigence Snowflake : aucune exigence	Validé par Snowflake Ready Technology Validation Program. Utilise Snowpipe pour un chargement continu. Ressources supplémentaires : Apprivoiser Snowflake avec StreamSets (site Web de StreamSets)
		Striim : aucune exigence Snowflake : aucune exigence	Disponible à l’essai via Snowflake Partner Connect. Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : Striim pour l’entrepôt de données de Snowflake (site Web de Striim)
		Tableau : Prep 2018.3 (ou version supérieure) Snowflake : Pilote ODBC — téléchargement depuis le Snowflake Client Repository	Ressources supplémentaires : Snowflake pour Tableau Prep (site Web Tableau)
		Talend : Talend 6.4 (ou version supérieure) : aucune exigence Talend 6.3 (ou version inférieure) : composant Snowflake requis — contactez Talend pour plus de détails Snowflake : aucune exigence	Disponible à l’essai via Snowflake Partner Connect. Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : Composants Snowflake dans Talend (documentation Talend) Centralisation des métadonnées Snowflake (documentation Talend)
		TMMData : aucune exigence Snowflake : aucune exigence
		Trifacta : aucune exigence Snowflake : aucune exigence	Ressources supplémentaires : Trifacta pour Snowflake (site Web Trifacta) Trifacta pour Snowflake : Préparation des données pour votre entrepôt ou lac de données dans le Cloud — Partie 1 (blog de Trifacta)
		Wherescape : aucune exigence Snowflake : aucune exigence	Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : Automatisation Wherescape pour Snowflake (site Web Wherescape)
		Workato : aucune exigence Snowflake : aucune exigence	Validé par Snowflake Ready Technology Validation Program. Ressources supplémentaires : Workato est prêt pour Snowflake… (blog de Workato) Connecteurs > Snowflake (documentation Workato)