Vous êtes ici :
Compréhension des identifiants nommés, des connexions et des pipelines
Lorsque vous créez un pipeline de données dans Marketing Intelligence, trois composants fonctionnent ensemble pour ingérer des données : Identifiant nommé, Connexion et Pipeline. Cette architecture sépare l'authentification, la connectivité et le traitement des données. Vous pouvez ainsi réutiliser les identifiants et configurer efficacement les pipelines.
Identifiants nommés
Un identifiant nommé spécifie les détails d'authentification et le point de terminaison d'un système externe. Il agit comme une configuration centralisée que les services référencent. Il n'est pas nécessaire de définir les détails d'authentification chaque fois que vous créez une connexion.
Un identifiant nommé inclut généralement :
- L'URL du point de terminaison système externe
- La méthode d'authentification, telle que OAuth ou l'authentification de base
- Identifiants requis, tels que jetons, noms d'utilisateur ou mots de passe
Connexions
Une connexion associe Data Cloud à une source de données externe. Il définit comment Data Cloud interagit avec le système source et prépare les données pour l'ingestion.
Une connexion inclut généralement :
- Configuration du connecteur pour le système source
- Authentification en utilisant un identifiant nommé
Pipelines
Un pipeline gère le workflow d'ingestion et de traitement des données de bout en bout. Il récupère les données de la connexion et les prépare pour une utilisation dans Data Cloud.
Un pipeline gère :
- Ingestion de données à partir du système source
- Transformation de données
- Harmonisation des données
- Chargement de données traitées dans des objets Data Cloud
Relations des composants
| Relation | Description |
|---|---|
| Identifiant nommé → Connexion | Un identifiant nommé peut être utilisé par plusieurs connexions. |
| Identifiant nommé → Pipeline | Un identifiant nommé peut prendre en charge plusieurs pipelines. |
| Connexion → Pipeline | Chaque connexion est associée à un pipeline. |
Fonctionnement des composants
Lorsqu'un pipeline est exécuté :
- L'identifiant nommé fournit l'authentification et le point de terminaison pour accéder au système externe.
- La connexion utilise cet identifiant pour établir le lien entre Data Cloud et la source de données externe.
- Le pipeline récupère les données via la connexion et effectue l'ingestion, la transformation et le chargement dans Data Cloud.
Exemple : Connexion de plusieurs comptes Google Ads
Supposons que vous souhaitez ingérer les données de trois comptes Google Ads différents pour votre organisation. Au lieu de configurer l'authentification trois fois, vous pouvez :
- Créez un identifiant nommé appelé « Google Ads Auth » qui contient votre jeton OAuth et le point de terminaison d'API Google Ads.
- Créez trois connexions distinctes (une pour chaque compte) qui référencent toutes « Google Ads Auth » pour l'authentification.
- Créez trois Pipelines (un par connexion) pour ingérer, transformer et charger des données de compte dans Data Cloud.
Si votre jeton d'authentification Google Ads expire, vous devez le mettre à jour à un emplacement unique : Identifiant nommé. Les trois connexions et pipelines utilisent automatiquement l'identifiant mis à jour sans nécessiter de reconfiguration individuelle.
