Collecteur de métadonnées dans le cloud DBT
Le collecteur de métadonnées dbt Cloud fournit un accès en lecture seule aux métadonnées à partir d’un compte dbt Cloud externe.
Le collecteur cloud dbt se connecte au projet cloud dbt et collecte les actifs dbt et les relations de traçabilité au niveau des colonnes à partir des vues de base de données associées aux actifs dbt.
Métadonnées cataloguées
Le collecteur dbt Cloud répertorie les informations suivantes.
| Objet | Informations cataloguées |
|---|---|
| Analyse | Nom, Description, Chemin d’accès, Chemin d’accès racine, Nom de package, ID unique, Alias, Méta, SQL brut, SQL compilé/Code compilé, Activé, Matérialisé, Type de ressource |
| Modèle | Nom, Description, Chemin d’accès, Chemin d’accès racine, Nom de package, ID unique, Alias, Méta, SQL brut, SQL compilé/Code compilé, Activé, Matérialisé, Type de ressource |
| Colonne de modèle | Nom de colonne |
| Projet | Nom, version du projet |
| Instantané | Nom, Description, Chemin d’accès, Chemin racine, Nom de package, ID unique, Alias, Méta, SQL brut/Code brut, SQL compilé/Code compilé, Activé, Matérialisé, Type de ressource |
| Extrait | Nom, Description, Chemin d’accès, Chemin racine, Nom de package, ID unique, Alias, Méta, SQL brut/Code brut, SQL compilé/Code compilé, Activé, Matérialisé, Type de ressource |
| Source | Nom, Description, Chemin d’accès, Chemin d’accès racine, Nom de package, ID unique, Alias, Métadonnées, SQL brut/Code brut, SQL compilé/Code compilé, Activé, Nom de la source, Type de ressource |
| Test | Nom, Description, Chemin d’accès, Chemin racine, Nom de package, ID unique, Alias, Méta, SQL brut/Code brut, SQL compilé/Code compilé, Activé, Matérialisé, Type de ressource |
| Résultat de test | Heure d’exécution du test, état, nombre d’échecs (le cas échéant), message émis par le test (le cas échéant) |
| Modèles sémantiques | Nom, Description, Chemin d’accès, Nom du package, ID unique, Activé, Type de ressource, Composants de modèle sémantique, Entité primaire |
| Entités | Titre, expression SQL, type d’entité |
| Dimensions | Titre, type de dimension |
| Mesures | Titre, Description, A une agrégation de mesures |
| Métriques | Titre, Description, Chemin d’accès, Nom du package, ID unique, Type de mesure |
Relation entre les objets
Les pages de catalogue affichent les relations entre les types de ressources de données suivants :
| Page Actifs de données | Relation |
|---|---|
| Modèle | Projet contenant le modèle dbt, Teste l’intégrité du modèle, actifs de données dbt (test, amorçage, modèle, instantané, source) qui sont en amont du modèle, actifs de données dbt (test, amorçage, modèle, instantané, source) qui sont en aval du modèle |
| Modèle sémantique | Projet contenant le modèle sémantique, modèle dbt lié au modèle sémantique, composants du modèle sémantique dbt (dimensions, entités, mesures), Mesure pour laquelle le modèle sémantique fournit un contexte |
| Colonne de modèle | Colonne de base de données dans la table ou la vue manifestée |
| Projet | Actifs de données DBT (Test, Amorçage, Modèle, Instantané, Source) contenus dans le projet |
| Instantané | Projet contenant le projet dbt, les actifs de données dbt (Test, Amorçage, Modèle, Source) qui sont en amont de l’instantané, les actifs de données dbt (Test, Amorçage, Modèle, Source) qui sont en aval de l’instantané |
| Extrait | Projet contenant le projet dbt, les actifs de données dbt (Test, Amorçage, Modèle, Instantané, Source) qui sont en amont de l’amorçage, les actifs de données dbt (Test, Amorçage, Modèle, Instantané, Source) qui sont en aval de l’amorçage |
| Source | Projet contenant le projet dbt, les ressources de données dbt (Test, Amorçage, Modèle, Instantané) qui sont en aval de l’amorçage, Schéma de base de données que la source représente |
| Test | Projet contenant le projet dbt, modèle dbt dont l’intégrité est testée par ce test |
| Résultat de test | Test DBT exécuté pour produire le résultat |
Traçabilité pour dbt
Les informations de traçabilité suivantes sont collectées par le collecteur cloud dbt.
| Objet | Traçabilité disponible |
|---|---|
| Modèle DBT matérialisé en tant que vue | Tables et colonnes de base de données référencées dans le modèle DBT matérialisées en tant que vue |
| Ressource DBT | Ressources de données DBT qui sont en amont et en aval (par exemple, les amorçages en amont des modèles et les tests qui sont en aval des modèles) de l’actif de données DBT. |
Snowflake est la source de données actuellement prise en charge pour la traçabilité inter-systèmes.