Collecteur de métadonnées BigQuery
Le collecteur de métadonnées BigQuery fournit un accès en lecture seule aux métadonnées à partir d’un compte BigQuery externe.
Le collecteur collecte les métadonnées des jeux de données, des projets, des tables et des colonnes BigQuery dans une instance BigQuery, et les rend consultables et détectables dans le catalogue de données. Le collecteur extrait également les relations de traçabilité au niveau des colonnes entre les tables et les vues.
Métadonnées cataloguées
Le collecteur BigQuery répertorie les informations suivantes.
| Objet | Informations cataloguées |
|---|---|
| Jeux de données | ID, nom, description, étiquettes (notez qu’il s’agit de paires clé/valeur), date de création, date de dernière modification, expiration de la table par défaut, expiration de la partition par défaut, emplacement des données |
| Projets | Nom |
| Tables | Nom, Description, Date de création, Date de la dernière modification, Expiration de la table par défaut, Emplacement des données, Étiquettes, Type (Standard, Externe, Instantané, Modèle), Partitionné sur le champ, Mise en grappe par colonnes pour les tables standard et d’instantané, Type de partition (plage ou heure) Nécessite un filtre de partition : plage (début, fin, intervalle) Heure (type de partition [heure, jour, mois, année], expiration) |
| Colonnes | Nom, Description, Type de données, Peut être nul, Taille de colonne |
| Vue | Nom, description, date de création, expiration de table par défaut, date de dernière modification, emplacement des données, classement par défaut, étiquettes, vue SQL, mis en grappe par colonnes pour matérialisé |
Relations entre les objets
Les pages de catalogue affichent les relations entre les types de ressources de données suivants :
| Page Actifs de données | Relations |
|---|---|
| Jeux de données | Tables, vues |
| Projets | Ensemble de données |
| Tables | Colonne, Étiquettes |
| Colonnes | Table, vue |
| Vues | Colonne |
| Valeur d'étiquette | Table, vue, projet, ensemble de données |
Traçabilité pour BigQuery
Les informations de traçabilité suivantes sont collectées par le collecteur BigQuery.
| Objet | Traçabilité disponible |
|---|---|
| Afficher la colonne |
Le collecteur identifie la colonne associée dans une vue ou une table en amont :
|