BigQuery-Metadatensammler
Der BigQuery-Metadatensammler bietet schreibgeschützten Zugriff auf Metadaten aus einem externen BigQuery-Account.
Der Sammler sammelt Metadaten für BigQuery-Datensätze, Projekte, Tabellen und Spalten in einer BigQuery-Instanz und macht sie im Datenkatalog durchsuchbar und erkennbar. Der Sammler sammelt auch Heringsbeziehungen auf Spaltenebene zwischen Tabellen und Ansichten.
Metadaten katalogisiert
Der BigQuery-Sammler katalogisiert die folgenden Informationen.
| Objekt | Informationen katalogisiert |
|---|---|
| Datensätze | ID, Name, Beschreibung, Bezeichnungen (beachten Sie, dass es sich um Schlüssel-Wert-Paare handelt), Erstellungsdatum, Datum der letzten Änderung, Ablauf der Standardtabelle, Ablauf der Standardpartition, Datenspeicherort |
| Projekte | Name |
| Tabellen | Name, Beschreibung, Erstellungsdatum, Datum der letzten Änderung, Ablauf der Standardtabelle, Datenspeicherort, Bezeichnungen, Typ (Standard, Extern, Snapshot, Modell), partitioniert auf Feld, gruppiert nach Spalten für Standard- und Snapshot-Tabellen, Partitionstyp (Bereich oder Zeit) erfordert Partitionsfilter – Bereich (Start, Ende, Intervall) Zeit (Partitionstyp (Stunde, Tag, Monat, Jahr), Ablauf) |
| Spalten | Name, Beschreibung, Datentyp, ist auf Null setzbar, Spaltengröße |
| Ansicht | Name, Beschreibung, Erstellungsdatum, Ablauf der Standardtabelle, Datum der letzten Änderung, Datenspeicherort, Standardsortierung, Bezeichnungen, Ansichts-SQL, geclustert nach Spalten für Materialized |
Beziehungen zwischen Objekten
Katalogseiten zeigen Beziehungen zwischen den folgenden Daten-Asset-Typen an:
| Daten-Asset-Seite | Beziehungen |
|---|---|
| Datensätze | Tabellen, Ansichten |
| Projekte | Datenbasis |
| Tabellen | Spalte, Bezeichnungen |
| Spalten | Tabelle, Ansicht |
| Ansichten | Spalte |
| Bezeichnungswert | Tabelle, Ansicht, Projekt, Datensatz |
Herkunft für BigQuery
Die folgenden Abstammungsinformationen werden vom BigQuery-Sammler erfasst.
| Objekt | Herkunft verfügbar |
|---|---|
| Spalte anzeigen |
Der Sammler identifiziert die zugeordnete Spalte in einer vorgelagerten Ansicht oder Tabelle:
|