Coletor de metadados do BigQuery
O coletor de metadados do BigQuery fornece acesso somente leitura aos metadados de uma conta externa do BigQuery.
O coletor colhe metadados para conjuntos de dados, projetos, tabelas e colunas do BigQuery em uma instância do BigQuery e os torna pesquisáveis e detectáveis no catálogo de dados. O coletor também colhe relacionamentos de linhagem no nível da coluna entre tabelas e exibições.
Metadados catalogados
O coletor do BigQuery cataloga as seguintes informações.
| Objeto | Informações catalogadas |
|---|---|
| Conjuntos de dados | ID, nome, descrição, rótulos (observe que são pares de chave/valor), data de criação, data da última modificação, expiração da tabela padrão, expiração da partição padrão, local dos dados |
| Projetos | Nome |
| Tabelas | Nome, Descrição, Data de criação, Data da última modificação, expiração da tabela padrão, local dos dados, Rótulos, Tipo (Padrão, Externo, Instantâneo, Modelo), particionado em campo, agrupado por colunas para tabelas padrão e de snapshot, Tipo de partição (intervalo ou hora) requer filtro de partição - Intervalo (início, término, intervalo) Tempo (Tipo de partição (hora, dia, mês, ano), expiração) |
| Colunas | Nome, Descrição, Tipo de dados, É nulo, Tamanho da coluna |
| Exibição | Nome, descrição, data de criação, expiração da tabela padrão, data da última modificação, local de dados, agrupamento padrão, rótulos, SQL de exibição, Clustered por colunas para materializado |
Relacionamentos entre objetos
As páginas do catálogo mostram relacionamentos entre os seguintes tipos de ativos de dados:
| Página de ativo de dados | Relacionamentos |
|---|---|
| Conjuntos de dados | Exibições e tabelas |
| Projetos | Conjunto de dados |
| Tabelas | Coluna, Rótulos |
| Colunas | Exibição |
| Exibições | Coluna |
| Valor do rótulo | Exibição, Projeto, Conjunto de dados |
Linhagem do BigQuery
As seguintes informações de linhagem são coletadas pelo coletor do BigQuery.
| Objeto | Linhagem disponível |
|---|---|
| Ver coluna |
O coletor identifica a coluna associada em uma exibição ou tabela ascendente:
|