O Knowledge Catalog (antigo Dataplex Universal Catalog) é uma solução inteligente de governança de dados que ajuda você a unificar e gerenciar dados distribuídos em grande escala, com menor sobrecarga operacional. Ao automatizar a descoberta, a catalogação, as verificações de qualidade e o rastreamento de linhagem de dados usando IA, o Knowledge Catalog ajuda você a criar uma base de dados confiável para análises e cargas de trabalho de IA. Essa abordagem unificada permite que sua organização reduza os custos de gerenciamento de dados, melhore a qualidade de dados e a confiança, e acelere o tempo até os insights para tomar decisões de negócios melhores.
Casos de uso
O Knowledge Catalog resolve desafios comuns de dados, como silos de dados, qualidade de dados inconsistente ou dificuldade em encontrar os dados certos para análise. Por exemplo, uma empresa de varejo pode usar o Knowledge Catalog para unificar dados do cliente do Cloud Storage, do Spanner e do Pub/Sub em um único catálogo. Isso permite que as equipes de marketing e vendas descubram e confiem nos dados do cliente para criar campanhas personalizadas e prever vendas.
Outro exemplo: uma instituição financeira pode usar o Knowledge Catalog para aplicar regras de qualidade de dados e rastrear a linhagem para relatórios regulamentares, reduzindo os riscos de compliance. Ou um prestador de cuidados de saúde pode usar o Knowledge Catalog para criar um ambiente controlado de compartilhamento de dados pessoais para pesquisadores, protegendo a privacidade dos pacientes.
Como o Catálogo de Conhecimento funciona
O Knowledge Catalog funciona conectando-se às suas fontes de dados em Google Cloud, como BigQuery, Cloud Storage, Pub/Sub, Spanner e muito mais. Ele coleta automaticamente metadados técnicos dessas fontes e os enriquece com estatísticas de criação de perfis de dados, pontuações de qualidade de dados e informações de linhagem. Também é possível integrar metadados de fontes de terceiros e enriquecer todos os metadados com contexto comercial usando um glossário empresarial.
O Knowledge Catalog usa a IA para oferecer recursos como a análise detalhada de dados em linguagem natural nos insights de dados e verificações automatizadas de qualidade de dados. Todos os metadados ficam acessíveis em um catálogo centralizado, oferecendo acesso à descoberta, gerenciamento e governança de dados em toda a organização. Os recursos de governança também estão disponíveis no BigQuery.
Começar a usar o Catálogo de Conhecimento
Se esta for sua primeira vez trabalhando com o Knowledge Catalog, siga um guia de início rápido:
A seguir
- Saiba mais sobre governança de dados.
- Saiba mais sobre o gerenciamento de metadados no Knowledge Catalog.
- Saiba como pesquisar recursos de dados.
- Saiba como gerenciar entradas e ingerir fontes personalizadas.
- Saiba como importar metadados para o Knowledge Catalog.
- Saiba mais sobre a governança do BigQuery.
- Siga o codelab: crie a base de dados com metadados do catálogo de conhecimento.