Acerca de los dominios de datos

Los dominios de datos en Knowledge Catalog (anteriormente, Dataplex Universal Catalog) proporcionan una forma lógica de organizar, administrar, descubrir y seleccionar recursos de datos dentro de una empresa, lo que refleja tu estructura y propiedad empresariales.

Funciones clave de los dominios de datos

Los dominios de datos desacoplan la organización lógica de los datos de la jerarquía de recursos subyacente Google Cloud de carpetas y proyectos. Los dominios de datos proporcionan las siguientes funciones clave:

  • Definen una jerarquía de organización lógica de datos alineada con tus procesos empresariales y agrupaciones lógicas de datos, desacoplada de la Google Cloud jerarquía de recursos de carpetas y proyectos.
  • Actúan como la unidad lógica de propiedad para los equipos de dominio descentralizados, lo que complementa los productos de datos.
  • Proporcionan un control centralizado sobre quién puede descubrir recursos y sus metadatos a gran escala.
  • Capturan el contexto común, como la guía de uso, los estándares de administración, las descripciones y la información de propiedad.
  • Usan el dominio de datos para reducir los resultados de la búsqueda a un dominio específico. Por ejemplo, permiten que los usuarios busquen exclusivamente dentro del dominio Marketing para obtener un descubrimiento más rápido y más pertinente.

Ejemplo de caso de uso

Considera una empresa minorista global con recursos de datos dispersos en departamentos como Ventas, Cadena de suministro y Marketing. Los recursos de datos lógicamente similares, como las tablas o los conjuntos de datos relacionados con las ventas, están dispersos en varios Google Cloud proyectos, lo que dificulta el descubrimiento y la administración coherente.

En los siguientes ejemplos, se muestra cómo interactúan varios usuarios con los dominios de datos:

  • Administrador de dominio de datos

    Establece una jerarquía lógica, independiente de los proyectos subyacentes Google Cloud , y delega la administración a nivel del dominio.

    • Crea dominios de nivel superior que coinciden con la estructura organizacional (como Sales, Supply Chain, y Marketing) y configura subdominios (como Online Sales y Store Transactions en Sales).
    • Asigna propietarios de dominio de datos designados para cada dominio (por ejemplo, asigna al líder de ventas como propietario del dominio Sales).

    Para obtener más información sobre cómo crear una jerarquía de dominio de datos y agregar recursos, consulta Crea dominios de datos y Agrega recursos a un dominio de datos.

  • Propietario de dominio de datos

    Define el contenido de los dominios de datos bajo su propiedad: incluye recursos de datos en los dominios, define el contexto en todo el dominio y establece políticas de metadatos sobre los dominios para administrar a gran escala la capacidad de descubrimiento de los recursos de datos del dominio y la visibilidad de su contexto y metadatos. Por ejemplo, el propietario de los datos del dominio de Ventas realiza las siguientes acciones:

    • Incluye conjuntos de datos, tablas y productos de datos dispersos en diferentes proyectos en el Sales dominio.
    • Define aspectos a nivel del dominio, como los estándares de retención de datos y los centros de costos. Define quién puede descubrir los recursos del dominio y acceder a su contexto y metadatos otorgando las funciones y los permisos necesarios al grupo analysts@example.com.

    Para obtener más información sobre cómo administrar dominios de datos, consulta Administra dominios de datos.

  • Usuario de dominio de datos

    Descubre de manera eficiente los recursos de ventas pertinentes y confiables dentro de un contexto empresarial sin tener que filtrar datos empresariales no relacionados. Por ejemplo, para obtener datos de ventas para una próxima campaña de marketing, el usuario del dominio de datos hace lo siguiente:

    • Explora la jerarquía de dominios para identificar el dominio Sales.
    • Delimita la búsqueda al dominio para encontrar los recursos pertinentes.
    • Inspecciona los metadatos, los esquemas y la guía de uso de los recursos para evaluar la idoneidad de uso.

    Para obtener más información sobre cómo usar dominios de datos para encontrar datos pertinentes, consulta Usa dominios de datos.

Elementos admitidos

Puedes usar dominios de datos para los siguientes recursos:

  • Proyectos
  • Productos de datos
  • Conjuntos de datos de BigQuery
  • Tablas de BigQuery
  • Repositorios de Dataform
  • Bases de datos de Dataproc Metastore
  • Tablas de Dataproc Metastore
  • Bases de datos de Spanner
  • Tablas de BigLake
  • Instancias de AlloyDB para PostgreSQL
  • Conjuntos de datos de Gemini Enterprise Agent Platform

Dominios de datos y productos de datos

Los dominios de datos y los productos de datos sirven como componentes básicos complementarios que puedes usar para descubrir tus recursos de datos y acceder a ellos. Un dominio de datos proporciona una forma lógica de organizar los recursos de datos según la estructura empresarial. Un producto de datos empaqueta recursos relacionados, como tablas o vistas, en un paquete seleccionado diseñado para resolver casos de uso empresariales específicos.

Limitaciones

Limitaciones de búsqueda

Cuando buscas recursos fuera del contexto del dominio, por ejemplo, cuando usas una búsqueda global, no se aplican los permisos de capacidad de descubrimiento del dominio. Solo ves los recursos a los que tienes acceso en el sistema subyacente, como BigQuery.

Supongamos que un conjunto de datos de BigQuery está incluido en un dominio de datos. Tienes la función Dataplex Data Domain Entry Reader para el dominio, pero no tienes permiso directo para ver el conjunto de datos en BigQuery:

  • Búsqueda dentro del dominio: Ves el conjunto de datos en los resultados de la búsqueda porque se aplican los permisos del dominio.
  • Búsqueda fuera del dominio: No ves el conjunto de datos en los resultados de la búsqueda. En una búsqueda general, no se aplican los permisos del dominio y no tienes acceso directo en BigQuery.

Limitaciones de autorización

En la etapa de lanzamiento de la vista previa, no hay sincronización continua de IAM en segundo plano. La autorización de dominio se verifica solo cuando se crea una vinculación. Esto significa que, si revocas la función de IAM de la principal del dominio en un recurso, ese recurso no se desvincula ni se quita automáticamente del dominio.

¿Qué sigue?