Acerca de los dominios de datos

Los dominios de datos en Knowledge Catalog (anteriormente, Dataplex Universal Catalog) te permiten organizar y seleccionar los recursos de datos empresariales en una jerarquía lógica que refleje la estructura y la propiedad de tu empresa. Luego, puedes administrar la visibilidad de los metadatos a gran escala, capturar el contexto de administración compartido y definir el alcance del descubrimiento de datos para dominios empresariales específicos.

Funciones clave de los dominios de datos

Los dominios de datos desvinculan la organización lógica de los datos de la jerarquía de recursos de Google Cloud subyacente de carpetas y proyectos. Los dominios de datos proporcionan las siguientes funciones clave:

  • Define una jerarquía de organización de datos lógica alineada con tus procesos empresariales y agrupaciones lógicas de datos, desvinculada de la jerarquía de recursos de Google Cloud carpetas y proyectos.
  • Actuar como la unidad lógica de propiedad para los equipos de dominio descentralizados, lo que complementa los productos de datos.
  • Proporcionar un control centralizado sobre quién puede descubrir recursos y sus metadatos a gran escala
  • Captura el contexto común, como la orientación de uso, los estándares de administración, las descripciones y la información de propiedad.
  • Usa el dominio de datos para acotar los resultados de la búsqueda a un dominio específico. Por ejemplo, permite que los usuarios busquen exclusivamente dentro del dominio Marketing para que el descubrimiento sea más rápido y pertinente.
  • Fundamentar los agentes de IA en el contexto del dominio El método lookupContext devuelve el contexto de los dominios de datos y, además, indica a qué dominios de datos pertenece un recurso de datos. Para obtener más información, consulta Recupera el contexto de los dominios de datos.

Ejemplo de caso de uso

Considera una empresa de venta minorista global con recursos de datos dispersos en departamentos como Ventas, Cadena de suministro y Marketing. Los recursos de datos lógicamente similares, como las tablas o los conjuntos de datos relacionados con las ventas, se encuentran dispersos en varios proyectos de Google Cloud, lo que dificulta el descubrimiento y la administración coherente.

En los siguientes ejemplos, se muestra cómo varios usuarios interactúan con los dominios de datos:

  • Administrador de dominios de datos

    Establece una jerarquía lógica, independiente de los proyectos deGoogle Cloud subyacentes, y delega la administración a nivel de dominio.

    • Crea dominios de nivel superior que coincidan con la estructura organizativa (como Sales, Supply Chain y Marketing) y configura subdominios (como Online Sales y Store Transactions en Sales).
    • Asigna propietarios de dominios de datos designados para cada dominio (por ejemplo, asigna el lead comercial como propietario del dominio Sales).

    Para obtener más información sobre cómo crear una jerarquía de dominios de datos y, también, incluir recursos, consulta Crea dominios de datos y Incluye recursos en un dominio de datos.

  • Propietario del dominio de datos

    Define el contenido de los dominios de datos de su propiedad: incluye recursos de datos en los dominios, define el contexto de todo el dominio y establece políticas de metadatos en los dominios para administrar a gran escala la visibilidad de los recursos de datos del dominio y la visibilidad de su contexto y metadatos. Por ejemplo, el propietario de los datos del dominio de ventas realiza las siguientes acciones:

    • Incluye conjuntos de datos, tablas y productos de datos dispersos en diferentes proyectos en el dominio Sales.
    • Define aspectos a nivel de dominio, como los estándares de retención de datos y los centros de costos. Define quién puede descubrir los recursos del dominio y acceder a su contexto y metadatos otorgando los roles y permisos necesarios al grupo analysts@example.com.

    Para obtener más información sobre cómo administrar dominios de datos, consulta Administra dominios de datos.

  • Usuario de dominio de datos

    Descubre de manera eficiente recursos de ventas relevantes y confiables dentro de un contexto empresarial sin revisar datos empresariales no relacionados. Por ejemplo, para obtener datos de ventas de una próxima campaña de marketing, el usuario del dominio de datos hace lo siguiente:

    • Explora la jerarquía de dominios para identificar el dominio Sales.
    • Limita la búsqueda al dominio para encontrar los recursos pertinentes.
    • Inspecciona los metadatos, los esquemas y la guía de uso del recurso para evaluar su idoneidad.

    Para obtener más información sobre cómo usar los dominios de datos para encontrar datos relevantes, consulta Usa dominios de datos.

Elementos admitidos

Puedes usar dominios de datos para los siguientes recursos:

  • Proyectos
  • Productos de datos
  • Conjuntos de datos de BigQuery
  • Tablas de BigQuery
  • Repositorios de Dataform
  • Bases de datos de Dataproc Metastore
  • Tablas de Dataproc Metastore
  • Bases de datos de Spanner
  • Tablas de BigLake
  • Instancias de AlloyDB para PostgreSQL
  • Conjuntos de datos de Gemini Enterprise Agent Platform

Dominios de datos y productos de datos

Los dominios y productos de datos funcionan como componentes básicos complementarios que puedes usar para descubrir tus recursos de datos y acceder a ellos. Un dominio de datos proporciona una forma lógica de organizar los recursos de datos según la estructura empresarial. Un producto de datos empaqueta recursos relacionados, como tablas o vistas, en un paquete seleccionado diseñado para resolver casos de uso empresarial específicos.

Limitaciones

Limitaciones de la búsqueda

Cuando buscas recursos fuera del contexto del dominio, por ejemplo, cuando usas una búsqueda global, no se aplican los permisos de visibilidad del dominio. Solo verás los recursos a los que tienes acceso en el sistema subyacente, como BigQuery.

Supongamos que un conjunto de datos de BigQuery se incluye en un dominio de datos. Tienes el rol Dataplex Data Domain Entry Reader para el dominio, pero no tienes permiso directo para ver el conjunto de datos en BigQuery:

  • Búsqueda dentro del dominio: Ves el conjunto de datos en los resultados de la búsqueda porque se aplican los permisos del dominio.
  • Búsqueda fuera del dominio: No ves el conjunto de datos en los resultados de la búsqueda. En una búsqueda general, no se aplican los permisos de dominio y no tienes acceso directo en BigQuery.

Limitaciones de la autorización

En la etapa de lanzamiento de la versión preliminar, no hay una sincronización continua de IAM en segundo plano. La autorización del dominio se verifica solo cuando se crea una vinculación. Esto significa que, si revocas el rol de IAM de la principal del dominio en un recurso, ese recurso no se desvincula ni se quita automáticamente del dominio.

¿Qué sigue?