Configura el motor de columnas en AlloyDB Omni

Selecciona una versión de la documentación: 15.7.1

• Actual (18.1.0)
• 18.1.0
• 17.7.0
• 17.5.0
• 16.11.0
• 16.9.0
• 16.8.0
• 16.3.0
• 15.15.0
• 15.13.0
• 15.12.0
• 15.7.1
• 15.7.0
• 15.5.5
• 15.5.4

En esta página, se describe cómo habilitar o inhabilitar el motor de columnas en un clúster de base de datos de AlloyDB Omni. También se explica cómo configurar un tamaño inicial adecuado para su almacén de columnas.

Para obtener una descripción general conceptual del motor de columnas de AlloyDB, consulta Descripción general del motor de columnas de AlloyDB Omni.

Habilita el motor de columnas

Para usar el motor de columnas en una instancia, establece la marca google_columnar_engine.enabled de la instancia en on.

Los pasos que usas para establecer esta marca en una instancia dependen de si ejecutas AlloyDB Omni en un contenedor o en un clúster de Kubernetes.

Servidor único

Para establecer google_columnar_engine.enabled en on, sigue estos pasos:

1. Ejecuta el ALTER SYSTEM comando de PostgreSQL:

   ALTER SYSTEM SET google_columnar_engine.enabled = 'on'
   

2. Si deseas ajustar la configuración del motor de columnas, sigue las instrucciones de la siguiente sección antes de reiniciar el servidor de la base de datos. De lo contrario, completa el siguiente paso para reiniciar el servidor de la base de datos ahora.

3. Para que los cambios en los parámetros de configuración surtan efecto, reinicia el contenedor en ejecución con AlloyDB Omni.

   Docker

     sudo docker restart CONTAINER_NAME

   Podman

     sudo podman restart CONTAINER_NAME

Kubernetes

Para establecer la marca google_columnar_engine.enabled en on, modifica el manifiesto del clúster de base de datos para agregar el atributo parameters a la sección primarySpec:

    apiVersion: alloydbomni.dbadmin.goog/v1
    kind: DBCluster
    metadata:
      name: CLUSTER_NAME
    spec:
      databaseVersion: "15.7.1"
      primarySpec:
        parameters:
          google_columnar_engine.enabled: "on"

Reemplaza CLUSTER_NAME por el nombre del clúster de base de datos. Es el mismo nombre de clúster de base de datos que declaraste cuando lo creaste.

Configura el tamaño del almacén de columnas

Mientras el motor de columnas está habilitado en una instancia, AlloyDB Omni asigna una parte de la memoria de la instancia para almacenar sus datos de columnas. Si dedicas RAM de alta velocidad a tu almacén de columnas, te aseguras de que AlloyDB Omni pueda acceder a los datos de columnas lo más rápido posible.

La memoria y la caché de almacenamiento juntas representan la capacidad general del motor de columnas.

Configura la memoria

Advertencia: El valor predeterminado de google_columnar_engine.memory_size_in_mb es de 1,024 MB.

Puedes establecer la asignación en un tamaño fijo con la google_columnar_engine.memory_size_in_mb marca.

Los pasos que usas para establecer esta marca en una instancia dependen de si ejecutas AlloyDB Omni en un contenedor o en un clúster de Kubernetes.

Servidor único

Para establecer la marca google_columnar_engine.memory_size_in_mb en una instancia, haz lo siguiente:

1. Configura la memoria ejecutando el ALTER SYSTEM comando de PostgreSQL:

   ALTER SYSTEM SET google_columnar_engine.memory_size_in_mb = COLUMN_MEMORY_SIZE;
   

   Reemplaza COLUMN_MEMORY_SIZE por el nuevo tamaño del almacenamiento de columnas, en megabytes, por ejemplo, 256.

2. Para que los cambios en los parámetros de configuración surtan efecto, reinicia el contenedor en ejecución con AlloyDB Omni.

   Docker

   sudo docker restart CONTAINER_NAME

   Podman

   sudo podman restart CONTAINER_NAME

Kubernetes

Para establecer la marca google_columnar_engine.memory_size_in_mb, modifica el manifiesto del clúster de base de datos para agregar el atributo parameters a la sección primarySpec:

    apiVersion: alloydbomni.dbadmin.goog/v1
    kind: DBCluster
    metadata:
      name: CLUSTER_NAME
    spec:
      databaseVersion: "15.7.1"
      primarySpec:
        parameters:
          google_columnar_engine.memory_size_in_mb: "COLUMN_MEMORY_SIZE"

Reemplaza lo siguiente:

• CLUSTER_NAME: el nombre de tu clúster de base de datos. Es el mismo nombre de clúster de base de datos que declaraste cuando lo creaste.
• COLUMN_MEMORY_SIZE: el nuevo tamaño del almacenamiento de columnas, en megabytes, por ejemplo, 256.

Configura la caché de almacenamiento

Antes de configurar la caché de almacenamiento, debes habilitar la caché de disco de AlloyDB Omni.

Nota: Este paso es opcional para habilitar el motor de columnas.

Los pasos que usas para establecer esta marca en una instancia dependen de si ejecutas AlloyDB Omni en un contenedor o en un clúster de Kubernetes.

Servidor único

1. Configura la caché de almacenamiento de la siguiente manera:

   ALTER SYSTEM SET google_columnar_engine.storage_cache_size = STORAGE_CACHE_SIZE;
   

   Reemplaza STORAGE_CACHE_SIZE por el tamaño de la caché de almacenamiento que desees, en megabytes. De forma predeterminada, el 5% de la caché de disco se asigna al motor de columnas. El valor máximo permitido para esta marca es el 50% de la caché de disco total o 1,000 * google_columnar_engine.memory_size_in_mb, lo que sea menor.

2. Para que los cambios en los parámetros de configuración surtan efecto, reinicia el contenedor en ejecución con AlloyDB Omni.

   Docker

   sudo docker restart CONTAINER_NAME

   Podman

   sudo podman restart CONTAINER_NAME

Kubernetes

Para habilitar la caché de almacenamiento de tu base de datos, modifica el manifiesto del clúster de base de datos para agregar el atributo columnarSpillToDisk a la sección features de la sección primarySpec:

apiVersion: alloydbomni.dbadmin.goog/v1
kind: DBCluster
metadata:
  name: CLUSTER_NAME
spec:
  databaseVersion: "15.7.1"
  primarySpec:
    features:
      columnarSpillToDisk:
        cacheSize: STORAGE_CACHE_SIZE
      ultraFastCache:
        cacheSize: ULTRAFAST_CACHE_SIZE
        genericVolume:
          storageClass: "STORAGE_CLASS_NAME"
...

Reemplaza lo siguiente:

• CLUSTER_NAME: el nombre de tu clúster de base de datos. Es el mismo nombre de clúster de base de datos que declaraste cuando lo creaste.
• STORAGE_CACHE_SIZE: el tamaño de la caché de almacenamiento de columnas, por ejemplo, 5Gi. Si no especificas un valor para este campo, el 5% de la caché de disco se asigna al motor de columnas de forma predeterminada.
• ULTRAFAST_CACHE_SIZE: el tamaño de la caché, por ejemplo, 100Gi. Debe ser superior a shared_buffers. Este campo es opcional. Si no especificas el valor de este campo, AlloyDB Omni usa todo el espacio restante en el disco, lo que se aplica tanto a AlloyDB Omni en un contenedor como en un clúster de Kubernetes. Para obtener más información sobre las unidades de medida, consulta Unidades de recursos de memoria.
• STORAGE_CLASS_NAME: el nombre de la clase de almacenamiento del volumen de caché ultrarrápida, por ejemplo, local-storage.

Nota: Si se especifican spec.primarySpec.features.ultrafastCache.cacheSize y spec.primarySpec.features.columnarSpillToDisk.cacheSize, su suma total es igual a la cantidad de espacio en disco reservado. Por ejemplo, si especificas 50 Gi para spec.primarySpec.features.columnarSpillToDisk.cacheSize y 200 Gi para spec.primarySpec.features.ultrafastCache.cacheSize, el espacio total en disco reservado es 250Gi.

Habilita la unión vectorizada

Vista previa

Este producto o esta función se encuentra sujeto a las "Condiciones de la oferta de la fase previa a la DG" en la sección Condiciones del servicio generales de las Condiciones específicas del servicio. Los productos y las funciones de la fase previa a la DG están disponibles “tal como están” y pueden estar sujetos a asistencia limitada. Para obtener más información, consulta las descripciones de la etapa de lanzamiento.

El motor de columnas tiene una función de unión vectorizada que puede mejorar el rendimiento de las uniones mediante la aplicación del procesamiento vectorizado a las consultas aptas.

Después de habilitar la unión vectorizada, el planificador de consultas de AlloyDB tiene la opción de aplicar el operador de unión vectorizada en lugar del operador de unión hash de PostgreSQL estándar. El planificador toma esta decisión comparando el costo de ejecutar la consulta con cada método.

Para habilitar la unión vectorizada en una instancia, establece la marca google_columnar_engine.enable_vectorized_join de la instancia en on.

Para establecer esta marca en una instancia, ejecuta el comando ALTER SYSTEM de PostgreSQL:

ALTER SYSTEM SET google_columnar_engine.enable_vectorized_join = 'on';

De forma predeterminada, AlloyDB Omni asigna un subproceso a la función de unión vectorizada. Puedes aumentar la cantidad de subprocesos disponibles para esta función si estableces la google_columnar_engine.vectorized_join_threads marca en un valor más grande. El valor máximo es cpu_count * 2.

Actualiza manualmente tu motor de columnas

De forma predeterminada, cuando el motor de columnas está habilitado, actualiza el almacén de columnas en segundo plano.

Para actualizar manualmente el motor de columnas, ejecuta la siguiente consulta en SQL:

SELECT google_columnar_engine_refresh(relation =>'TABLE_NAME');

Reemplaza TABLE_NAME por el nombre de la tabla o la vista materializada que deseas actualizar de forma manual.

Inhabilita el motor de columnas

Para inhabilitar el motor de columnas en una instancia, establece la marca google_columnar_engine.enabled en off.

Los pasos que usas para establecer esta marca en una instancia dependen de si ejecutas AlloyDB Omni en un contenedor o en un clúster de Kubernetes.

Servidor único

Para establecer google_columnar_engine.enabled en off, sigue estos pasos:

1. Ejecuta el ALTER SYSTEM comando de PostgreSQL:

ALTER SYSTEM SET google_columnar_engine.enabled = 'off'

1. Para que los cambios en los parámetros de configuración surtan efecto, reinicia el contenedor en ejecución con AlloyDB Omni.

Docker

Para reiniciar un contenedor de AlloyDB Omni, ejecuta el docker container restart comando:

  sudo docker restart CONTAINER_NAME

Reemplaza CONTAINER_NAME por el nombre que le asignaste al contenedor de AlloyDB Omni cuando lo instalaste.

Podman

Para reiniciar un contenedor de AlloyDB Omni, ejecuta el podman container start comando:

  sudo podman restart CONTAINER_NAME

Reemplaza CONTAINER_NAME por el nombre que le asignaste al contenedor de AlloyDB Omni cuando lo instalaste.

Kubernetes

Para establecer la marca google_columnar_engine.enabled en off, modifica el manifiesto del clúster de base de datos para agregar el atributo parameters a la sección primarySpec:

  apiVersion: alloydbomni.dbadmin.goog/v1
  kind: DBCluster
  metadata:
    name: CLUSTER_NAME
  spec:
    databaseVersion: "15.7.1"
    primarySpec:
      parameters:
        google_columnar_engine.enabled: "off"

Reemplaza CLUSTER_NAME por el nombre del clúster de base de datos. Es el mismo nombre de clúster de base de datos que declaraste cuando lo creaste.

Soluciona problemas del motor de columnas

Corrige el error insufficient shared memory

Si ejecutas AlloyDB Omni sin suficiente memoria compartida para que la use el motor de columnas, es posible que veas este error:

Insufficient shared memory for generating the columnar formats.

Para solucionar este problema, especifica la cantidad de memoria compartida que está disponible para el contenedor de AlloyDB Omni. La forma de hacerlo difiere según el sistema operativo host.

Linux

Aumenta el tamaño de la partición /dev/shm de tu máquina anfitrión con una técnica como editar el archivo /etc/fstab.

Nota: Esto requiere que hayas instalado AlloyDB Omni con tu /dev/shm directorio activado en el contenedor, como se muestra en Personaliza tu instalación de AlloyDB Omni.

macOS

Instala un nuevo contenedor de AlloyDB Omni, especifica un valor de memoria compartida más grande para la marca --shm-sizeflag.

**Precaución:** Crea una copia de seguridad de tus datos antes de cambiar a un contenedor nuevo.

Corrige las columnas que no se propagan

Si las columnas no se propagan en el motor de columnas, es posible que se cumpla una de las siguientes condiciones:

• Las columnas que deseas agregar incluyen un tipo de datos no admitido.

• No se cumplen los requisitos del motor de columnas.

Para solucionar este problema, prueba lo siguiente:

• Confirma que las tablas o las vistas materializadas de la consulta estén en el motor de columnas.
• Verifica el uso del motor de columnas con la EXPLAIN instrucción.

¿Qué sigue?

• Consulta la lista completa de marcas de base de datos del motor de columnas.

• Realiza el instructivo Acelera las consultas analíticas con el motor de columnas en AlloyDB Omni de Google CodeLab.