Acerca de los Services LoadBalancer

En esta página, se proporciona una descripción general de cómo Google Kubernetes Engine (GKE) crea y administra balanceadores de cargas de Google Cloud cuando aplicas un manifiesto de objetos Service LoadBalancer de Kubernetes. En ella, se describen los tipos de LoadBalancer y los parámetros de configuración, y se proporcionan recomendaciones de prácticas recomendadas.

Antes de leer este documento, asegúrate de estar familiarizado con los conceptos de herramientas de redes de GKE.

Descripción general

Cuando creas un objeto Service de tipo LoadBalancer, GKE configura un Google Cloud balanceador de cargas de paso cuyas características dependen de los parámetros de tu manifiesto de Service.

Personaliza tu Service LoadBalancer

Cuando elijas qué configuración del Service LoadBalancer usar, ten en cuenta los siguientes aspectos:

Árbol de decisión del Service LoadBalancer.
Figura: Árbol de decisión del Service LoadBalancer

Tipo de balanceador de cargas: interno o externo

Cuando creas un Service LoadBalancer en GKE, debes especificar si el balanceador de cargas tiene una dirección interna o externa:

  • Los objetos Service LoadBalancer externos se implementan con balanceadores de cargas de red de transferencia externos regionales. Los clientes ubicados fuera de tu red de VPC y las VMs de Google Cloud con acceso a Internet pueden acceder a un Service LoadBalancer externo.

    Para crear un Service LoadBalancer externo, usa una de las siguientes técnicas:

    • En los clústeres que ejecutan GKE 1.37 o versiones posteriores, GKE crea automáticamente un balanceador de cargas de red de transferencia externo regional basado en servicios de backend con backends de NEG GCE_VM_IP. No es necesario que agregues anotaciones ni campos al manifiesto del Service. Para crear de forma explícita un balanceador de cargas basado en grupos de destino heredado, agrega el par de valor de campo spec.loadBalancerClass: "networking.gke.io/l4-regional-external-legacy".

    • En los clústeres que ejecutan GKE 1.33.1-gke.1779000 a 1.36, agrega spec.loadBalancerClass: "networking.gke.io/l4-regional-external" al manifiesto del Service antes de enviarlo al clúster. Te recomendamos que uses este campo, ya que siempre crea un balanceador de cargas de red de transferencia externo regional basado en servicios de backend con backends de NEG GCE_VM_IP. El campo spec.loadBalancerClass es inmutable y no se puede cambiar después de crear el Service.

    • En los clústeres que ejecutan cualquier versión compatible de GKE, puedes agregar la anotación cloud.google.com/l4-rbs: "enabled" al manifiesto del Service antes de enviarlo al clúster. Esta anotación también crea un balanceador de cargas de red de transferencia externo regional basado en servicios de backend. El balanceador de cargas usa backends de NEG de GCE_VM_IP si el manifiesto se envía a un clúster que ejecuta GKE 1.32.2-gke.1652000 o una versión posterior. De lo contrario, el balanceador de cargas usa backends de grupos de instancias. GKE solo evalúa esta anotación cuando el manifiesto del Service se aplica por primera vez al clúster.

  • Los objetos Service LoadBalancer internos se implementan mediante los balanceadores de cargas de red de transferencia internos. Los clientes ubicados en la misma red de VPC o en una red conectada a la red de VPC del clúster pueden acceder a un Service LoadBalancer interno.

    Como práctica recomendada, antes de crear un Service LoadBalancer interno, asegúrate de que la subdivisión de GKE esté habilitada. La creación de subconjuntos de GKE se habilita automáticamente si tu clúster ejecuta GKE 1.36 o una versión posterior. En las versiones anteriores de GKE, debes habilitar de forma explícita la subdivisión de GKE.

    Para crear un Service LoadBalancer interno, usa una de las siguientes técnicas:

    • En los clústeres que ejecutan GKE 1.33.1-gke.1779000 o versiones posteriores que tienen habilitada la subdivisión de GKE, agrega spec.loadBalancerClass: "networking.gke.io/l4-regional-internal" al manifiesto del Service antes de enviarlo al clúster. Te recomendamos que uses este campo porque siempre crea un balanceador de cargas de red de transferencia interno con backends de NEG de GCE_VM_IP. El campo spec.loadBalancerClass es inmutable y no se puede cambiar después de crear el Service.

    • En los clústeres que ejecutan cualquier versión de GKE compatible, puedes agregar la anotación networking.gke.io/load-balancer-type: "Internal" al manifiesto del Service antes de enviarlo al clúster. Esto también crea un balanceador de cargas de red de transferencia interno. El balanceador de cargas usa backends de NEG GCE_VM_IP si el manifiesto se envía a un clúster que tiene habilitada la subdivisión de GKE. De lo contrario, el balanceador de cargas usa backends de grupos de instancias.

En el caso de los clústeres que ejecutan versiones de GKE anteriores a la 1.37, los manifiestos de Service de LoadBalancer que no tienen un spec.loadBalancerClass y que no tienen las anotaciones cloud.google.com/l4-rbs: "enabled" o networking.gke.io/load-balancer-type: "Internal" crean un balanceador de cargas de red de transferencia externo regional basado en grupos de destino. No recomendamos usar balanceadores de cargas de red de transferencia externos regionales basados en grupos de destino.

Requisito previo de HttpLoadBalancing

Para crear objetos Service LoadBalancer con la tecnología de balanceadores de cargas de red de transferencia externos regionales basados en servicios de backend o balanceadores de cargas de red de transferencia internos, asegúrate de que el complemento HttpLoadBalancing esté habilitado si tu clúster ejecuta una versión de GKE anterior a la 1.36. El complemento HttpLoadBalancing está habilitado de forma predeterminada.

Los objetos Service LoadBalancer en GKE 1.36 y versiones posteriores no dependen del complemento HttpLoadBalancing.

Efecto de externalTrafficPolicy

El parámetro externalTrafficPolicy controla lo siguiente:

  • Qué nodos reciben paquetes del balanceador de cargas
  • Si los paquetes se pueden enrutar entre nodos del clúster, después de que el balanceador de cargas los entrega a un nodo
  • Si se conserva o se pierde la dirección IP del cliente original

El externalTrafficPolicy puede ser Local o Cluster:

  • Usa externalTrafficPolicy: Local para asegurarte de que los paquetes se entreguen solo a un nodo con al menos un Pod de entrega listo y sin cerrar, lo que conserva la dirección IP de origen del cliente original. Esta opción es mejor para las cargas de trabajo con una cantidad relativamente constante de nodos con Pods de entrega, incluso si la cantidad general de nodos en el clúster varía. Esta opción es obligatoria para admitir el balanceo de cargas ponderado.
  • Usa externalTrafficPolicy: Cluster en situaciones en las que la cantidad general de nodos en el clúster es relativamente constante, pero la cantidad de nodos con Pods de entrega varía. Esta opción no conserva las direcciones IP de origen del cliente originales y puede agregar latencia, ya que los paquetes se pueden enrutar a un Pod de entrega en otro nodo después de entregarse a un nodo desde el balanceador de cargas. Esta opción no es compatible con el balanceo de cargas ponderado.

Para obtener más información sobre cómo externalTrafficPolicy afecta el enrutamiento de paquetes dentro de los nodos, consulta procesamiento de paquetes.

Balanceo de cargas ponderado

Los servicios LoadBalancer externos admiten el balanceo de cargas ponderado, que permite que los nodos con más Pods de entrega, listos y que no finalizan reciban una mayor proporción de conexiones nuevas en comparación con los nodos con menos Pods. Para obtener más información sobre cómo cambian las configuraciones del balanceador de cargas con el balanceo de cargas ponderado, consulta Efecto del balanceo de cargas ponderado.

Distribución del tráfico del balanceo de cargas ponderado.
Figura: Distribución del tráfico del balanceo de cargas ponderado

Como se ilustra en el diagrama, los Services con el balanceo de cargas ponderado habilitado distribuyen las conexiones nuevas de forma proporcional a la cantidad de Pods listos en cada nodo.

Para usar el balanceo de cargas ponderado, debes cumplir con todos los requisitos siguientes:

  • Tu clúster de GKE debe usar la versión 1.31.0-gke.1506000 o una posterior.

  • Debes crear un Service LoadBalancer externo que genere un balanceador de cargas de red de transferencia externo regional basado en servicios de backend.

    • En los clústeres que ejecutan GKE 1.37 o versiones posteriores, GKE crea este tipo de balanceador de cargas de forma predeterminada. No se requieren campos ni anotaciones adicionales.

    • En los clústeres que ejecutan GKE 1.33.1-gke.1779000 a 1.36, agrega spec.loadBalancerClass: "networking.gke.io/l4-regional-external" al manifiesto de Service antes de enviarlo al clúster. Este es el método preferido.

    • En los clústeres que ejecutan cualquier versión compatible de GKE, agrega la anotación cloud.google.com/l4-rbs: "enabled" al manifiesto del Service antes de enviarlo al clúster.

  • Debes incluir la anotación networking.gke.io/weighted-load-balancing: pods-per-node en el manifiesto del Service para habilitar la función de balanceo de cargas ponderado.

  • El manifiesto del Service LoadBalancer debe usar externalTrafficPolicy: Local. GKE no te impide usar externalTrafficPolicy: Cluster, pero externalTrafficPolicy: Cluster inhabilita de forma eficaz el balanceo de cargas ponderado, ya que el paquete podría enrutarse, después del balanceador de cargas, a un nodo diferente.

Para usar el balanceo de cargas ponderado, consulta Habilita el balanceo de cargas ponderado.

Afinidad zonal

Los objetos Service LoadBalancer internos admiten la afinidad zonal, que puede enrutar conexiones nuevas a nodos con Pods de entrega en la misma zona que un cliente. Si no hay Pods en buen estado en la zona, GKE enruta el tráfico a otra zona. Mantener el tráfico dentro de una zona puede minimizar el tráfico entre zonas, lo que reduce el costo y la latencia. Para habilitar la afinidad zonal en un clúster de GKE, debes tener habilitada la subdivisión de GKE.

Cuando configuras la afinidad zonal para un Service LoadBalancer interno, GKE configura el balanceador de cargas de red de transferencia interno correspondiente con la opción ZONAL_AFFINITY_SPILL_CROSS_ZONE y una proporción de desbordamiento de cero (0.0). Esta configuración ayuda a garantizar que el tráfico se descarte dentro de la zona en lugar de desbordarse a otras zonas. El balanceador de cargas restringe el conjunto original de backends de nodos aptos solo a los que se encuentran en la misma zona que el cliente cuando se cumple todo lo siguiente:

  • El cliente es compatible con la afinidad zonal.

  • Al menos un backend de nodo apto y en buen estado se encuentra en la zona del cliente.

En todas las demás situaciones, el balanceador de cargas sigue usando el conjunto original de backends de nodos aptos, sin aplicar ninguna optimización de afinidad zonal.

Para obtener más detalles sobre cómo la configuración de la afinidad zonal afecta el comportamiento del balanceador de cargas, consulta la documentación de la afinidad zonal. Para obtener más información sobre cómo la afinidad zonal y externalTrafficPolicy influyen en el enrutamiento de paquetes en las VMs de nodo, consulta Traducción de direcciones de red de origen y enrutamiento en nodos.

Consideraciones de escalamiento con afinidad zonal

Debido a que la afinidad zonal no se integra de forma nativa con HorizontalPodAutoscaler (HPA), pueden ocurrir problemas de escalamiento cuando el tráfico dentro de una zona supera la capacidad de los Pods en esa zona. El HPA escala los Pods según las métricas agregadas del clúster, en lugar de la carga por zona. Como resultado, es posible que una zona que experimenta un tráfico alto (sobrecarga zonal) no reciba Pods adicionales, lo que genera un rendimiento degradado o conexiones interrumpidas para los clientes de esa zona, incluso si el clúster en general está infrautilizado.

Familias de direcciones IP

Un Service de LoadBalancer puede ser de pila única (solo IPv4 o solo IPv6) o de pila doble. Puedes controlar esto con los campos spec.ipFamilyPolicy y spec.ipFamilies. Un Service de pila única tiene una regla de reenvío, y un Service de pila doble tiene dos: una para IPv4 y otra para IPv6.

Los Services LoadBalancer IPv6 tienen las siguientes características adicionales:

  • Siempre usan backends de NEG GCE_VM_IP.
  • Sus direcciones IPv6 provienen de un rango de subred en tu red de VPC (cuyo tipo de acceso IPv6 debe coincidir con el tipo de balanceador de cargas) o de Usa tus propias direcciones IPv6 (BYOIPv6):
    • Los objetos Service LoadBalancer IPv6 internos pueden usar subredes internas aprovisionadas desde un prefijo delegado público de BYOIPv6.
    • En GKE 1.37.1-gke.2097000 y versiones posteriores, los Services LoadBalancer IPv6 externos de pila única admiten la asignación directa de rangos de direcciones BYOIPv6 externos desde un subprefijo IPv6 regional de un prefijo público delegado. Puedes configurar esta asignación con la anotación networking.gke.io/ip-collection-v6 o especificando un rango de direcciones BYOIPv6 externas estáticas.
  • Los objetos Service LoadBalancer IPv6 externos requieren un balanceador de cargas de red de transferencia externo regional basado en servicios de backend.

Para obtener más información, consulta Servicios de LoadBalancer de IPv6 y Usa tus propias direcciones IPv6 (BYOIPv6).

Consideraciones especiales para los Services LoadBalancer internos

En esta sección, se describe la función de subdivisión de GKE, que es exclusiva de los objetos Service LoadBalancer internos, y cómo interactúa la subdivisión de GKE con externalTrafficPolicy para influir en la cantidad máxima de nodos con balanceo de cargas.

Subdivisión de GKE

La subdivisión de GKE para los objetos Service LoadBalancer internos está habilitada de forma predeterminada en los clústeres de GKE que ejecutan la versión 1.36 y posteriores. En estas versiones, la división en subconjuntos de GKE permanece activa incluso si la marca --enable-l4-ilb-subsetting a nivel del clúster se establece en false en la configuración del clúster o en las herramientas de infraestructura como código (IaC), como Terraform.

Esta opción de configuración para todo el clúster mejora la escalabilidad de los balanceadores de cargas de red de transferencia internos, ya que agrupa de forma más eficiente los extremos de nodo en grupos de extremos de red (NEG) de GCE_VM_IP. Los NEG se usan como backends del balanceador de cargas.

En el diagrama siguiente, se muestran dos objetos Services en un clúster zonal con tres nodos. El clúster tiene habilitada la subdivisión de GKE. Cada objeto Service tiene dos Pods. GKE crea un NEG de GCE_VM_IP para cada Service. Los extremos de cada NEG son los nodos con los Pods de entrega para el Service correspondiente.

Subdivisión de GKE para dos Services en un clúster zonal.

En el caso de los clústeres que ejecutan versiones anteriores a la 1.36, puedes habilitar manualmente la subdivisión de GKE cuando creas un clúster o actualizas uno existente. Después de habilitar la subdivisión de GKE, no puedes inhabilitarla.

La subdivisión de GKE requiere lo siguiente:

  • Versión de GKE 1.18.19-gke.1400 o posterior, y
  • Si tu clúster tiene una versión anterior a la 1.36, se debe habilitar el complemento HttpLoadBalancing. Este complemento está habilitado de forma predeterminada. Permite que el clúster administre los balanceadores de cargas que usan servicios de backend. Si tu clúster tiene la versión 1.36 o una posterior, el complemento HttpLoadBalancing no es un requisito previo para la creación de subconjuntos de GKE.

Recuento de nodos

Un clúster con la subdivisión de GKE inhabilitada puede experimentar problemas con los Services LoadBalancer internos si el clúster tiene más de 250 nodos en total (entre todos los grupos de nodos). Esto sucede porque los balanceadores de cargas de red de transferencia internos que crea GKE solo pueden distribuir paquetes a 250 VMs de nodo de backend o menos. Esta limitación existe por los siguientes dos motivos:

  • GKE no usa la subdivisión de backend del balanceador de cargas.
  • Un balanceador de cargas de red de transferencia interno está limitado a distribuir paquetes a 250 o menos backends cuando la subdivisión del backend del balanceador de cargas está inhabilitada.

Un clúster con subdivisión de GKE admite objetos Service LoadBalancer internos en clústeres con más de 250 nodos en total.

La cantidad de nodos compatibles con la subdivisión de GKE depende del valor del campo externalTrafficPolicy del Service LoadBalancer interno:

  • externalTrafficPolicy: Local: admite hasta 250 nodos con Pods de entrega para un Service determinado.

  • externalTrafficPolicy: Cluster: No impone un límite en la cantidad de nodos con Pods de entrega. Este comportamiento se produce porque GKE configura un máximo de 25 extremos de nodo en NEG de GCE_VM_IP para cada Service. Para obtener más información, consulta Membresía del nodo en backends de NEG GCE_VM_IP.

Distribución del tráfico

De forma predeterminada, los objetos Service LoadBalancer internos y externos crean balanceadores de cargas de red de transferencia con la afinidad de sesión establecida en NONE. Los balanceadores de cargas de red de transferencia usan la afinidad de sesión, la información de estado y, en ciertas circunstancias, detalles como el peso para identificar y seleccionar un nodo de backend apto para una conexión nueva.

Las conexiones nuevas crean entradas en la tabla de seguimiento de conexiones, que se usan para enrutar con rapidez los paquetes posteriores de la conexión al backend del nodo apto seleccionado previamente. Para obtener más información sobre cómo los balanceadores de cargas de red de transferencia identifican y seleccionan backends aptos, y usan el seguimiento de conexiones, consulta lo siguiente:

Efecto del balanceo de cargas ponderado

Cuando configuras el balanceo de cargas ponderado para un Service LoadBalancer externo, GKE habilita el balanceo de cargas ponderado en el balanceador de cargas de red de transferencia externo regional correspondiente. GKE configura el software kube-proxy o cilium-agent para que incluya un encabezado de respuesta en la respuesta a la verificación de estado del balanceador de cargas. Este encabezado de respuesta define un peso que es proporcional a la cantidad de Pods activos, listos y que no finalizan en cada nodo.

El balanceador de cargas usa la información de peso de la siguiente manera:

  • El conjunto de backends de nodos aptos del balanceador de cargas consta de todos los nodos en buen estado con ponderación distinta de cero.

  • El balanceador de cargas tiene en cuenta el peso cuando selecciona uno de los backends de nodo aptos. Cuando el Service usa externalTrafficPolicy: Local (obligatorio para que el balanceo de cargas ponderado sea eficaz), es más probable que se seleccione un backend de nodo apto que tenga más Pods de entrega, listos y no finalizados que un backend de nodo apto con menos Pods.

Agrupación de nodos

La versión de GKE, las anotaciones del manifiesto de Service y, para los objetos Service LoadBalancer internos, la opción de subdivisión de GKE determinan el balanceador de cargas de Google Cloud resultante y el tipo de backends.

En la siguiente tabla, se describen los métodos de agrupación de nodos para diferentes parámetros de configuración del Service LoadBalancer:

Detalles del servicio y del clúster Balanceador de cargas de Google Cloud resultante Método de agrupación de nodos
Servicios LoadBalancer internos
Versión 1.33.1-gke.1779000 o posterior de GKE en un clúster con la subdivisión de GKE habilitada1. Es el manifiesto de Service enviado al clúster con spec.loadBalancerClass: "networking.gke.io/l4-regional-internal". Un balanceador de cargas de red de transferencia interno cuyo servicio de backend usa backends de grupo de extremos de red (NEG) GCE_VM_IP

Las VMs de nodo se agrupan en NEG zonales de GCE_VM_IP por Service según el externalTrafficPolicy del Service y la cantidad de nodos del clúster.

El externalTrafficPolicy del objeto Service también controla qué nodos pasan la verificación de estado del balanceador de cargas y el procesamiento de paquetes.

Todas las versiones de GKE compatibles en un clúster con la subdivisión de GKE habilitada1. Manifiesto de Service enviado al clúster con la anotación networking.gke.io/load-balancer-type: "Internal".
Versiones de GKE anteriores a la 1.36 en un clúster con la subdivisión de GKE inhabilitada1. Manifiesto de Service enviado al clúster con la anotación networking.gke.io/load-balancer-type: "Internal". Un balanceador de cargas de red de transferencia interno cuyo servicio de backend usa backends de grupo de instancias no administrado zonal

Todas las VMs de nodo se colocan en grupos de instancias no administrados zonales que GKE usa como backends para el servicio de backend del balanceador de cargas de red de transferencia interno.

El externalTrafficPolicy del objeto Service controla qué nodos pasan la verificación de estado del balanceador de cargas y el procesamiento de paquetes.

Los mismos grupos de instancias no administrados se usan para otros servicios de backend del balanceador de cargas creados en el clúster debido a la limitación de un solo grupo de instancias con balanceo de cargas.

Servicios LoadBalancer externos
GKE versión 1.37 o posterior. Manifiesto de Service enviado al clúster, pero no se incluye el par campo-valor spec.loadBalancerClass: "networking.gke.io/l4-regional-external-legacy". Un balanceador de cargas de red de transferencia externo regional basado en servicios de backend con backends de grupo de extremos de red (NEG) GCE_VM_IP

Las VMs de nodo se agrupan en NEG zonales de GCE_VM_IP por Service según el externalTrafficPolicy del Service y la cantidad de nodos del clúster.

El externalTrafficPolicy del objeto Service también controla qué nodos pasan la verificación de estado del balanceador de cargas y el procesamiento de paquetes.

Versión 1.33.1-gke.1779000 a 1.36 de GKE. Manifiesto del Service enviado al clúster con el par campo-valor spec.loadBalancerClass: "networking.gke.io/l4-regional-external".
Versión de GKE 1.32.2-gke.1652000 a 1.36. Manifiesto de Service enviado al clúster con la anotación cloud.google.com/l4-rbs: "enabled"2.
Versión de GKE anterior a la 1.32.2-gke.16520003. Manifiesto de Service enviado al clúster con la anotación cloud.google.com/l4-rbs: "enabled"2. Un balanceador de cargas de red de transferencia externo regional basado en servicios de backend con backends de grupo de instancias no administrado zonales

Todas las VMs de nodo se colocan en grupos de instancias no administrados zonales que GKE usa como backends para el servicio de backend del balanceador de cargas de red de transferencia externo regional.

El externalTrafficPolicy del objeto Service controla qué nodos pasan la verificación de estado del balanceador de cargas y el procesamiento de paquetes.

Los mismos grupos de instancias no administrados se usan para otros servicios de backend del balanceador de cargas creados en el clúster debido a la limitación de un solo grupo de instancias con balanceo de cargas.

Versiones de GKE anteriores a la 1.37. Manifiesto de Service enviado al clúster sin todo lo siguiente:

  • spec.loadBalancerClass
  • networking.gke.io/load-balancer-type de anotación
  • cloud.google.com/l4-rbs de anotación


O

GKE versión 1.37 o posterior. Manifiesto del Service enviado al clúster con el par campo-valor spec.loadBalancerClass: "networking.gke.io/l4-regional-external-legacy".

Un balanceador de cargas de red de transferencia externo regional basado en grupos de destino cuyo grupo de destino contenga todos los nodos del clúster

El grupo de destino es una API más antigua que no depende de NEG ni grupos de instancias. Todos los nodos tienen membresía directa en el grupo de destino.

El externalTrafficPolicy del objeto Service controla qué nodos pasan la verificación de estado del balanceador de cargas y el procesamiento de paquetes.

1La subdivisión de GKE se habilita automáticamente en la versión 1.36 de GKE y versiones posteriores. La subdivisión de GKE no se puede inhabilitar después de habilitarla.

2La anotación cloud.google.com/l4-rbs: "enabled" solo se respeta cuando el manifiesto del Service se envía al clúster. Agregar esta anotación a un manifiesto de Service existente no convierte un balanceador de cargas de red de transferencia externo regional basado en grupos de destino en un balanceador de cargas de red de transferencia externo regional basado en servicios de backend.

3GKE no actualiza automáticamente los balanceadores de cargas de red de transferencia externos regionales basados en servicios de backend con backends de grupos de instancias a balanceadores de cargas de red de transferencia externos regionales basados en servicios de backend con backends de NEG GCE_VM_IP. Para obtener instrucciones de migración manual, consulta Migra a backends de NEG de GCE_VM_IP.

Membresía del nodo en backends de NEG GCE_VM_IP

Cuando GKE crea un balanceador de cargas de red de transferencia interno o un balanceador de cargas de red de transferencia externo regional basado en servicios de backend con backends de NEG GCE_VM_IP, crea y administra los NEG de la siguiente manera:

  • GKE crea un NEG GCE_VM_IP único en cada zona para cada Service LoadBalancer. A diferencia de los grupos de instancias, los nodos pueden ser miembros de más de un NEG GCE_VM_IP con balanceo de cargas.

  • El externalTrafficPolicy del Service y la cantidad de nodos del clúster determinan qué nodos se agregan como extremos a los NEG GCE_VM_IP del Service.

  • Para un Service LoadBalancer IPv6, GKE propaga el NEG GCE_VM_IP con las direcciones IPv6 de las interfaces de red del nodo.

El plano de control del clúster administra los extremos de los nodos en los NEG GCE_VM_IP según el valor del externalTrafficPolicy del Service y la cantidad de nodos del clúster, como se resume en las siguientes tablas.

Nodos en el balanceador de cargas de red de transferencia interno

externalTrafficPolicy Cantidad de nodos en el clúster Membresía de los extremo
Cluster Entre 1 y 25 nodos GKE usa todos los nodos del clúster como extremos para los NEG del objeto Service, incluso si un nodo no contiene un Pod servidor para el objeto Service.
Cluster Más de 25 nodos GKE usa una subdivisión aleatoria de 25 nodos como extremos para los NEG del objeto Service, incluso si un nodo no contiene un Pod servidor para el objeto Service.
Local cualquier cantidad de nodos1 GKE solo usa nodos que tienen al menos uno de los Pods servidor del Service como extremos para los NEG del objeto Service.

1Limitado a 250 nodos con Pods de entrega. Puede haber más de 250 nodos en el clúster, pero los balanceadores de cargas de red de transferencia internos solo pueden distribuir a 250 VMs de backend cuando la subdivisión de backend del balanceador de cargas de red de transferencia interno está inhabilitada. Incluso con el subconjunto de GKE habilitado, GKE nunca configura los balanceadores de cargas de red de transferencia internos con la subdivisión de backend de balanceador de cargas de red de transferencia interno. Para obtener detalles sobre este límite, consulta Cantidad máxima de instancias de VM por servicio de backend interno.

Nodos en el balanceador de cargas de red de transferencia externo regional

externalTrafficPolicy Cantidad de nodos en el clúster Membresía de los extremo
Cluster De 1 a 250 nodos GKE usa todos los nodos del clúster como extremos para los NEG del objeto Service, incluso si un nodo no contiene un Pod servidor para el objeto Service.
Cluster más de 250 nodos GKE usa una subdivisión aleatoria de hasta 250 nodos como extremos para los NEG del Service, incluso si un nodo no contiene un Pod de entrega para el Service.
Local cualquier cantidad de nodos1 GKE solo usa nodos que tienen al menos uno de los Pods servidor del Service como extremos para los NEG del objeto Service.

1Limitado a 3,000 nodos con Pods de entrega. Puede haber más de 3,000 nodos en el clúster, pero GKE solo admite la creación de hasta 3,000 extremos cuando crea balanceadores de cargas de red de transferencia externos regionales basados en servicios de backend que usan backends de NEG GCE_VM_IP.

Limitación del grupo de instancias con balanceo de cargas único

La API de Compute Engine prohíbe que las VM sean miembros de más de un grupo de instancias con balanceo de cargas. Los nodos de GKE están sujetos a esta restricción.

Cuando se usan backends de grupos de instancias no administrados, GKE crea o actualiza grupos de instancias no administrados que contienen todos los nodos de todos los grupos de nodos en cada zona que usa el clúster. Estos grupos de instancias no administrados son backends para los siguientes balanceadores de cargas creados por GKE:

  • Un balanceador de cargas de red de transferencia interno creado para un Service LoadBalancer interno cuyo manifiesto tiene la anotación networking.gke.io/load-balancer-type: "Internal", enviado a un clúster que ejecuta una versión de GKE anterior a la 1.36, con la subdivisión de GKE inhabilitada.
  • Un balanceador de cargas de red de transferencia externo regional basado en servicios de backend creado para un Service LoadBalancer externo cuyo manifiesto tiene la anotación cloud.google.com/l4-rbs: "enabled", enviado a un clúster que ejecuta una versión de GKE anterior a la 1.32.2-gke.1652000.
  • Un balanceador de cargas de aplicaciones externo creado para un Ingress de GKE externo, con el controlador de Ingress de GKE, pero sin usar el balanceo de cargas nativo del contenedor.

Debido a que las VMs de nodo no pueden ser miembros de más de un grupo de instancias con balanceo de cargas, GKE no puede crear ni administrar balanceadores de cargas de red de transferencia internos, balanceadores de cargas de red de transferencia externos regionales basados en servicios de backend ni balanceadores de cargas de aplicaciones externos creados para recursos de Ingress de GKE si alguna de las siguientes condiciones es verdadera:

  • Fuera de GKE, creaste al menos un balanceador de cargas basado en servicios de backend y usaste los grupos de instancias administrados del clúster como backends para el servicio de backend del balanceador de cargas.
  • Fuera de GKE, debes crear un grupo de instancias no administrado personalizado que contenga algunos o todos los nodos del clúster y, luego, conectar ese grupo de instancias no administrado personalizado a un servicio de backend para un balanceador de cargas.

Para solucionar esta limitación, puedes indicarle a GKE que use backends de NEG:

Verificaciones de estado del balanceador de cargas

Todos los objetos Service LoadBalancer de GKE implementan una verificación de estado del balanceador de cargas. El sistema de verificación de estado del balanceador de cargas funciona fuera del clúster y es diferente de un sondeo de preparación, funcionamiento o inicio de Pod.

Los paquetes de verificación de estado del balanceador de cargas se responden con el software kube-proxy (en clústeres que no usan GKE Dataplane V2) o el software cilium-agent (en clústeres con GKE Dataplane V2) que se ejecuta en cada nodo. Los Pods no pueden responder las verificaciones de estado del balanceador de cargas para los objetos Service de tipo LoadBalancer.

El externalTrafficPolicy del Service determina qué nodos pasan la verificación de estado del balanceador de cargas. Para obtener más información sobre cómo el balanceador de cargas usa la información de la verificación de estado, consulta Distribución del tráfico.

externalTrafficPolicy Qué nodos pasan la verificación de estado Qué puerto se usa
Cluster Todos los nodos del clúster pasan la verificación de estado, incluidos los nodos sin Pods de entrega. Si existe al menos un Pod de entrega en un nodo, ese nodo pasa la verificación de estado del balanceador de cargas, sin importar el estado de su Pod. El puerto de verificación de estado del balanceador de cargas debe ser el puerto TCP 10256. No se puede personalizar.
Local

La verificación de estado del balanceador de cargas considera que un nodo está en buen estado si existe al menos un Pod de entrega listo y sin cerrar en el nodo, sin importar el estado de los demás Pods. Los nodos sin un Pod de entrega, los nodos cuyos Pods de entrega fallan en los sondeos de preparación y los nodos cuyos Pods de entrega se están cerrando fallan la verificación de estado del balanceador de cargas.

Durante las transiciones de estado, un nodo aún pasa la verificación de estado del balanceador de cargas hasta que se alcanza el umbral de mal estado de la verificación de estado del balanceador de cargas. El estado de transición ocurre cuando todos los Pods de entrega en un nodo comienzan a fallar los sondeos de preparación o cuando todos los Pods de entrega en un nodo se cierran. La forma en que se procesa el paquete en esta situación depende de la versión de GKE. Para obtener detalles adicionales, consulta la siguiente sección, Procesamiento de paquetes.

El plano de control de Kubernetes asigna el puerto de verificación de estado desde el rango de puertos del nodo, a menos que especifiques un puerto de verificación de estado personalizado.

Cuando se habilita el balanceo de cargas ponderado, el balanceador de cargas usa la información de estado y peso para identificar el conjunto de backends de nodos aptos. Para obtener más información, consulta Efecto del balanceo de cargas ponderado.

Cuando se habilita la afinidad zonal, el balanceador de cargas puede definir mejor el conjunto de backends de nodos aptos. Para obtener más información, consulta Afinidad zonal.

Verificación de estado de NEG en comparación con MIG

El tipo de backend que usa tu Service de LoadBalancer determina cómo Google Cloud configura y ejecuta las verificaciones de estado del balanceador de cargas:

  • Subdivisión de GKE (backends de NEG): Cuando tu Service usa grupos de extremos de red (NEG) de GCE_VM_IP, como cuando la subdivisión de GKE está habilitada, GKE configura verificaciones de estado zonales. En el caso de los NEG zonales, los sondeos de verificación de estado se dirigen directamente al puerto del Service.
  • Parámetros de configuración de grupos de instancias (backends de MIG): Cuando tu Service usa grupos de instancias no administrados (MIG) como backends, GKE configura verificaciones de estado globales. En el caso de los grupos de instancias, los sondeos de verificación de estado se dirigen al nodePort asignado del Service.

Soluciona problemas de fallas de verificación de estado

Si los backends de tu balanceador de cargas se informan como en mal estado (por ejemplo, si se muestra 0/X healthy en la consola de Google Cloud ), investiga las siguientes causas comunes:

  • Faltan reglas de firewall:Los balanceadores de cargas de Google Cloud requieren reglas de firewall de permiso de entrada para permitir que los sondeos de verificación de estado de los rangos de direcciones IP de verificación de estado de Google (como 130.211.0.0/22 y 35.191.0.0/16) lleguen a los nodos del clúster. Si se borran o modifican estas reglas de firewall, las verificaciones de estado fallarán.
  • No coincidencia del puerto de destino del sondeo: Cualquier regla de seguridad de red personalizada o configuración de firewall a nivel del nodo debe tener en cuenta el puerto de destino correcto de la verificación de estado. Los sondeos se dirigen directamente al puerto del Service para los backends de NEG, pero se dirigen al nodePort para los backends de grupos de instancias (MIG). Una discrepancia en la configuración esperada del puerto hace que los sondeos fallen.
  • Comportamiento de externalTrafficPolicy: Local: Si tu Service está configurado con el parámetro externalTrafficPolicy: Local, los nodos que no alojan un Pod listo y de entrega para ese Service fallan de forma intencional la verificación de estado del balanceador de cargas. Si todos los Pods del Service no están listos o se están finalizando en todo el clúster, todos los nodos de backend se informan como en mal estado (0/X healthy).

Rangos de sondeo de verificación de estado para los Services LoadBalancer IPv6

Los sondeos de verificación de estado para los Services LoadBalancer IPv6 provienen de rangos de origen diferentes de los sondeos IPv4. GKE crea reglas de firewall de permiso de entrada para los siguientes rangos de origen IPv6:

  • 2600:2d00:1:b029::/64 para los balanceadores de cargas de red de transferencia internos.
  • 2600:1901:8001::/48 para los balanceadores de cargas de red de transferencia externos regionales.

Si administras tus propias reglas de firewall, debes permitir la entrada desde estos rangos a los nodos del clúster, o bien fallarán las verificaciones de estado de los servicios de LoadBalancer IPv6.

Procesamiento de paquetes

En las siguientes secciones, se detalla cómo trabajan los balanceadores de cargas y los nodos del clúster a fin de enrutar los paquetes recibidos para los objetos Service LoadBalancer.

Balanceo de cargas de paso

Los balanceadores de cargas de red de transferencia enrutan los paquetes a la interfaz nic0 de los nodos del clúster de GKE. Cada paquete con balanceo de cargas recibido en un nodo tiene las siguientes características:

  • La dirección IP de destino del paquete coincide con la dirección IP de la regla de reenvío del balanceador de cargas.
  • El protocolo y el puerto de destino del paquete coinciden con los siguientes:
    • un protocolo y un puerto especificados en spec.ports[] del manifiesto del objeto Service
    • un protocolo y un puerto configurados en la regla de reenvío del balanceador de cargas

Traducción de direcciones de red de destino en nodos

Después de que el nodo recibe el paquete, el nodo realiza un procesamiento de paquetes adicional. En los clústeres de GKE que no usan GKE Dataplane V2, los nodos usan iptables para procesar paquetes con balanceo de cargas. En los clústeres de GKE con GKE Dataplane V2 habilitado, los nodos usan eBPF en su lugar. El procesamiento de paquetes a nivel de nodo siempre incluye las siguientes acciones:

  • El nodo realiza la traducción de direcciones de red de destino (DNAT) en el paquete y configura su dirección IP de destino en una dirección IP de Pod servidor.
  • El nodo cambia el puerto de destino del paquete al targetPort del spec.ports[] del Service correspondiente.

Traducción de direcciones de red de origen y enrutamiento en los nodos

En la siguiente tabla, se muestra la relación entre externalTrafficPolicy y si el nodo que recibió los paquetes con balanceo de cargas realiza la traducción de direcciones de red de origen (SNAT) antes de enviar los paquetes con balanceo de cargas a un Pod:

externalTrafficPolicy Comportamiento de la SNAT
Cluster

En los clústeres de GKE que no usan GKE Dataplane V2, cada nodo que recibió paquetes con balanceo de cargas siempre cambia la dirección IP de origen de esos paquetes para que coincida con la dirección IP del nodo, ya sea que el nodo enrute los paquetes a un Pod local o a un Pod en un nodo diferente.

En los clústeres de GKE que usan GKE Dataplane V2, cada nodo que recibió paquetes con balanceo de cargas cambia la dirección IP de origen de esos paquetes para que coincida con la dirección IP del nodo solo si el nodo receptor enruta los paquetes a un Pod en un nodo diferente. Si el nodo que recibió paquetes con balanceo de cargas los enruta a un Pod local, el nodo no cambia la dirección IP de origen de esos paquetes.

Local

Cada nodo que recibió paquetes con balanceo de cargas los enruta exclusivamente a un Pod local, y el nodo no cambia la dirección IP de origen de esos paquetes.

En la siguiente tabla, se muestra cómo externalTrafficPolicy controla la forma en que los nodos enrutan los paquetes con balanceo de cargas y los paquetes de respuesta:

externalTrafficPolicy Enrutamiento de paquetes con balanceo de cargas Enrutamiento de paquetes de respuesta
Cluster

A continuación, se muestra el comportamiento de referencia para enrutar paquetes con balanceo de cargas:

  • Si el nodo que recibió los paquetes con balanceo de cargas no tiene un Pod activo, listo y no finalizable, ese nodo enruta los paquetes a un nodo diferente que tenga un Pod activo, listo y no finalizable.
  • Si el nodo que recibió los paquetes con balanceo de cargas tiene un Pod de entrega listo y no finalizable, el nodo puede enrutar los paquetes a cualquiera de las siguientes opciones:
    • Un Pod local
    • Un nodo diferente que tiene un Pod de entrega, listo y no finalizable.

En los clústeres regionales, si el nodo que recibió paquetes con balanceo de cargas enruta paquetes a un nodo diferente, la afinidad zonal tiene el siguiente efecto:

  • Si la afinidad zonal no está habilitada, el nodo diferente puede estar en cualquier zona.
  • Si la afinidad zonal está habilitada, el nodo que recibió los paquetes con balanceo de cargas intenta enrutarlos a un nodo diferente en la misma zona. Si eso no es posible, el nodo diferente podría estar en cualquier zona.

Como último recurso, si no hay Pods de entrega, listos y que no finalicen para el Service en todos los nodos del clúster, ocurre lo siguiente:

  • Si la opción Proxy Terminating Endpoints está habilitada1, el nodo que recibió los paquetes con balanceo de cargas los enruta a un Pod de entrega, pero de finalización, si es posible.
  • Si se inhabilitan los extremos de finalización de proxy o no hay ningún Pod en todo el clúster, el nodo que recibió los paquetes con balanceo de cargas cierra la conexión con un restablecimiento de TCP.

Los paquetes de respuesta siempre se envían desde un nodo con el retorno directo del servidor:

  • Si el nodo con el Pod de entrega no es el nodo que recibió los paquetes con balanceo de cargas correspondientes, el nodo de entrega envía los paquetes de respuesta de vuelta al nodo receptor. Luego, el nodo receptor envía los paquetes de respuesta con el retorno directo del servidor.
  • Si el nodo con el Pod activo es el nodo que recibió los paquetes con balanceo de cargas, ese nodo envía los paquetes de respuesta con el retorno directo del servidor.
Local

A continuación, se muestra el comportamiento de referencia para enrutar paquetes con balanceo de cargas: el nodo que recibió paquetes con balanceo de cargas suele tener un Pod de entrega, listo y sin cerrar (ya que tener un Pod de este tipo es necesario para pasar la verificación de estado del balanceador de cargas). El nodo enruta los paquetes con balanceo de cargas a un Pod local.

En los clústeres regionales, la afinidad zonal no cambia el comportamiento de referencia para enrutar paquetes con balanceo de cargas.

Como último recurso, si no hay Pods de entrega, listos y no finalizables para el Service en el nodo que recibió los paquetes con balanceo de cargas, ocurre lo siguiente:

  • Si se habilitan los extremos de finalización de proxy1, el nodo que recibió los paquetes con balanceo de cargas los enruta a un Pod de entrega local, pero de finalización, si es posible.
  • Si los extremos de finalización de proxy están inhabilitados o el nodo que recibió paquetes con balanceo de cargas no tiene ningún Pod de entrega, ese nodo cierra la conexión con un restablecimiento de TCP.

El nodo con el Pod de entrega siempre es el nodo que recibió los paquetes con balanceo de cargas, y ese nodo envía los paquetes de respuesta con el retorno directo del servidor.

1 Los extremos de terminación de proxy están habilitados en estas configuraciones:

  • Clústeres de GKE que no usan GKE Dataplane V2: GKE versión 1.26 y posteriores
  • Clústeres de GKE que usan GKE Dataplane V2: GKE versión 1.26.4-gke.500 y posteriores

Precios y cuotas

Los precios de red se aplican a los paquetes que procesa un balanceador de cargas. Para obtener más información, consulta los precios de Cloud Load Balancing y las reglas de reenvío. También puedes estimar los cargos de facturación con la calculadora de precios de Google Cloud .

Las cuotas del balanceador de cargas controlan la cantidad de reglas de reenvío que puedes crear:

¿Qué sigue?