Unidad 6.3: Aprovisionamiento de un Cluster privado
Introducción
Los trabajadores de recuperación e inferencia de FinCorp procesan documentos de clientes, por lo que sus nodos no deben ser accesibles desde internet. Un clúster con grupos de nodos privados proporciona exactamente eso, pero modifica tres aspectos en los que la Unidad 6.2 dependía: no hay direcciones de nodos públicas, no hay servicios de LoadBalancer y hay una ruta de salida que el servicio construye por usted.
Esta unidad explica esas diferencias y construye fc-k8s-ai en fc-prod-fra-ai. Los pasos que funcionan igual que en la Unidad 6.2 se mencionan por referencia, no se repiten.
1. Lo que significa "privado"
1.1 El plano de datos es privado; la API no lo es
En un clúster con grupos de nodos privados, los Node tienen solo direcciones IP internas, por lo que los Node y los pods están aislados de internet. Los grupos de nodos se encuentran en una red privada detrás de una NAT Gateway, que permite conexiones desde los Node hacia internet, pero no al revés. El tráfico entre los Node permanece dentro de la red privada.
El plano de control sigue expuesto a internet. Protéjalo con Allowed IPs, que restringe el acceso a la API a un rango de direcciones IP. FinCorp introduce el rango de su red de administración y su pipeline de despliegue, de modo que un kubeconfig filtrado no pueda alcanzar la API desde ninguna otra red.
Dos características de los grupos públicos no están disponibles. No se admiten servicios de Kubernetes de tipo LoadBalancer, y no se admiten direcciones IP estáticas para los Node. Por lo tanto, el tráfico entrante a un clúster privado proviene desde dentro de su red, por ejemplo, desde VM o equilibradores de carga en una LAN privada a la que también se une el grupo de nodos.
1.2 Un requisito previo, dos recursos que despliega el servicio
El clúster necesita una cosa de usted antes de que exista: una dirección IPv4 reservada, no utilizada por ningún otro recurso, que se convierte en la dirección IP de la NAT gateway. El servicio luego despliega por sí mismo dos recursos de red:
| Recurso | Desplegado por | Propósito |
|---|---|---|
| NAT Gateway | Managed Kubernetes, en la dirección IP reservada de la NAT gateway | Tráfico saliente entre los Node del clúster y el plano de control, por ejemplo, para recuperar imágenes de contenedor |
| Private Cross Connect | Managed Kubernetes, en su VDC | Comunicación entre Node en todos los grupos de nodos del clúster, incluidos grupos en VDC diferentes |
Como se muestra arriba, ambos recursos existen para servir al clúster. Esta NAT Gateway no está destinada a Node arbitrarios, por lo que no puede adjuntar una red privada adicional a ella; sus VM continúan usando su propia NAT Gateway (Unidad 3.6). Los recursos gestionados por Kubernetes se muestran solo lectura en el DCD.
La dirección de la NAT gateway también es la dirección de origen pública del clúster. Los socios o servicios que incluyen a FinCorp en su lista de direcciones permitidas, como una API externa, ven el tráfico saliente de los Node desde esa única dirección.
1.3 La subred de Node y la configuración fija
Puede definir una subred de Node para la LAN privada, que debe tener una longitud de prefijo de /16; de lo contrario, se asigna un rango predeterminado. La subred no debe intersectar las redes del clúster para pods y servicios. Para los clústeres creados con Kubernetes 1.30 o superior, estos son 100.96.0.0/12 y 100.64.0.0/18. También debe mantenerse alejada de todos los rangos que FinCorp enruta, porque el plan de direcciones de la Unidad 3.1 abarca los VDC en un Cross Connect.
Una vez aprovisionado, la región, la dirección IP de la NAT gateway y la subred de Node no se pueden cambiar, y el acceso al grupo de nodos no se puede conmutar entre privado y público. Un clúster para grupos de nodos privados está vinculado a una región: sus grupos de nodos deben estar en VDC en la misma ubicación que el clúster, y el plano de control se ejecuta en esa región. Para FinCorp, esa es de/fra, que mantiene la API de Kubernetes, sus secretos y su registro de auditoría en Alemania (Unidad 6.1, Sección 4).
Descripción de la implementación de DCD
Reservará la dirección de la pasarela NAT y, a continuación, creará fc-k8s-ai con grupos de Node privados en fc-prod-fra-ai. Los campos del grupo de Node siguen la Unidad 6.2; solo se describen por completo las diferencias privadas.
Requisitos previos: el privilegio Create Kubernetes Clusters; el VDC fc-prod-fra-ai en la misma ubicación que el Cluster; el bucket de auditoría fc-k8s-audit-fra (Unidad 6.2); un rango /16 libre en el plan de direcciones de FinCorp, aquí 10.30.0.0/16.
Objetivo de construcción: Construir la variante privada reutilizando los patrones del Cluster público, comenzando por la red.
Pasos (en el Data Center Designer):
- Vaya a Menu > Network Services > IP Management y seleccione + Reserve IP Blocks. Introduzca el Name
fc-k8s-ai-nat, el Number of IPs1y la Region de Fráncfort, y confirme. No asigne esta dirección a nada más. - Vaya a Menu > Containers > Managed Kubernetes, seleccione Create cluster e introduzca el Name
fc-k8s-aiy laKubernetes version. - Bajo Location and network access, seleccione Private como Node pool access y Frankfurt am Main (de/fra) como Location. En NAT gateway IP address, seleccione
fc-k8s-ai-nat. En Node subnet, introduzca10.30.0.0/16. - Bajo Additional settings, active Audit logging con el bucket
fc-k8s-audit-fra, introduzca el rango de administración y de pipeline de FinCorp en Allowed IPs y establezca la Maintenance window. Seleccione Create cluster y espere a que el estado sea Active. - Añada grupos de Node como en la Unidad 6.2, pasos 5 a 8, con estos valores: Virtual data center
fc-prod-fra-ai, nombresfc-np-ai-z1yfc-np-ai-z2, una nueva LAN privadafc-ai-appbajo Connection via private LAN, y plantillas Dedicated Core en la Zona 1 y la Zona 2. - Si los pods deben alcanzar servicios en
fc-prod-fra-core, seleccione Attach another private LAN y añada la LAN del VDC de IA en el Cross Connect de la Unidad 3.6. Mantenga su rango DHCP separado de los de los otros VDCs en ese Cross Connect. - Abra la pestaña Security del Cluster, seleccione Visible to Groups y otorgue a
fc-prod-platform-opsel permiso Edit. - En Kubernetes Manager, seleccione el Cluster, abra la pestaña Cluster Settings y descargue kubeconfig.yaml. Ejecute
kubectldesde un host dentro del rango de Allowed IPs. - Abra
fc-prod-fra-aien el Workspace y confirme que los recursos gestionados del Cluster están presentes. Déjelos sin cambios.
Errores comunes:
- Crear el Cluster antes de reservar la dirección IP de la pasarela NAT, o seleccionar una dirección que otro recurso utiliza.
- Suponer que "private" oculta la API de Kubernetes. Sigue estando expuesta a Internet; establezca Allowed IPs en la creación.
- Elegir una subred de Node que se solape con
100.96.0.0/12,100.64.0.0/18, o un rango de FinCorp en una VPN o Cross Connect. La subred no se puede cambiar posteriormente. - Escribir un servicio
type: LoadBalancerpara un Cluster privado. No está soportado; exponga los servicios a clientes internos a través de una LAN privada a la que se una el grupo de Node. - Adjuntar otros servidores o redes a la NAT Gateway del Cluster, o editar el Private Cross Connect. Ambos pertenecen al servicio.
- Colocar un grupo de Node en un VDC en otra ubicación. Los grupos de Node privados deben estar en la región del Cluster.
Resumen
Un clúster privado aísla el plano de datos, no la API. Debe reservar una dirección IPv4 para la pasarela NAT y elegir una subred de nodos /16 que no se solape antes de crearlo; el servicio luego despliega una pasarela NAT para el tráfico saliente y un Cross Connect privado para el tráfico entre los grupos de nodos. La región, la dirección NAT, la subred de nodos y el tipo de acceso se fijan en el momento de la creación, por lo que FinCorp debe definir los cuatro en el plan de direcciones antes del primer clic.
Puntos clave:
- Los grupos de nodos privados solo tienen IPs internas y acceden a internet de forma saliente a través de la pasarela NAT del servicio.
- La API de Kubernetes sigue siendo accesible desde internet; restríngala con Allowed IPs.
- Los servicios LoadBalancer y las IPs estáticas de nodos no están admitidos en los grupos de nodos privados.
- La subred de nodos es una /16 que no debe intersectar con
100.96.0.0/12ni con100.64.0.0/18(Kubernetes 1.30 y superiores). - La región, la dirección IP de la pasarela NAT, la subred de nodos y el acceso al grupo de nodos no se pueden cambiar después del aprovisionamiento.