Unité 6.3 : Provisionnement d'un Cluster privé
Introduction
Les workers de récupération et d'inférence de FinCorp traitent les documents des clients, leurs nœuds ne doivent donc pas être accessibles depuis Internet. Un cluster avec des pools de nœuds privés offre exactement cela, mais il modifie trois éléments sur lesquels l'Unité 6.2 s'appuyait : l'absence d'adresses de nœuds publiques, l'absence de services LoadBalancer, et un chemin sortant que le service construit pour vous.
Cette unité explique ces différences et construit fc-k8s-ai dans fc-prod-fra-ai. Les étapes qui fonctionnent comme dans l'Unité 6.2 sont référencées, mais non répétées.
1. Ce que signifie « privé »
1.1 Le plan de données est privé ; l'API ne l'est pas
Dans un cluster avec des pools de nœuds privés, les Node ne disposent que d'adresses IP internes, si bien que les Node et les pods sont isolés d'Internet. Les pools de nœuds sont situés dans un réseau privé derrière une passerelle NAT, qui autorise les connexions des Node vers Internet, mais pas l'inverse. Le trafic entre les Node reste à l'intérieur du réseau privé.
Le plan de contrôle reste exposé à Internet. Protégez-le à l'aide des Allowed IPs, qui restreignent l'accès à l'API à une plage d'adresses IP. FinCorp saisit la plage de son réseau d'administration et de son pipeline de déploiement, de sorte qu'un kubeconfig divulgué ne puisse pas atteindre l'API depuis tout autre réseau.
Deux fonctionnalités des pools publics ne sont pas disponibles. Les services Kubernetes de type LoadBalancer ne sont pas pris en charge, et les adresses IP statiques des Node ne sont pas prises en charge. Le trafic entrant vers un cluster privé provient donc de l'intérieur de votre réseau, par exemple de VM ou d'équilibreurs de charge sur un LAN privé auquel le pool de nœuds est également rattaché.
1.2 Un prérequis, deux ressources déployées par le service
Le cluster a besoin d'une chose de votre part avant d'exister : une adresse IPv4 réservée, non utilisée par aucune autre ressource, qui devient l'adresse IP de la passerelle NAT. Le service déploie ensuite lui-même deux ressources réseau :
| Ressource | Déployée par | Objectif |
|---|---|---|
| Passerelle NAT | Managed Kubernetes, sur l'adresse IP réservée de la passerelle NAT | Trafic sortant entre les Node du cluster et le plan de contrôle, par exemple pour récupérer les images de conteneurs |
| Cross Connect privé | Managed Kubernetes, dans votre VDC | Communication inter-Node à travers tous les pools de nœuds du cluster, y compris les pools situés dans des VDC différents |
Comme indiqué ci-dessus, les deux ressources existent pour servir le cluster. Cette passerelle NAT n'est pas destinée à des Node arbitraires, vous ne pouvez donc pas y attacher un réseau privé supplémentaire ; vos VM continuent d'utiliser leur propre passerelle NAT (Unité 3.6). Les ressources gérées par Kubernetes sont affichées en lecture seule dans le DCD.
L'adresse de la passerelle NAT est également l'adresse source publique du cluster. Les partenaires ou services qui autorisent FinCorp, comme une API externe, voient le trafic sortant des Node provenir de cette adresse unique.
1.3 Le sous-réseau des Node et les paramètres fixes
Vous pouvez définir un sous-réseau pour les Node sur le LAN privé, qui doit avoir une longueur de préfixe de /16 ; sinon, une plage par défaut est attribuée. Le sous-réseau ne doit pas intersecter les réseaux du cluster destinés aux pods et aux services. Pour les clusters créés avec Kubernetes 1.30 et les versions ultérieures, il s'agit de 100.96.0.0/12 et 100.64.0.0/18. Il doit également rester distinct de toute plage routée par FinCorp, car le plan d'adresses de l'Unité 3.1 s'étend sur les VDC via un Cross Connect.
Une fois provisionné, la région, l'adresse IP de la passerelle NAT et le sous-réseau des Node ne peuvent pas être modifiés, et l'accès aux pools de nœuds ne peut pas être basculé entre privé et public. Un cluster pour pools de nœuds privés est lié à une seule région : ses pools de nœuds doivent être situés dans des VDC au même emplacement que le cluster, et le plan de contrôle s'exécute dans cette région. Pour FinCorp, il s'agit de de/fra, ce qui maintient l'API Kubernetes, ses secrets et sa piste d'audit en Allemagne (Unité 6.1, Section 4).
Déroulement de l'implémentation DCD
Vous réserverez l'adresse de la passerelle NAT, puis créerez fc-k8s-ai avec des pools de nœuds privés dans fc-prod-fra-ai. Les champs du pool de nœuds suivent l'Unité 6.2 ; seules les différences liées au mode privé sont décrites en détail.
Prérequis : le privilège Create Kubernetes Clusters ; le VDC fc-prod-fra-ai situé dans le même emplacement que le cluster ; le bucket d'audit fc-k8s-audit-fra (Unité 6.2) ; une plage /16 libre dans le plan d'adresses de FinCorp, ici 10.30.0.0/16.
Objectif de construction : Construire la variante privée en réutilisant les schémas du cluster public, en commençant par le réseau.
Étapes (dans Data Center Designer) :
- Accédez à Menu > Network Services > IP Management et sélectionnez + Reserve IP Blocks. Saisissez le Name
fc-k8s-ai-nat, le Number of IPs1et la région Frankfurt, puis confirmez. N'attribuez pas cette adresse à un autre élément. - Accédez à Menu > Containers > Managed Kubernetes, sélectionnez Create cluster, et saisissez le Name
fc-k8s-aiainsi que la Kubernetes version. - Sous Location and network access, sélectionnez Private pour Node pool access et Frankfurt am Main (de/fra) pour Location. Dans NAT gateway IP address, sélectionnez
fc-k8s-ai-nat. Dans Node subnet, saisissez10.30.0.0/16. - Sous Additional settings, activez Audit logging avec le bucket
fc-k8s-audit-fra, saisissez la plage d'administration et de pipeline de FinCorp dans Allowed IPs, et définissez la Maintenance window. Sélectionnez Create cluster et attendez que le statut passe à Active. - Ajoutez des pools de nœuds comme dans l'Unité 6.2, étapes 5 à 8, avec les valeurs suivantes : Virtual data center
fc-prod-fra-ai, nomsfc-np-ai-z1etfc-np-ai-z2, un nouveau LAN privéfc-ai-appsous Connection via private LAN, et des modèles Dedicated Core dans la Zone 1 et la Zone 2. - Si les pods doivent atteindre des services dans
fc-prod-fra-core, sélectionnez Attach another private LAN et ajoutez le LAN du VDC IA sur le Cross Connect de l'Unité 3.6. Gardez sa plage DHCP distincte des autres VDC sur ce Cross Connect. - Ouvrez l'onglet Security du cluster, sélectionnez Visible to Groups, et accordez à
fc-prod-platform-opsle droit Edit. - Dans Kubernetes Manager, sélectionnez le cluster, ouvrez l'onglet Cluster Settings et téléchargez kubeconfig.yaml. Exécutez
kubectldepuis un hôte situé dans la plage Allowed IPs. - Ouvrez
fc-prod-fra-aidans le Workspace et vérifiez que les ressources gérées du cluster sont présentes. Laissez-les inchangées.
Erreurs courantes :
- Créer le cluster avant de réserver l'adresse IP de la passerelle NAT, ou sélectionner une adresse utilisée par une autre ressource.
- Supposer que « privé » masque l'API Kubernetes. Elle reste accessible depuis Internet ; définissez Allowed IPs lors de la création.
- Choisir un sous-réseau de nœuds qui chevauche
100.96.0.0/12,100.64.0.0/18, ou une plage FinCorp sur un VPN ou un Cross Connect. Le sous-réseau ne peut pas être modifié ultérieurement. - Écrire un service
type: LoadBalancerpour un cluster privé. Ce n'est pas pris en charge ; exposez les services aux clients internes via un LAN privé auquel le pool de nœuds est joint. - Attacher d'autres serveurs ou réseaux à la passerelle NAT du cluster, ou modifier le Private Cross Connect. Les deux éléments appartiennent au service.
- Placer un pool de nœuds dans un VDC situé dans un autre emplacement. Les pools de nœuds privés doivent se trouver dans la région du cluster.
Résumé
Un cluster privé isole le plan de données, et non l'API. Vous réservez une adresse IPv4 pour la passerelle NAT et choisissez un sous-réseau de nœuds /16 non chevauchant avant de le créer ; le service déploie ensuite une passerelle NAT pour le trafic sortant et un Cross Connect privé pour le trafic entre les pools de nœuds. La région, l'adresse NAT, le sous-réseau des nœuds et le type d'accès sont fixés à la création, de sorte que FinCorp définit les quatre éléments dans le plan d'adresses avant le premier clic.
Points clés :
- Les pools de nœuds privés disposent uniquement d'adresses IP internes et accèdent à Internet en sortant via la passerelle NAT du service.
- L'API Kubernetes reste accessible depuis Internet ; restreignez-y l'accès à l'aide des IP autorisées.
- Les services de type LoadBalancer et les adresses IP statiques des nœuds ne sont pas pris en charge sur les pools de nœuds privés.
- Le sous-réseau des nœuds est un /16 qui ne doit pas se chevaucher avec
100.96.0.0/12ou100.64.0.0/18(Kubernetes 1.30 et versions ultérieures). - La région, l'adresse IP de la passerelle NAT, le sous-réseau des nœuds et l'accès au pool de nœuds ne peuvent pas être modifiés après le provisionnement.