Unité 6.2 : Provisionnement d'un Cluster public
Introduction
L'unité 6.1 a défini les règles : un service LoadBalancer est une adresse IP statique sur un nœud, les nœuds sont remplacés à chaque maintenance, et le filtrage est géré au niveau du cluster et de la périphérie. Cette unité applique ces règles au cluster public de FinCorp, fc-k8s-portal, situé dans fc-prod-fra-core.
Les décisions irréversibles sont traitées en premier : l'accès aux pools de nœuds, l'emplacement, et le modèle de chaque pool. L'unité se conclut avec le cluster construit dans le DCD et connecté à l'ALB fc-alb-edge de l'unité 3.3.
1. Deux façons d'exposer un Cluster public
1.1 Exposition directe sur des IP réservées
Les pools de nœuds publics attribuent à chaque nœud une adresse IP externe. La méthode d'exposition la plus simple consiste à créer un service de contrôleur d'ingress de type LoadBalancer sur une adresse IP réservée dans IP Management. La réserver en dehors de Kubernetes permet de conserver l'adresse lorsque le service est supprimé, et une loadBalancerIP pré-réservée est ce qui permet aux enregistrements DNS de rester stables.
Cette option est économique, mais elle hérite de toutes les propriétés de la section 3.1 de l'Unité 6.1 : un seul nœud porte l'IP, jusqu'à 2 Gbit/s par nœud, les IP clients sont perdues sauf si externalTrafficPolicy: Local est défini, et la mise à l'échelle se fait par l'ajout d'IP dans DNS. Pour conserver l'IP client, exécutez le contrôleur d'ingress uniquement sur un pool de nœuds d'ingress étiqueté et ajoutez l'annotation cloud.ionos.com/node-selector à son service, afin que l'IP soit attribuée à un nœud qui exécute le contrôleur.
1.2 L'ALB en amont
L'alternative managée est l'ALB provisionné séparément. Les manifests ne le créent pas ; vous le créez dans le VDC et pointez son groupe de cibles vers les nœuds. Les pools de nœuds rejoignent le LAN privé fc-app, où l'arrière-plan de l'ALB est déjà présent, et le contrôleur d'ingress écoute sur un port de nœud sur chaque nœud. L'ALB termine alors le TLS, applique les règles d'hôte et de chemin de l'Unité 3.3 et effectue les vérifications d'état, tandis que le contrôleur d'ingress achemine le trafic à l'intérieur du cluster.
| Option | Avantages | Inconvénients | Meilleur usage |
|---|---|---|---|
| Contrôleur d'ingress en LoadBalancer sur une IP réservée | Aucun composant supplémentaire ; adresse stable | Un nœud par IP ; 2 Gbit/s par nœud ; l'IP client nécessite externalTrafficPolicy: Local |
Outils internes, points d'accès partenaires avec un trafic modéré |
| ALB en amont du contrôleur d'ingress | TLS managé, règles de niveau 7, vérifications d'état, une seule passerelle pour les VM et le cluster | Une liste de cibles à maintenir lorsque les nœuds sont remplacés | Portails et API destinés aux clients |
Comme indiqué ci-dessus, l'ALB est le choix pour le portail de FinCorp : c'est la même passerelle qui sert déjà fc-tg-portal et fc-tg-api, de sorte que le cluster devient un groupe de cibles supplémentaire plutôt qu'un second point d'entrée internet.
1.3 Stockage pour les Pods avec état
Le pilote CSI s'exécute dans le plan de contrôle, crée des volumes Block Storage pour les demandes de Volume persistant (PVC) et les attache aux nœuds. Le nom de son provisionneur est cloud.ionos.com, et une classe de stockage définit le type de volume, le système de fichiers et la zone de disponibilité des volumes qu'elle crée. Définissez les classes de stockage avec volumeBindingMode: WaitForFirstConsumer, ce qui retarde la création du volume jusqu'à ce qu'un pod soit planifié, et attribuez à chaque pool de zone une classe correspondant à cette zone. Les volumes provisionnés dynamiquement sont gérés par le pilote CSI : vous ne pouvez pas les supprimer vous-même après la suppression du PV, et une politique de récupération Retain les laisse en place pour un nettoyage manuel.
Déroulement de l'implémentation DCD
Vous allez créer fc-k8s-portal avec des pools de nœuds publics à Francfort, un pool Dedicated Core par zone sur le LAN fc-app, et le connecter à fc-alb-edge. Cela met en œuvre l'option ALB-in-front de la section 1.2.
Prérequis : le privilège Create Kubernetes Clusters (ou le rôle Administrateur) ; le VDC fc-prod-fra-core avec le LAN fc-app (Unité 3.1) ; l'ALB fc-alb-edge (Unité 3.3) ; un bucket Object Storage existant pour les journaux d'audit, ici fc-k8s-audit-fra (Unité 5.2) ; une adresse IPv4 réservée à Francfort pour le champ Reserved IP address du pool de nœuds, réservée sous Menu > Network Services > IP Management.
Objectif de construction : Construire un cluster public de bout en bout.
Étapes (dans Data Center Designer) :
- Accédez à Menu > Containers > Managed Kubernetes et sélectionnez Create cluster. Saisissez le Name
fc-k8s-portalet sélectionnez la Kubernetes version. Choisissez la dernière version stable, ce qui maximise le temps avant que le cluster n'atteigne sa fin de vie. - Sous Location and network access, sélectionnez Public en tant que Node pool access et Frankfurt am Main (de/fra) en tant que Location. Aucun des deux ne peut être modifié ultérieurement, et l'accès au pool de nœuds ne peut pas basculer entre public et privé.
- Sous Additional settings, activez Audit logging et saisissez
fc-k8s-audit-fraen tant que Target Object Storage bucket. Dans Allowed IPs, saisissez la plage d'adresses à partir de laquelle FinCorp administre le cluster ; un champ vide autorise l'accès API depuis n'importe où. Définissez le Day et le Start time (UTC) de la Maintenance window sur la fenêtre de modification de FinCorp. - Sélectionnez Create cluster. Le statut reste Deploying jusqu'à la création du cluster ; ajoutez des pools de nœuds une fois qu'il est Active.
- Sélectionnez le cluster, ouvrez l'onglet Node pools et sélectionnez Add node pool. Saisissez le Node pool name
fc-np-portal-z1, la Kubernetes version, le Virtual data centerfc-prod-fra-coreet l'Reserved IP address. Sous Node count, sélectionnez Auto-scale avec un Minimum de 2 et un Maximum dans la recommandation de 20 nœuds. - Sous Connection via private LAN, sélectionnez le LAN
fc-appet gardez DHCP activé. Les pools de nœuds ne peuvent rejoindre que des LAN privés, et ils obtiennent leur adresse LAN via DHCP. - Sous Node template, gardez le Server type Dedicated Core, sélectionnez les Cores et la RAM (GB), définissez la Availability zone sur Zone 1, choisissez Performance en tant que Storage type et définissez la Storage size (GB). À l'exception du type de serveur, ces paramètres ne peuvent pas être modifiés après la création.
- Sous Advanced settings, ajoutez le Label
nodepool=portalet définissez la Maintenance window du pool. Sélectionnez Create node pool. Répétez les étapes 5 à 8 pourfc-np-portal-z2dans la Zone 2. - Ouvrez l'onglet Security du cluster, sélectionnez Visible to Groups et donnez à
fc-prod-platform-opsla case à cocher Edit (Unité 2.2). - Dans la liste des clusters, ouvrez la colonne OPTIONS et sélectionnez Download kubeconfig.yaml. Seuls les administrateurs peuvent récupérer le kubeconfig avant qu'un pool de nœuds n'existe.
- Avec
kubectl, appliquez la classe de stockage ci-dessous, puis installez le contrôleur d'ingress avec un service de type NodePort sur les nœuds étiquetésnodepool=portal. - Accédez à Menu > Network Services > Target Groups et créez
fc-tg-k8savec les adressesfc-appdes nœuds et le port d'ingress des nœuds, avec Health Check Enabled. Surfc-alb-edge, ajoutez une règle Forward pour l'hôte ou le chemin du cluster versfc-tg-k8s, comme dans l'Unité 3.3.
La classe de stockage porte la décision de zone. Ses parameters proviennent de l'exemple documenté du pilote CSI ; le nom et la zone correspondent au premier pool de FinCorp :
apiVersion: storage.k8s.io/v1
kind: StorageClass
metadata:
name: fc-performance-zone-1
provisioner: cloud.ionos.com
parameters:
type: Performance
fstype: ext4
availabilityZone: ZONE_1
volumeBindingMode: WaitForFirstConsumer
allowVolumeExpansion: true
Erreurs courantes :
- S'attendre à ce qu'un manifeste
type: LoadBalancercrée une ALB ou une NLB. Il associe une IP statique à un nœud ; l'ALB est créée séparément. - Laisser Kubernetes réserver l'IP d'entrée. Sans
loadBalancerIPpré-réservée, l'adresse est libérée lorsque le service est supprimé, et le DNS est rompu. - Considérer la liste des cibles de l'ALB comme statique. La maintenance remplace les nœuds un par un, il faut donc vérifier les cibles de
fc-tg-k8saprès chaque maintenance, ou automatiser leur mise à jour. - Modifier les serveurs de nœuds, les NIC ou les volumes dans le Workspace. Les ressources gérées par Kubernetes sont affichées en lecture seule, et une intervention manuelle pendant le provisionnement des nœuds peut entraîner des résultats indésirables.
- S'attendre à ce qu'un seul pool couvre deux zones. La zone de disponibilité fait partie du modèle ; la redondance de zone nécessite un pool par zone.
- Laisser Allowed IPs vide sur un cluster de production. L'API Kubernetes est alors accessible depuis n'importe où.
- Installer un outil d'admission webhook tel que Kyverno ou OPA/Gatekeeper avant que le cluster n'ait de nœuds de travail. Ses pods ne peuvent pas être planifiés, ce qui peut bloquer la création des nœuds.
Résumé
Un cluster public est exposé soit par un contrôleur d'entrée sur des IP réservées, soit par l'ALB placé devant lui ; FinCorp utilise l'ALB, de sorte que le cluster rejoint l'edge existant en tant que groupe de cibles. Le processus de construction corrige d'abord les choix irréversibles, l'accès public et de/fra, puis ajoute un pool Dedicated Core par zone sur fc-app, une classe de stockage prenant en compte les zones et une liste d'autorisation API.
Points clés :
- L'accès et l'emplacement des pools de nœuds sont fixés à la création du cluster ; le modèle d'un pool, à l'exception de son type de serveur, est fixé à la création du pool.
- Réservez les IP d'entrée dans la gestion des IP afin qu'elles subsistent après la suppression d'un service.
- L'ALB est provisionné séparément et cible les nœuds sur un LAN privé partagé via le port de nœud du contrôleur d'entrée.
- Utilisez les classes de stockage
WaitForFirstConsumeravec le provisionneurcloud.ionos.com, une par zone. - Configurez la journalisation d'audit, les IP autorisées et la fenêtre de maintenance à la création.