9 min de lecture

Objectifs d'apprentissage

À la fin de ce module, vous serez en mesure de:

  • Choisir entre l'exposition directe d'un contrôleur d'ingress sur une IP réservée et son placement derrière l'Application Load Balancer
  • Créer un cluster avec des pools de nœuds publics dans Data Center Designer (DCD), avec journalisation d'audit, une liste d'autorisation API et une fenêtre de maintenance fixe
  • Configurer les pools de nœuds par zone, attachés à un LAN privé existant
  • Définir une classe de stockage tenant compte des zones pour le pilote CSI et récupérer le kubeconfig
  • Connecter le cluster à l'ALB via un contrôleur d'ingress au sein du cluster

Unité 6.2 : Provisionnement d'un Cluster public

Introduction

L'unité 6.1 a défini les règles : un service LoadBalancer est une adresse IP statique sur un nœud, les nœuds sont remplacés à chaque maintenance, et le filtrage est géré au niveau du cluster et de la périphérie. Cette unité applique ces règles au cluster public de FinCorp, fc-k8s-portal, situé dans fc-prod-fra-core.

Les décisions irréversibles sont traitées en premier : l'accès aux pools de nœuds, l'emplacement, et le modèle de chaque pool. L'unité se conclut avec le cluster construit dans le DCD et connecté à l'ALB fc-alb-edge de l'unité 3.3.

1. Deux façons d'exposer un Cluster public

1.1 Exposition directe sur des IP réservées

Les pools de nœuds publics attribuent à chaque nœud une adresse IP externe. La méthode d'exposition la plus simple consiste à créer un service de contrôleur d'ingress de type LoadBalancer sur une adresse IP réservée dans IP Management. La réserver en dehors de Kubernetes permet de conserver l'adresse lorsque le service est supprimé, et une loadBalancerIP pré-réservée est ce qui permet aux enregistrements DNS de rester stables.

Cette option est économique, mais elle hérite de toutes les propriétés de la section 3.1 de l'Unité 6.1 : un seul nœud porte l'IP, jusqu'à 2 Gbit/s par nœud, les IP clients sont perdues sauf si externalTrafficPolicy: Local est défini, et la mise à l'échelle se fait par l'ajout d'IP dans DNS. Pour conserver l'IP client, exécutez le contrôleur d'ingress uniquement sur un pool de nœuds d'ingress étiqueté et ajoutez l'annotation cloud.ionos.com/node-selector à son service, afin que l'IP soit attribuée à un nœud qui exécute le contrôleur.

1.2 L'ALB en amont

L'alternative managée est l'ALB provisionné séparément. Les manifests ne le créent pas ; vous le créez dans le VDC et pointez son groupe de cibles vers les nœuds. Les pools de nœuds rejoignent le LAN privé fc-app, où l'arrière-plan de l'ALB est déjà présent, et le contrôleur d'ingress écoute sur un port de nœud sur chaque nœud. L'ALB termine alors le TLS, applique les règles d'hôte et de chemin de l'Unité 3.3 et effectue les vérifications d'état, tandis que le contrôleur d'ingress achemine le trafic à l'intérieur du cluster.

Option Avantages Inconvénients Meilleur usage
Contrôleur d'ingress en LoadBalancer sur une IP réservée Aucun composant supplémentaire ; adresse stable Un nœud par IP ; 2 Gbit/s par nœud ; l'IP client nécessite externalTrafficPolicy: Local Outils internes, points d'accès partenaires avec un trafic modéré
ALB en amont du contrôleur d'ingress TLS managé, règles de niveau 7, vérifications d'état, une seule passerelle pour les VM et le cluster Une liste de cibles à maintenir lorsque les nœuds sont remplacés Portails et API destinés aux clients

Comme indiqué ci-dessus, l'ALB est le choix pour le portail de FinCorp : c'est la même passerelle qui sert déjà fc-tg-portal et fc-tg-api, de sorte que le cluster devient un groupe de cibles supplémentaire plutôt qu'un second point d'entrée internet.

1.3 Stockage pour les Pods avec état

Le pilote CSI s'exécute dans le plan de contrôle, crée des volumes Block Storage pour les demandes de Volume persistant (PVC) et les attache aux nœuds. Le nom de son provisionneur est cloud.ionos.com, et une classe de stockage définit le type de volume, le système de fichiers et la zone de disponibilité des volumes qu'elle crée. Définissez les classes de stockage avec volumeBindingMode: WaitForFirstConsumer, ce qui retarde la création du volume jusqu'à ce qu'un pod soit planifié, et attribuez à chaque pool de zone une classe correspondant à cette zone. Les volumes provisionnés dynamiquement sont gérés par le pilote CSI : vous ne pouvez pas les supprimer vous-même après la suppression du PV, et une politique de récupération Retain les laisse en place pour un nettoyage manuel.

Déroulement de l'implémentation DCD

Vous allez créer fc-k8s-portal avec des pools de nœuds publics à Francfort, un pool Dedicated Core par zone sur le LAN fc-app, et le connecter à fc-alb-edge. Cela met en œuvre l'option ALB-in-front de la section 1.2.

Prérequis : le privilège Create Kubernetes Clusters (ou le rôle Administrateur) ; le VDC fc-prod-fra-core avec le LAN fc-app (Unité 3.1) ; l'ALB fc-alb-edge (Unité 3.3) ; un bucket Object Storage existant pour les journaux d'audit, ici fc-k8s-audit-fra (Unité 5.2) ; une adresse IPv4 réservée à Francfort pour le champ Reserved IP address du pool de nœuds, réservée sous Menu > Network Services > IP Management.

Objectif de construction : Construire un cluster public de bout en bout.

Étapes (dans Data Center Designer) :

  1. Accédez à Menu > Containers > Managed Kubernetes et sélectionnez Create cluster. Saisissez le Name fc-k8s-portal et sélectionnez la Kubernetes version. Choisissez la dernière version stable, ce qui maximise le temps avant que le cluster n'atteigne sa fin de vie.
  2. Sous Location and network access, sélectionnez Public en tant que Node pool access et Frankfurt am Main (de/fra) en tant que Location. Aucun des deux ne peut être modifié ultérieurement, et l'accès au pool de nœuds ne peut pas basculer entre public et privé.
  3. Sous Additional settings, activez Audit logging et saisissez fc-k8s-audit-fra en tant que Target Object Storage bucket. Dans Allowed IPs, saisissez la plage d'adresses à partir de laquelle FinCorp administre le cluster ; un champ vide autorise l'accès API depuis n'importe où. Définissez le Day et le Start time (UTC) de la Maintenance window sur la fenêtre de modification de FinCorp.
  4. Sélectionnez Create cluster. Le statut reste Deploying jusqu'à la création du cluster ; ajoutez des pools de nœuds une fois qu'il est Active.
  5. Sélectionnez le cluster, ouvrez l'onglet Node pools et sélectionnez Add node pool. Saisissez le Node pool name fc-np-portal-z1, la Kubernetes version, le Virtual data center fc-prod-fra-core et l'Reserved IP address. Sous Node count, sélectionnez Auto-scale avec un Minimum de 2 et un Maximum dans la recommandation de 20 nœuds.
  6. Sous Connection via private LAN, sélectionnez le LAN fc-app et gardez DHCP activé. Les pools de nœuds ne peuvent rejoindre que des LAN privés, et ils obtiennent leur adresse LAN via DHCP.
  7. Sous Node template, gardez le Server type Dedicated Core, sélectionnez les Cores et la RAM (GB), définissez la Availability zone sur Zone 1, choisissez Performance en tant que Storage type et définissez la Storage size (GB). À l'exception du type de serveur, ces paramètres ne peuvent pas être modifiés après la création.
  8. Sous Advanced settings, ajoutez le Label nodepool=portal et définissez la Maintenance window du pool. Sélectionnez Create node pool. Répétez les étapes 5 à 8 pour fc-np-portal-z2 dans la Zone 2.
  9. Ouvrez l'onglet Security du cluster, sélectionnez Visible to Groups et donnez à fc-prod-platform-ops la case à cocher Edit (Unité 2.2).
  10. Dans la liste des clusters, ouvrez la colonne OPTIONS et sélectionnez Download kubeconfig.yaml. Seuls les administrateurs peuvent récupérer le kubeconfig avant qu'un pool de nœuds n'existe.
  11. Avec kubectl, appliquez la classe de stockage ci-dessous, puis installez le contrôleur d'ingress avec un service de type NodePort sur les nœuds étiquetés nodepool=portal.
  12. Accédez à Menu > Network Services > Target Groups et créez fc-tg-k8s avec les adresses fc-app des nœuds et le port d'ingress des nœuds, avec Health Check Enabled. Sur fc-alb-edge, ajoutez une règle Forward pour l'hôte ou le chemin du cluster vers fc-tg-k8s, comme dans l'Unité 3.3.

La classe de stockage porte la décision de zone. Ses parameters proviennent de l'exemple documenté du pilote CSI ; le nom et la zone correspondent au premier pool de FinCorp :

apiVersion: storage.k8s.io/v1
kind: StorageClass
metadata:
  name: fc-performance-zone-1
provisioner: cloud.ionos.com
parameters:
  type: Performance
  fstype: ext4
  availabilityZone: ZONE_1
volumeBindingMode: WaitForFirstConsumer
allowVolumeExpansion: true

Erreurs courantes :

  • S'attendre à ce qu'un manifeste type: LoadBalancer crée une ALB ou une NLB. Il associe une IP statique à un nœud ; l'ALB est créée séparément.
  • Laisser Kubernetes réserver l'IP d'entrée. Sans loadBalancerIP pré-réservée, l'adresse est libérée lorsque le service est supprimé, et le DNS est rompu.
  • Considérer la liste des cibles de l'ALB comme statique. La maintenance remplace les nœuds un par un, il faut donc vérifier les cibles de fc-tg-k8s après chaque maintenance, ou automatiser leur mise à jour.
  • Modifier les serveurs de nœuds, les NIC ou les volumes dans le Workspace. Les ressources gérées par Kubernetes sont affichées en lecture seule, et une intervention manuelle pendant le provisionnement des nœuds peut entraîner des résultats indésirables.
  • S'attendre à ce qu'un seul pool couvre deux zones. La zone de disponibilité fait partie du modèle ; la redondance de zone nécessite un pool par zone.
  • Laisser Allowed IPs vide sur un cluster de production. L'API Kubernetes est alors accessible depuis n'importe où.
  • Installer un outil d'admission webhook tel que Kyverno ou OPA/Gatekeeper avant que le cluster n'ait de nœuds de travail. Ses pods ne peuvent pas être planifiés, ce qui peut bloquer la création des nœuds.

Résumé

Un cluster public est exposé soit par un contrôleur d'entrée sur des IP réservées, soit par l'ALB placé devant lui ; FinCorp utilise l'ALB, de sorte que le cluster rejoint l'edge existant en tant que groupe de cibles. Le processus de construction corrige d'abord les choix irréversibles, l'accès public et de/fra, puis ajoute un pool Dedicated Core par zone sur fc-app, une classe de stockage prenant en compte les zones et une liste d'autorisation API.

Points clés :

  • L'accès et l'emplacement des pools de nœuds sont fixés à la création du cluster ; le modèle d'un pool, à l'exception de son type de serveur, est fixé à la création du pool.
  • Réservez les IP d'entrée dans la gestion des IP afin qu'elles subsistent après la suppression d'un service.
  • L'ALB est provisionné séparément et cible les nœuds sur un LAN privé partagé via le port de nœud du contrôleur d'entrée.
  • Utilisez les classes de stockage WaitForFirstConsumer avec le provisionneur cloud.ionos.com, une par zone.
  • Configurez la journalisation d'audit, les IP autorisées et la fenêtre de maintenance à la création.