Unidad 5.5: Base de datos en memoria (capa de caché)
Introducción
Dos decisiones anteriores crearon una brecha que esta unidad cierra. La unidad 5.3 demostró que los standby de PostgreSQL no sirven lecturas, por lo que la capacidad de lectura debe provenir de una fuente distinta a los nodos de base de datos. La unidad 4.3 demostró que VM Auto Scaling agrega y elimina réplicas, por lo que las sesiones y el estado compartido no pueden residir en una sola réplica. Ambas necesidades apuntan al mismo componente: un almacén de memoria compartida en la red privada.
DBaaS for In-Memory DB es un almacén de datos en memoria con pares clave-valor totalmente administrado, basado en Valkey y compatible con la API de Redis OSS. Es adecuado para datos a los que se accede con frecuencia y que rara vez cambian, y, como caché, reduce las consultas que llegan a la base de datos central. En esta unidad se diseña cómo la aplicación lo utiliza y cómo se configura el clúster, y luego se construye la capa de caché de FinCorp en el DCD.
1. La capa de caché en la arquitectura
1.1 Dos funciones, un almacén
La capa de caché realiza dos funciones distintas. Como caché de lectura, almacena resultados que la base de datos tendría que volver a calcular: catálogos de productos, vistas de perfiles de clientes y datos de referencia. Perderla conlleva una pérdida de rendimiento, no de corrección. Como almacén de estado, conserva datos de sesión y contadores compartidos para la capa de cómputo. Perderla desconecta a los usuarios o restablece el estado. Ambas funciones requieren configuraciones de persistencia y de expulsión diferentes, por lo que debe decidir, para cada familia de claves, qué función sirve.
1.2 Cache-aside o Write-through
La aplicación, no la plataforma, decide cómo se mantienen consistentes la caché y la base de datos.
| Patrón | Cómo funciona | Ventajas | Desventajas | Adecuado para |
|---|---|---|---|---|
| Cache-aside | La aplicación lee la caché; si no hay coincidencia, lee PostgreSQL y escribe el resultado en la caché con un tiempo de vida (TTL) | Solo se cachean los datos solicitados; una interrupción de la caché degrada el sistema a lecturas de la base de datos | La primera lectura tras un cambio o una expiración es lenta; los datos quedan obsoletos hasta que finalice el TTL o se elimine la clave | Datos con predominio de lecturas que toleran una obsolescencia breve |
| Write-through | La aplicación escribe en PostgreSQL y, a continuación, actualiza o elimina la clave de la caché en la misma ruta de código | La caché se mantiene actualizada para las claves escritas | Cada escritura requiere dos viajes de ida y vuelta; debe gestionarse una actualización fallida de la caché | Datos que se leen inmediatamente después de ser escritos |
FinCorp utiliza cache-aside con TTL para las vistas de catálogos y perfiles, y elimina la clave del perfil en la misma ruta de código que escribe el perfil, de modo que un cliente nunca vea su propio cambio con retraso. La base de datos se mantiene como el sistema de registro en ambos patrones.
1.3 Colocación en la red privada
Los clústeres de DBaaS se conectan únicamente a redes privadas, y un clúster de In-Memory DB tiene una conexión de red a una LAN de un VDC. FinCorp lo coloca en fc-data junto a PostgreSQL, donde los servidores del portal ya tienen una segunda NIC (Unidad 5.3), de modo que la caché no añade ninguna nueva ruta de red. Los clientes se conectan a través del nombre de DNS del clúster, que apunta a la instancia principal. La comunicación se protege con TLS cuando el cliente lo utiliza; la autoridad de certificación es Let's Encrypt.
2. Configuración del Cluster
2.1 Instancias y Failover
Un cluster tiene de 1 a 5 instancias: una instancia crea una instancia independiente, y de 2 a 5 instancias crean una primaria con secundarias pasivas. La replicación es siempre asíncrona, por lo que un failover puede perder escrituras que solo tenía la primaria. Las secundarias son pasivas: al igual que los standbys de PostgreSQL, añaden disponibilidad, no rendimiento de lectura, por lo que la capacidad de lectura proviene de los núcleos y la RAM de la primaria. IONOS CLOUD recomienda un mínimo de tres instancias para producción.
El failover es automático: cuando la primaria falla, se promociona una réplica. No hay Sentinel; durante un conmutado planificado, la dirección IP de la primaria se transfiere a la réplica promocionada, y el servidor cierra la conexión TCP para que el cliente se reconecte. Utilice una biblioteca de cliente que se reconecte por sí sola, y considere normal un breve aumento de fallos de caché después de un failover.
Una ventana de mantenimiento es obligatoria. Durante ella, pueden producirse cortas y ocasionales interrupciones. La ventana es su hora de inicio más cuatro horas; si no establece ninguna, el mantenimiento puede realizarse en cualquier momento de lunes a viernes entre las 7:00 AM y las 5:00 PM.
2.2 Persistencia
El modo de persistencia determina qué sobrevive a un reinicio:
| Modo | Comportamiento | Almacenamiento derivado |
|---|---|---|
| In-Memory | Los datos están solo en memoria y no se persisten | 1 x RAM |
| AOF (Append Only File) | Cada operación de escritura se registra | 2 x RAM |
| RDB | Instantáneas periódicas del estado en memoria en un punto en el tiempo | 2 x RAM |
| RDB y AOF | Ambos mecanismos activos | 4 x RAM |
Con la configuración predeterminada de RDB, se escribe un Snapshot cada hora después de un solo cambio, cada cinco minutos después de al menos 100 escrituras, y cada minuto después de al menos 10.000 escrituras; los datos escritos desde el último Snapshot pueden perderse. Una caché de solo lectura puede ejecutarse en modo In-Memory, porque la base de datos puede reponerla. Un almacén de estado necesita AOF o RDB y AOF. El almacenamiento en bloques se deriva de la RAM y la persistencia; no se puede configurar manualmente ni reducirse.
2.3 Expulsión y dimensionamiento
Cuando la memoria alcanza su límite, la política de expulsión decide qué sucede: noeviction, allkeys-lru, allkeys-lfu, allkeys-random, volatile-lru, volatile-lfu, volatile-random o volatile-ttl. Las políticas allkeys-* pueden expulsar cualquier clave, lo cual es adecuado para una caché pura. Las políticas volatile-* expulsan solo claves que tienen una expiración establecida, lo que protege a las claves que no la tienen. noeviction rechaza nuevas escrituras en su lugar.
Una instancia tiene entre 1 y 62 núcleos de CPU dedicados y entre 4 y 240 GB de RAM, dentro de su cuota. La RAM no puede degradarse después de que se crea el cluster, por lo que comience con un conjunto de trabajo medido más un margen de seguridad y crezca, en lugar de comenzar con un tamaño grande.
La configuración de FinCorp se deriva de la Sección 1.1. Las entradas de caché llevan un TTL; las entradas de sesión no llevan ninguno y se eliminan mediante el portal al cerrar sesión y mediante su limpiador de sesiones. Con volatile-lru, la presión de memoria expulsa primero las entradas de caché y nunca una sesión. La persistencia AOF mantiene las sesiones a través de un reinicio.
2.4 Snapshots y restauración
Los Snapshots se envían a una ubicación de Object Storage que usted elija, en una o más horas del día (UTC), con una retención entre 1 y 365 días y un valor predeterminado de 7. Una restauración utiliza el Snapshot más cercano tomado en o antes de la hora elegida: no hay recuperación continua en un punto en el tiempo. Solo se pueden restaurar Snapshots de clusters en la misma región. Para una caché, los Snapshots rara vez se restauran; para un almacén de estado, limitan lo que una catástrofe pierde.
Recorrido de implementación de DCD
Creará la capa de caché y sesiones de FinCorp fc-imdb-portal en fc-data dentro de fc-prod-fra-core, con tres instancias, persistencia AOF y expulsión volatile-lru, y luego dirigirá el portal hacia ella. Esto materializa la capa de lectura de la Sección 1 y la configuración de la Sección 2.
Requisitos previos: el VDC fc-prod-fra-core con la LAN fc-data y al menos una VM en ella; una cuenta con el privilegio Access and manage DBaaS; la dirección .3 en fc-data reservada para el Cluster; el Cluster PostgreSQL fc-pg-portal de la Unidad 5.3.
Objetivo de construcción: Aprovisionar la caché y configurarla como una capa de lectura a través (read-through).
Pasos (en el Data Center Designer):
- Vaya a Menu > Databases > In-Memory DB y seleccione Create cluster.
- En Properties, introduzca el Cluster name
fc-imdb-portaly seleccione Frankfurt como Location. La ubicación no puede cambiarse después de la creación. - En Cluster configuration, seleccione la
Versione introduzca3Instances. Replication Type muestra Asynchronous y CPU Type muestra Dedicated Core. - Establezca Persistence en AOF (Append Only File) y Eviction Policy en
volatile-lru. - En Snapshot, seleccione una Location de Object Storage fuera de Frankfurt, un valor de Retention days y al menos una entrada de Snapshot Hours fuera de las horas de mayor tráfico.
- En Instance configuration, establezca el Number of CPUs y el RAM Size por instancia a partir del conjunto de trabajo medido. La RAM no puede reducirse posteriormente.
- En Network configuration, seleccione
fc-prod-fra-core, la VDC LANfc-data, e introduzca la dirección.3en notación CIDR como Private IP address. - En Maintenance Period, seleccione un Day y una Start Time (UTC). No lo deje vacío.
- En User Creation, introduzca el Username y la Password para la identidad de servicio del portal.
- Seleccione Save. Cuando el estado sea Available, copie el DNS name de los detalles del Cluster.
- En la configuración del portal, establezca el endpoint de la caché en ese nombre DNS con TLS, establezca TTLs en las claves de catálogo y perfil, e implemente la ruta de lectura cache-aside y la eliminación de claves en la ruta de escritura del perfil.
Errores comunes:
- Enviar lecturas a los secundarios. Son pasivos; escale el primario en su lugar.
- Usar
allkeys-lrupara un almacén que también mantiene sesiones. La presión de memoria entonces cierra las sesiones de los usuarios. - Ejecutar un almacén de sesiones con persistencia In-Memory. Una reiniciación pierde todas las sesiones.
- Comenzar con un tamaño de RAM grande "para estar seguro". La RAM no puede degradarse.
- Dejar la ventana de mantenimiento vacía. El mantenimiento puede entonces caer en horas de trabajo.
Resumen
La capa de caché es lo que hace posible el patrón sin réplica de lectura y el escalado automático seguro: la base de datos se mantiene como el sistema de registro, In-Memory DB atiende las lecturas repetidas y conserva el estado compartido. Decida por cada familia de claves si se trata de caché o de estado, y luego configure la persistencia y la expulsión de forma coherente. Las secundarias son pasivas y asíncronas, la RAM solo aumenta, y las restauraciones se realizan a partir de instantáneas, no de recuperación continua.
Puntos clave:
- In-Memory DB es solo privado, con una conexión LAN, y se accede a través del nombre de DNS del primario.
- Los clústeres tienen de 1 a 5 instancias; las secundarias son pasivas y la replicación es asíncrona.
- Los modos de persistencia establecen el almacenamiento derivado entre 1 x y 4 x la RAM; el almacenamiento y la RAM no pueden reducirse.
- La expulsión
volatile-*protege las claves sin caducidad;allkeys-*es adecuada para una caché pura. - Las restauraciones utilizan la instantánea anterior más cercana; no existe recuperación continua en un punto en el tiempo.
Terminología importante:
- Cache-aside: un patrón en el que la aplicación rellena la caché ante un fallo y la caché nunca se comunica con la base de datos.
- Write-through: un patrón en el que cada escritura en la base de datos también actualiza o elimina la clave de la caché.
- Política de expulsión: la regla que determina qué claves se eliminan cuando la memoria está llena.