¶ Cadrage lab CEPH
¶ Objectif
L'objectif ici est de construire un lab de démo de la mise en place d'un stockage CEPH. Il doit permettre :
- De comprendre le fonctionnement de CEPH et les prérequis de son fonctionnement;
- De dérouler une installation complète sur 3 noeuds;
- D'appréhender l'administration de CEPH via CEPH ADM;
- de consommer le stockage CEPH à partir d'une 4ième machine virtuelle.
¶ Cadrage
Le lab fonctionnera sur un hôte Ubuntu 24.04-3. Il exploitera des machine virtuelle basée sur KVM (virtsh). Il s'appuiera sur une version stable de CEPH.
Il s'articulera autour de 3 machines virtuelles :
- VSTOCK01
- VSTOCK02
- VSTOCK03
Les machines virtuelles auront la configuration suivante :
- Ubuntu server 24.04-3
- 2 VCPU
- 4Go de mémoire vive
- 1 disque principal de 15Go pour le système
- 2 disques CEPH de 10Go
- 1 interface réseau pour l'administration et l'utilisation. Cette interface sera connectée sur le réseau d'hôte LAN INTERNE INFRA de kvm;
- accès admin, clients, API, dashboard, CLI
- 1 interface réseau dédié aux échanges entre les noeuds du cluster. Cette interface sera connectée sur le réseau d'hôte LAN OP CEPH de kvm;
- réplication, heartbeat, recovery, backfill
Pour fonctionner, une VM déjà configurée, appelée passerelle permettra aux VM d'accéder à internet. Les VM auront la configuration réseau suivante :
- VSTOCK01 :
- Interface LAN INTERNE INFRA : 192.168.50.31 - 255.255.255.0
- Interface LAN OP CEPH : 192.168.120.1 - 255.255.255.0
- Passerelle par défaut : 192.168.50.254
- DNS : 192.168.2.20
- VSTOCK02 :
- Interface LAN INTERNE INFRA : 192.168.50.32 - 255.255.255.0
- Interface LAN OP CEPH : 192.168.120.2 - 255.255.255.0
- Passerelle par défaut : 192.168.50.254
- DNS : 192.168.2.20
- VSTOCK03 :
- Interface LAN INTERNE INFRA : 192.168.50.33 - 255.255.255.0
- Interface LAN OP CEPH : 192.168.120.3 - 255.255.255.0
- Passerelle par défaut : 192.168.50.254
- DNS : 192.168.2.20
Une machine cliente, SRVCLI01, sur ubuntu 24.04-3 sera également mise en place pour réaliser les tests. Elle aura la configuration suivante :
- Ubuntu server 24.04-3
- 2 VCPU
- 4Go de mémoire vive
- 1 disque principal de 15Go pour le système
- 1 interface réseau pour l'administration et l'utilisation. Cette interface sera connectée sur le réseau d'hôte LAN INTERNE INFRA de kvm;
Elle aura la configuration réseau suivante :
- SRVCLI01:
- Interface LAN INTERNE INFRA : 192.168.50.40 - 255.255.255.0
- Passerelle par défaut : 192.168.50.254
- DNS : 192.168.2.20
¶ Ce qui sera réalisé
La présente documentation s'attachera à réaliser les opérations suivantes :
- installation via dépôts Ceph
- mise en place des services systemd natifs :
ceph-monceph-osdceph-mgrceph-mds
- configuration explicite de CEPH-ADM
¶ Ce qui sera consommé et testé
Les services CEPH seront testés et consommés sur les aspects suivants :
- CephFS (montage POSIX)
- RBD (map d’un volume bloc)
¶ Distribution des rôles CEPH sur les noeuds du cluster
Dans son fonctionnement minimal, CEPH s'appuie sur 4 principaux rôles portés par les noeuds du cluster :
|
Rôles |
Objectifs |
| MON — Monitor |
Les MON assurent :
|
| MGR — Manager |
Le MGR fournit :
|
| OSD — Object Storage Daemon |
Chaque OSD :
|
| MDS — Metadata Server |
Le MDS gère :
|
Dans ce lab, les rôles CEPH sont distribués sur l’ensemble des nœuds.
Il n’existe pas de serveur maître : chaque nœud participe au fonctionnement global du cluster, avec des rôles complémentaires et redondés lorsque nécessaire.
| Nœud | MON | MGR | OSD | MDS |
|---|---|---|---|---|
| VSTOCK01 |
✅ |
✅ |
✅ |
✅ |
| VSTOCK02 |
✅ |
✅ stand-by |
✅ |
❌ |
| VSTOCK03 |
✅ |
❌ |
✅ |
❌ |
¶ Schéma d'infrastructure cible
