Aller au contenu
Epsight
Article techniqueEpsight Infra. & Modern Workplace

Proxmox VE et stockage : comment bâtir une infrastructure virtuelle performante et résiliente

Sur Proxmox VE, l’hyperviseur est rarement le facteur limitant : c’est le stockage qui fait la performance, la tolérance aux pannes et la facilité d’exploitation. Voici comment choisir le bon backend, le dimensionner et éviter les erreurs qui coûtent cher en production.

Par Emmanuel, Directeur GénéralPublié le Mis à jour le 8 min de lecture
L’essentiel
  • Le choix du backend (fichier ou bloc, local ou partagé) conditionne les snapshots, la haute disponibilité et les performances des VM.
  • En local, ZFS en volumes (zvol) est le meilleur compromis fiabilité et fonctionnalités ; LVM-Thin reste le plus simple et le plus léger.
  • En cluster, la haute disponibilité impose un stockage partagé ou distribué : Ceph pour l’hyperconvergé, une baie iSCSI ou Fibre Channel pour le SAN existant.
  • Les erreurs les plus fréquentes : QCOW2 sur dataset ZFS, pool mal conçu au départ, réseau Ceph sous-dimensionné, mémoire ARC non maîtrisée.
Public
DSI, architectes et administrateurs d’infrastructure
Niveau
Intermédiaire à avancé
Version de référence
Proxmox VE 9
Hors périmètre
Stockage objet et sauvegarde (Proxmox Backup Server)

Pourquoi le stockage décide de tout#

Proxmox VE s’est imposé comme l’alternative crédible aux hyperviseurs propriétaires : open source, sans licence par cœur, avec haute disponibilité, migration à chaud et sauvegarde intégrées. Mais la qualité d’une plateforme virtualisée se joue sous la VM. Un mauvais choix de stockage se paie en latence sur les bases de données, en snapshots impossibles, en reconstructions interminables après une panne disque, ou en cluster incapable de redémarrer une VM ailleurs.

Proxmox VE distingue deux familles de stockage :

  • Le stockage en mode fichier : répertoire local, NFS, SMB/CIFS, CephFS, dataset ZFS. Les disques des VM y sont des fichiers (RAW ou QCOW2).
  • Le stockage en mode bloc : LVM, LVM-Thin, volumes ZFS (zvol), iSCSI, Ceph RBD. Chaque disque de VM est un volume dédié, sans couche de fichiers intermédiaire.

Ce choix a des conséquences directes sur quatre points : la performance d’entrées-sorties, la possibilité de faire des snapshots et des clones, la tolérance aux pannes et à la corruption silencieuse, et la capacité à partager le stockage entre les nœuds d’un cluster.

ZFS : la référence pour la fiabilité#

ZFS est à la fois un gestionnaire de volumes et un système de fichiers. Il est intégré nativement à Proxmox VE et reste notre choix par défaut pour le stockage local des hôtes.

  • Copy-on-write et sommes de contrôle : chaque bloc est vérifié à la lecture ; une corruption silencieuse est détectée et corrigée à partir de la redondance. Un scrub périodique contrôle l’ensemble du pool.
  • Snapshots et clones instantanés, sans impact notable sur les performances.
  • Redondance intégrée : miroir (l’équivalent du RAID 1 ou 10) ou RAID-Z1, Z2, Z3, sans carte RAID matérielle.
  • Compression à la volée (LZ4 ou ZSTD) qui réduit le volume écrit et améliore souvent les performances.
  • Réplication entre nœuds : la fonction de réplication de Proxmox VE envoie les différences de snapshots ZFS vers un autre nœud à intervalle régulier.

Zvol plutôt que QCOW2 sur dataset

Stocker des fichiers QCOW2 dans un dataset ZFS empile deux mécanismes copy-on-write : celui du format QCOW2 et celui de ZFS. Le résultat est une amplification d’écriture et une latence plus élevée, sans bénéfice fonctionnel puisque ZFS fournit déjà snapshots et clones. Le stockage « ZFS » de Proxmox VE crée des zvol, c’est-à-dire des volumes en mode bloc : c’est la configuration à privilégier.

Mémoire, ARC et conception du pool

ZFS utilise la mémoire vive comme cache de lecture (ARC). La documentation Proxmox recommande comme ordre de grandeur 2 Go de base plus 1 Go par To de stockage brut, et sur les installations récentes l’ARC est limité par défaut à 10 % de la mémoire. Sur un hôte de virtualisation, il faut fixer explicitement cette limite pour ne pas entrer en concurrence avec la mémoire des VM.

Bashnœud Proxmox VE
# Limiter l’ARC ZFS à 16 Go (valeur en octets)echo "options zfs zfs_arc_max=17179869184" > /etc/modprobe.d/zfs.confupdate-initramfs -u -k all # Vérifier l’état et la santé du poolzpool status -xzpool list -o name,size,alloc,free,frag,health

LVM-Thin : simple, léger et efficace#

LVM-Thin est le stockage installé par défaut sur un nœud Proxmox VE sans ZFS. Il fournit du provisionnement fin (l’espace n’est consommé qu’à l’écriture), des snapshots et un accès direct en mode bloc, avec une très faible consommation de ressources.

Sa limite est structurelle : un volume LVM-Thin n’est visible que par le nœud qui l’héberge. Il convient parfaitement à un serveur seul, à des VM non critiques ou à un environnement de test, mais il ne permet pas à lui seul la haute disponibilité. Il faut aussi surveiller le remplissage du pool : un pool thin plein suspend les écritures de toutes les VM qui l’utilisent.

Stockage partagé et haute disponibilité#

Dans un cluster, la haute disponibilité suppose que chaque nœud puisse démarrer n’importe quelle VM, donc accéder à ses disques. Trois approches couvrent l’essentiel des besoins.

Ceph RBD : l’hyperconvergé

Ceph répartit les données sur les disques de tous les nœuds et les réplique, en général en trois exemplaires. Il est intégré à Proxmox VE et administrable depuis son interface. C’est la solution naturelle d’une infrastructure hyperconvergée : pas de baie à acheter, une capacité qui croît avec les nœuds, une tolérance native à la perte d’un disque ou d’un serveur.

  • Minimum : trois nœuds, idéalement quatre ou plus pour garder de la marge pendant une maintenance.
  • Réseau dédié au stockage, en 10 Gbit/s au strict minimum et de préférence 25 Gbit/s ou plus, redondé.
  • Disques SSD ou NVMe de classe entreprise, avec protection contre les coupures de courant ; un OSD par disque.
  • Réplication à trois copies avec un minimum de deux copies disponibles pour accepter les écritures.

SAN iSCSI ou Fibre Channel avec LVM partagé

Une baie existante peut être présentée à tous les nœuds et exploitée en LVM partagé, avec multipathing. C’est la voie la plus directe pour réutiliser un SAN lors d’une sortie de VMware. Historiquement, ce mode ne permettait pas les snapshots de VM ; Proxmox VE 9 a introduit des snapshots sur LVM partagé, encore en aperçu technologique à valider sur un périmètre de test.

ZFS over iSCSI et NFS

Le mode ZFS over iSCSI pilote, depuis Proxmox VE, des zvol sur un serveur de stockage distant compatible : on conserve les snapshots ZFS avec un stockage partagé. Le NFS reste une option simple pour des volumes peu sollicités, des modèles ou des images ISO, mais il est rarement le meilleur choix pour des bases de données exigeantes.

Quel stockage pour quel besoin#

BesoinBackend conseilléPourquoi
Serveur seul, VM non critiquesLVM-ThinSimple, léger, snapshots disponibles
Serveur seul, données importantesZFS miroir (zvol)Intégrité des données, compression, snapshots
Deux à trois nœuds, budget contenuZFS + réplication ProxmoxReprise rapide sur un autre nœud, perte limitée à l’intervalle de réplication
Cluster haute disponibilité, croissance prévueCeph RBDStockage distribué, pas de baie, tolérance aux pannes native
SAN existant à réutiliserLVM partagé sur iSCSI ou FCReprise de l’investissement, migration plus rapide
Images ISO, modèles, archivesNFS ou CIFSPartage simple entre nœuds
Repères généraux : le bon choix dépend aussi des applications, des objectifs de reprise et des compétences de l’équipe d’exploitation.

Les réglages qui font la différence#

  • Contrôleur VirtIO SCSI single avec IO thread sur chaque disque de VM, pour paralléliser les entrées-sorties.
  • Discard activé sur les disques des VM et TRIM planifié dans les systèmes invités, pour restituer l’espace aux pools thin et à Ceph.
  • Pilotes VirtIO installés dans les VM Windows avant toute mise en production.
  • Cache disque par défaut (aucun cache côté hôte) sauf besoin justifié : les modes avec cache d’écriture exposent à des pertes en cas de coupure.
  • Supervision de la latence, du taux de remplissage des pools, de l’état SMART des disques et de la santé Ceph, avec alertes.
  • BTRFS réservé aux environnements de test : son intégration dans Proxmox VE reste en aperçu technologique.

Retour d’expérience : d’Hyper-V à un cluster Proxmox VE et Ceph#

Retour d’expérience

Contexte. Une PME de 120 salariés exploitait plusieurs serveurs Hyper-V indépendants et vieillissants, qui hébergeaient toutes ses applications critiques : infrastructure, serveurs applicatifs et bases de données. Aucune haute disponibilité, un point de défaillance unique par serveur, des sauvegardes longues et des restaurations incertaines.

Objectifs. Haute disponibilité pour toutes les VM, tolérance à la perte d’un disque ou d’un serveur, maîtrise des coûts et exploitation simplifiée.

Ce que nous avons mis en place. Un cluster Proxmox VE de trois nœuds avec stockage hyperconvergé Ceph RBD sur SSD, sur des serveurs reconditionnés certifiés à double alimentation, une architecture sans point de défaillance unique, et un plan de reprise appuyé sur une sauvegarde S3 immuable hors site. L’équipe interne a été formée à l’exploitation de la plateforme.

Résultats. Basculement automatique des VM en cas de panne d’un serveur, aucune interruption de service constatée sur douze mois d’exploitation, des performances doublées sur la base SQL et l’ERP, et un investissement réduit de 45 % par rapport à une solution neuve équivalente. La capacité augmente simplement en ajoutant des nœuds.

Questions fréquentes#

Faut-il obligatoirement Ceph pour la haute disponibilité ?

Non. Un SAN iSCSI ou Fibre Channel partagé permet aussi la haute disponibilité. Pour deux ou trois nœuds sans stockage partagé, la réplication ZFS de Proxmox VE offre une reprise rapide, avec une perte de données limitée à l’intervalle de réplication.

Peut-on réutiliser la baie de stockage d’une infrastructure VMware ?

Oui, la plupart des baies iSCSI ou Fibre Channel se présentent à Proxmox VE en LVM partagé. Il faut vérifier la compatibilité multipath et la stratégie de snapshots, qui diffère de celle de VMFS.

Combien de mémoire prévoir pour ZFS ?

Comme ordre de grandeur, 2 Go de base plus 1 Go par To de stockage brut, en limitant explicitement la taille de l’ARC sur les hôtes de virtualisation pour préserver la mémoire des VM.

ZFS ou Ceph pour un petit cluster ?

À trois nœuds, Ceph apporte la vraie haute disponibilité mais demande un réseau dédié rapide et des SSD de qualité. Si ces conditions ne sont pas réunies, ZFS avec réplication est souvent plus robuste et plus simple à exploiter.

Sources#

  1. Proxmox VE, documentation du stockage (pvesm)
  2. Proxmox VE, ZFS on Linux
  3. Proxmox VE, documentation Ceph (pveceph)
  4. Proxmox VE, réplication du stockage (pvesr)
  5. OpenZFS 2.3.0, notes de version (extension RAID-Z)
Pas encore prêt pour un échange ?Chaque mois, un retour d’expérience terrain sur la sauvegarde, le cloud, la cybersécurité ou l’IA. Désinscription en un clic.