Tag: #proxmox

Boot EFI errato su proxmox



In questo articolo descrivo un caso reale di malfunzionamento EFI su un nodo Proxmox, dove il sistema avviava dalla partizione sbagliata invece che dalla ESP corretta. Questo causava avvii incoerenti, kernel non aggiornati e potenziali rischi di boot failure.

## Sintomi del problema

Il comando `efibootmgr -v` mostrava:

- BootCurrent: 0003 → avvio da fallback `BOOTX64.EFI`
- BootOrder: `0003,0004,0002,0000`
- Due ESP presenti:
  - **CE60** (GUID `0c569779-e73f-4c73-b97f-e8594cb4868d`)
  - **11A4** (GUID `40e24607-4ca2-4f4a-926c-7792a0f3dc72`)

La ESP corretta (CE60) conteneva:
- `Boot0002` → systemd‑boot (entry primaria)
- `Boot0004` → fallback `BOOTX64.EFI`

La ESP secondaria (11A4) conteneva:
- `Boot0000` → systemd‑boot
- `Boot0003` → fallback `BOOTX64.EFI`

Il problema era chiaro: il BIOS avviava dalla entry `0003`, cioè dalla fallback della ESP sbagliata.

## Analisi tecnica

Proxmox utilizza **systemd‑boot** e sincronizza i kernel nella ESP montata in `/boot/efi`.  
La partizione corretta era **CE60**, ma il BootOrder dava priorità alla fallback `0003`, portando il sistema a caricare `BOOTX64.EFI` invece dei kernel aggiornati.

## Soluzione

La soluzione è stata correggere l’ordine di boot, impostando:

1. `Boot0002` → CE60 systemd‑boot (primaria)
2. `Boot0004` → CE60 fallback
3. `Boot0003` → 11A4 fallback
4. `Boot0000` → 11A4 systemd‑boot

Comando utilizzato:

```bash
efibootmgr -o 0002,0004,0003,0000

Verifica dopo il riavvio

Dopo il reboot:

  • BootCurrent: 0002 → avvio corretto dalla ESP CE60
  • BootOrder: 0002,0004,0003,0000 → ordine sicuro e coerente

Il nodo ora avvia correttamente dalla ESP principale, con fallback attivi e una catena di sicurezza completa.

Conclusione

Il problema era causato da un BootOrder errato che privilegiava una fallback EFI invece della ESP principale. Correggendo l’ordine con efibootmgr, Proxmox torna a utilizzare i kernel aggiornati e garantisce un avvio stabile e sicuro. Questa procedura è utile in tutti i casi in cui Proxmox presenta avvii incoerenti o fallback EFI attivi come primaria.

Erorre EFI no space left on node proxmox

# Procedura adattata al mio nodo Proxmox per pulizia ESP e fix kernel

## 1. Verificare l’UUID della ESP
cat /etc/kernel/proxmox-boot-uuids
# Output nel mio caso:
# 67D6-E50C

## 2. Verificare quale device corrisponde all’UUID
ls -al /dev/disk/by-uuid/67D6-E50C
# Output nel mio caso:
# /dev/disk/by-uuid/67D6-E50C -> ../../nvme0n1p2
# La mia ESP è quindi /dev/nvme0n1p2

## 3. Montare manualmente la ESP
mkdir /tmp/myesp
mount /dev/nvme0n1p2 /tmp/myesp

## 4. Elencare i kernel presenti nella ESP
ll /tmp/myesp/*/*
# Qui individuo le directory dei kernel vecchi da rimuovere:
# /tmp/myesp/.../5.15.108-1-pve
# /tmp/myesp/.../6.2.16-5-pve

## 5. Rimuovere SOLO i kernel vecchi
rm -rf /tmp/myesp/*/*/5.15.108-1-pve
rm -rf /tmp/myesp/*/*/6.2.16-5-pve

## 6. Smontare la ESP
umount /tmp/myesp

## 7. Riparare dpkg e completare l’installazione del kernel
apt-get -f install

Eliminazione manuale (riveduta)

###############################################
# SEQUENZA CORRETTA PULIZIA ESP + RIMOZIONE KERNEL 6.x
# Adattata ESATTAMENTE a ciò che ha scritto l’utente
###############################################

echo "=== 1) Identifica ESP ==="
cat /etc/kernel/proxmox-boot-uuids
ls -al /dev/disk/by-uuid/B130-7F39   # -> ../../sda2

echo "=== 2) Monta ESP ==="
mkdir -p /tmp/myesp
mount /dev/sda2 /tmp/myesp

echo "=== 3) Elenca kernel presenti nell'ESP ==="
ls -l /tmp/myesp

echo "=== 4) Cancella TUTTI i kernel vecchi (serie 6.x) ==="
rm -f /tmp/myesp/initrd.img-6*
rm -f /tmp/myesp/vmlinuz-6*

echo "=== 5) Verifica che NON ci siano più file 6.x ==="
ls -l /tmp/myesp

echo "=== 6) Controlla spazio ESP ==="
df -h /tmp/myesp
du -ah /tmp/myesp

echo "=== 7) Smonta ESP ==="
umount /tmp/myesp

echo "=== 8) Ripara dpkg se necessario ==="
apt-get -f install

echo "=== 9) Rimuovi i kernel 6.x ==="
apt purge proxmox-kernel-6.*

echo "=== 10) Verifica kernel installati ==="
dpkg -l | grep proxmox-kernel

echo "=== 11) Verifica boot configuration ==="
proxmox-boot-tool status

echo "=== COMPLETATO ==="

Replica ZFS in Proxmox: perché lo spazio su disco sembra “esplodere”?

Molti utenti che iniziano a sperimentare la replica ZFS in ambienti Proxmox si trovano davanti a una situazione curiosa: una VM da 700 GB sembra occupare oltre 1,2 TB di spazio su ogni nodo. Ma come è possibile? In questo articolo analizziamo le cause reali, sfatiamo alcuni miti e offriamo strumenti pratici per monitorare e ottimizzare lo spazio.

🧠 Cos’è la replica ZFS in Proxmox?

La replica ZFS in Proxmox è un meccanismo che consente di copiare i dischi virtuali (vDisks) di una VM da un nodo a un altro, sfruttando le potenzialità di ZFS:

  • Replica incrementale basata su snapshot temporanei
  • Trasferimento solo dei blocchi modificati
  • Nessuna copia automatica del file .conf della VM (serve manualmente o via HA)

📦 Perché lo spazio occupato è maggiore della dimensione della VM?

1. Overhead ZFS

ZFS non memorizza solo i dati, ma anche:

  • Metadati per ogni blocco
  • Checksum per l’integrità
  • Struttura interna dei dataset
  • Intent log (ZIL) e cache (ARC/L2ARC)

Ogni disco virtuale è un dataset ZFS, quindi l’overhead si moltiplica.

2. Scritture reali vs spazio nominale

Una VM da 700 GB può scrivere molti più dati nel tempo (log, swap, file temporanei). ZFS conserva i blocchi modificati, anche se il file originale è stato cancellato.

3. Snapshot manuali

Se l’utente crea snapshot manuali e non li elimina, ZFS conserva i blocchi differenziali, aumentando lo spazio usato.

4. Snapshot di replica

Proxmox crea snapshot temporanei per la replica, con nomi tipo:

__replicate_<VMID>-<replicaID>_<timestamp>__

Questi snapshot non vengono conservati a lungo, ma se la replica è frequente o fallisce, possono accumularsi temporaneamente.

5. Compressione inefficace

Se ZFS ha compression=off o i dati sono poco compressibili (es. video, immagini), lo spazio occupato sarà vicino al reale.

🔍 Come analizzare lo spazio occupato

Ecco alcuni comandi utili da eseguire via terminale:

zfs get compression,compressratio rpool/data/subvol-100-disk-0

Verifica se la compressione è attiva e quanto è efficace.

zfs list -o name,used,refer,mountpoint

Confronta lo spazio totale usato con quello referenziato.

zfs get usedbysnapshots rpool/data/subvol-100-disk-0

Controlla quanto spazio è occupato dagli snapshot.

zfs list -t snapshot

Visualizza tutti gli snapshot attivi.

🧊 QCOW2 vs RAW: impatto sullo spazio

FormatoTipoSpazio inizialeSnapshotPerformance
QCOW2ThinSolo spazio usato✅Buona
RAWThickSpazio pieno❌Ottima

Su ZFS, anche i dischi RAW possono essere “thin” grazie alla compressione e ai blocchi sparsi, ma QCOW2 è nativamente più flessibile.

✅ Conclusione

Se vedi uno spazio ZFS occupato superiore alla dimensione della VM, non è un bug: è il risultato di come ZFS gestisce i dati, la replica e la protezione. Per tenere sotto controllo lo spazio:

  • Monitora gli snapshot manuali
  • Verifica la compressione
  • Analizza i blocchi modificati
  • Evita di duplicare VM con ID diversi che puntano agli stessi dischi

🦁 Fondamenti di Virtualizzazione: Tutto su Proxmox VE

1. Introduzione a Proxmox VE: Il Sistema Operativo Hyperconvergente

  • Cos’è: Proxmox Virtual Environment (VE) non è un semplice hypervisor, ma un sistema operativo completo basato su Debian Linux, progettato specificamente per la virtualizzazione enterprise.
  • Filosofia: Fornisce una piattaforma unificata, open-source e integrata per gestire macchine virtuali (VM) e container dallo stesso pannello di controllo web.
  • Modello di Distribuzione: Si installa direttamente sull’hardware server (bare-metal), posizionandosi tecnicamente nella categoria degli hypervisor Type 1.
  • Componenti Core: La sua potenza deriva dall’integrazione di due tecnologie:
    1. KVM (Kernel-based Virtual Machine): Per la virtualizzazione completa delle macchine virtuali.
    2. LXC (Linux Containers): Per la virtualizzazione leggera dei container.
  • Web Interface: Tutta la gestione avviene attraverso un’interfaccia web moderna (https://server-ip:8006), eliminando la necessità di software client dedicati su PC degli amministratori.

2. Architettura Tecnica e Componenti di Base

  • Base Solida: Poggia su un kernel Linux Debian stabilizzato e a lungo supporto, garantendo compatibilità hardware estrema e stabilità.
  • KVM (Kernel-based Virtual Machine):
    • Trasforma il kernel Linux in un hypervisor a tutti gli effetti (Type 1).
    • Utilizza le estensioni di virtualizzazione hardware della CPU (Intel VT-x o AMD-V) per ottenere performance native.
    • Gestisce direttamente l’accesso alla CPU e alla memoria delle VM.
    • Per l’I/O, può utilizzare:
      • Emulazione completa (e1000 per NIC, ide per dischi – lenta ma compatibile).
      • Paravirtualizzazione (virtio-net per NIC, virtio-blk per dischi – alta performance, richiede driver nel guest).
      • PCI Passthrough (VT-d/AMD-Vi) per assegnare hardware fisico direttamente a una VM.
  • LXC (Linux Containers):
    • Tecnologia di virtualizzazione a livello di sistema operativo.
    • I container condividono il kernel host, risultando in overhead quasi nullo, avvio istantaneo e densità molto elevata.
    • Ideale per servizi isolati che non richiedono un kernel personalizzato o driver specifici (es.: web server, database, reverse proxy, applicazioni in container).
  • Storage Management:
    • Supporta nativamente una vasta gamma di backend di storage:
      • Locale: ZFS (consigliato), LVM-Thin, Directory, XFS.
      • Di Rete: NFS, CIFS/SMB.
      • Shared/Cluster: Ceph (integrato nativamente), iSCSI, Fibre Channel.
    • ZFS Integration: Il supporto integrato per ZFS è un punto di forza, offrendo feature enterprise come copy-on-write, snapshot atomiche, compressione, deduplicazione e riparazione dei dati automatica (self-healing).
  • Networking:
    • Basato su Linux bridging e VLANs (802.1q).
    • Supporta Bonding/LAG (aggregazione di schede di rete) per ridondanza e aumento di banda.
    • Software-Defined Networking (SDN): Dalla versione 7.0, introduce un SDN nativo per gestire reti overlay (VXLan) e sotto-sistemi di rete più complessi in modo centralizzato.

3. Il Cuore del Cluster: High Availability e Gestione Centralizzata

  • Modello a Cluster:
    • Più nodi Proxmox (server fisici) possono essere uniti in un cluster tramite Corosync.
    • Il cluster appare come una singola entità gestibile dall’interfaccia web.
    • Tutte le configurazioni (VM, storage, rete) sono replicate in tempo reale tra i nodi.
  • High Availability (HA) Integrato:
    • Feature fondamentale per l’enterprise.
    • Se un nodo del cluster si spegne o ha un malfunzionamento hardware, le VM e i container contrassegnati come “HA” vengono automaticamente riavviati su un altro nodo del cluster in pochi secondi/minuti.
    • Il sistema monitora lo stato dei nodi e delle VM e prende decisioni senza intervento umano.
  • Live Migration:
    • Migrazione a Caldo (Live Migration): Permette di spostare una VM in esecuzione da un nodo all’altro senza downtime percepibile. Essenziale per la manutenzione dell’hardware e il bilanciamento del carico.
    • Migrazione delle Storage: Permette di spostare i dischi di una VM (anche in esecuzione) da uno storage backend a un altro (es.: da storage locale a Ceph).

4. Vantaggi Chiave di Proxmox VE

  1. Open Source e Costo Zero: La licenza è GNU AGPL, v3. Non ci sono costi di licensing per le funzionalità core. Il modello di subscription esiste solo per l’accesso ai repository enterprise stabili e al supporto tecnico.
  2. Ecosistema Completo: Tutto ciò che serve è integrato: virtualizzazione, storage (ZFS, Ceph), networking, clustering, HA. Niente più “vendor lock-in” o integrazioni complesse tra software diversi.
  3. Alta Performance: L’uso di KVM e LXC garantisce performance pari o molto vicine al bare-metal.
  4. Flessibilità Operativa: La scelta tra VM (per carichi di lavoro che necessitano di un OS completo) e Container (per leggerezza e densità) offre la massima flessibilità di deployment.
  5. Gestione Unificata: L’interfaccia web centrale semplifica enormemente la gestione di intere infrastrutture, riducendo la curva di apprendimento e gli errori di configurazione.
  6. Comunità Attiva e Supporto Enterprise: Una vasta comunità offre supporto gratuito nei forum. Per ambienti critici, è disponibile un supporto professionale a pagamento.

5. Considerazioni e Best Practices

  • Hardware Consigliato:
    • CPU: 64-bit (x86-64) con supporto per virtualizzazione hardware (Intel VT-x/AMD-V). Per il PCI Passthrough, serve IOMMU (Intel VT-d/AMD-Vi).
    • RAM: Più è, meglio è. Calcolare il bisogno per l’OS host + (RAM per VM) + (RAM per Ceph/ZFS se usati).
    • Storage: SSD NVMe sono fortemente consigliati per disco di sistema e per le VM. Gli HDD sono adatti solo per storage di archivio.
    • Rete: Schede multiporta Gigabit o, meglio, 10Gbps+ sono essenziali per il traffico di migrazione, Ceph e VM.
  • Pianificazione dello Storage:
    • ZFS locale è un’ottima scelta per un singolo nodo o per un cluster con storage non condiviso.
    • Ceph è la soluzione per creare un storage iper-convergente e ridondante distribuito su più nodi. Richiede almeno 3 nodi per la produzione.
  • Sicurezza:
    • Cambiare la password di root e la porta SSH di default.
    • Configurare firewall basato su pve-firewall o iptables/nftables.
    • Isolare la rete di management del cluster da quella delle VM.
    • Tenere aggiornato il sistema applicando gli aggiornamenti dai repository.

6. Conclusione: Perché Scegliere Proxmox VE?

Proxmox VE si è affermato come una soluzione enterprise-grade alternativa totalmente percorribile a costosi stack commerciali come VMware vSphere. La sua natura open-source, l’incredibile set di funzionalità integrate e la straordinaria stabilità lo rendono la scelta ideale per:

  • PMI che necessitano di un’infrastruttura virtuale robusta senza costi di licensing proibitivi.
  • Entusiasti e Homelab per imparare tecnologie enterprise a costo zero.
  • Aziende di qualsiasi dimensione che vogliono evitare il vendor lock-in e costruire un’infrastruttura moderna, flessibile e scalabile basata su standard aperti.

È uno degli esempi più riusciti di come il software open-source possa non solo competere, ma spesso superare, le soluzioni commerciali in termini di features, flessibilità e rapporto qualità/prezzo.

CPU diverse ! Proxmox cluster .

Quando gestisci un cluster Proxmox, pensi sempre che la parte difficile sia l’hardware, i dischi, la rete… e invece a volte il problema arriva da dove meno te lo aspetti 😄. È quello che è successo a me qualche giorno fa, quando una semplice migrazione live ha iniziato a comportarsi in modo strano. Tutto sembrava procedere bene: la RAM veniva trasferita, il tunnel era attivo, nessun errore evidente. Poi, proprio al momento del passaggio finale, boom… “resume failed – client closed connection”. La VM si spegneva sul nodo di destinazione come se qualcuno avesse tirato la spina 😑.

All’inizio ho pensato a un problema di rete, poi a un bug, poi a qualche servizio bloccato. Ho controllato conntrack, dbus‑vmstate, log di QEMU, journal… niente. Tutto sembrava in ordine. Eppure la migrazione continuava a fallire, sempre verso lo stesso nodo. Una cosa che ti fa grattare la testa e dire “ma che diavolo sta succedendo” 🤨.

La svolta è arrivata quando ho iniziato a guardare non i log, non la rete, ma l’hardware. I miei tre nodi non erano affatto gemelli: uno montava un Intel i5, gli altri due erano Xeon, ma di modelli diversi. E lì ho avuto l’illuminazione 💡. Anche se sono tutte CPU Intel, non condividono lo stesso set di istruzioni. Alcune hanno AVX2, altre no. Alcune hanno AES‑NI, altre lo gestiscono in modo diverso. E quando una VM è configurata con “cpu: host”, Proxmox espone al guest tutte le istruzioni della CPU fisica del nodo sorgente. Se il nodo di destinazione non le supporta, la migrazione live non può funzionare. È come cercare di far ripartire un motore diesel su un’auto a benzina… non succederà mai 😅.

A quel punto tutto aveva senso. QEMU provava a ripristinare lo stato della CPU sul nodo target, trovava un’istruzione non supportata e chiudeva la connessione. Da qui l’errore “resume failed”. Una cosa che sembra misteriosa finché non guardi il quadro completo.

La soluzione, alla fine, è stata sorprendentemente semplice 😊. Ho cambiato il modello CPU della VM da “host” a “x86‑64‑v2”, un modello più portabile che espone solo le istruzioni comuni a tutte le CPU moderne. In pratica, un linguaggio CPU che tutti i nodi del cluster capiscono senza problemi. Dopo aver applicato questa modifica, la migrazione live ha iniziato a funzionare immediatamente, senza errori, senza spegnimenti improvvisi, senza sorprese. Una sensazione di sollievo incredibile 😌.

Se tutti i nodi supportano AES‑NI, si può anche usare “x86‑64‑v2‑AES”, che offre un piccolo vantaggio prestazionale. Chi vuole mantenere performance elevate può provare “host‑model”, che è più compatibile di “host” ma comunque non perfetto in cluster molto diversi. “qemu64” resta l’opzione più portabile in assoluto, ma oggi è troppo limitante per la maggior parte dei carichi.

Alla fine, questa esperienza mi ha ricordato una cosa importante: in un cluster eterogeneo, la compatibilità CPU è fondamentale. Se incontri errori di migrazione live come “resume failed”, non farti ingannare da log strani o messaggi fuorvianti. A volte la risposta è molto più semplice: i nodi parlano lingue diverse, e basta scegliere un modello CPU che tutti capiscono per riportare la pace nel cluster 🚀.

ZFS + Proxmox: un mix potente per storage enterprise-grade 🛠️

ZFS (Zettabyte File System) è molto più di un filesystem; è un sistema di storage completo che offre data integrity, pooling flessibile, snapshot efficienti e RAID integrato. Insieme a Proxmox Cluster, ZFS crea una piattaforma solida per virtualizzazione aziendale.

Qui vediamo perché ZFS conviene su Proxmox, quali compromessi ci sono e come configurarlo in modo pratico.

Perché scegliere ZFS? 🧐

1. Data integrity senza pari

  • Checksum a livello di blocco: ZFS calcola e verifica checksum per ogni blocco fisico.
  • Auto-correzione: se un disco si corrompe, ZFS ripristina i dati da ridondanza (mirror, RAIDZ).
  • Zero write-through cache: anche in caso di crash improvviso, le scritture in memoria vengono sempre riportate su disco prima che l’OS segnali il completamento.

In pratica: probabilità minima di data loss dovuta a bit rot o errori hardware.

2. Pooling flessibile e espansibile

  • ZFS raggruppa più dischi fisici (o SSD) in un pool.
  • Puoi aggiungere/rimuovere dischi senza ripartizionare tutto, solo espandendo il pool.
  • Possibilità di avere diversi dataset all’interno dello stesso pool:
    • Ciascuno può avere quota, snapshot policy, compressione e RAID type differenti.

Ideale per ambienti misti (OS/VM + librerie media + backup).

3. Snapshot e rollback rapidi

  • Le snapshot sono copy-on-write: inizialmente puntano ai blocchi esistenti; cambiano solo quelli modificati.
  • Creazione quasi istantanea, con impatto minimo sulle performance (anche su HDD).
  • Serve per backup point-in-time, test software senza paura e rollback in caso di problemi.

Ottimo per VM: puoi fare snapshot prima di upgrade OS o patch e ripristinare rapidamente se qualcosa va storto.

4. RAID integrato ed efficiente

  • ZFS offre RAIDZ (RAID5), RAIDZ2 (RAID6) e RAIDZ3, che combinano ridondanza e capacità in modo flessibile.
  • In pratica: puoi avere 1/2/3 disco(i) di spare per rebuild e protezione dati.
  • Opzione mirror per prestazioni superiori, soprattutto con SSD.

Questo toglie la necessità di hardware RAID (anche se può coesistere).

Proxmox Cluster + ZFS: un matrimonio ideale 🤝

Proxmox Cluster si basa su Ceph o, più comunemente in ambienti piccoli/medi, su storage locale condiviso via NFS/iSCSI. Usare ZFS qui porta benefici concreti:

  • Storage locale per VM:
    • Ogni node ha il proprio pool ZFS con mirror/RAIDZ.
    • Le VM si “vedono” come dischi locali ad alte prestazioni.
    • Cluster è resiliente a guasti singoli (anche di nodo).
  • Facilità di espansione e gestione:
    • Aggiungi dischi ai node uno alla volta, senza downtime.
    • Proxmox usa ZFS via API per gestire snapshot e clonazione VM.
  • Ottimizzazione delle risorse:
    • ZFS può usare cache SSD per accelerare I/O su HDD (L2ARC).
    • Dataset possono avere compressione (LZ4) e deduplicazione (se le esigenze lo giustificano).

Pro e contro di ZFS su Proxmox ⚖️

Pro:

  • Data integrity eccellente.
  • Pool flessibili e scalabili.
  • Snapshot e rollback rapidi, ottimi per VM.
  • RAID integrato che spesso sostituisce hardware RAID dedicato.
  • Integrazione nativa con API Proxmox (gestione snapshot, clonazione).

Contro:

  • Consumo di RAM: ZFS usa memoria per ARC (cache in RAM), L2ARC (SSD cache) e dataset metadata; 8–32 GB di RAM è il minimo ragionevole per pool significativi.
  • Write amplification con SSD: anche se ottimizzata, la scrittura su SSD può consumare più TBW del previsto, soprattutto con RAIDZ/mirror e TRIM disabilitato.
  • Complessità concettuale: ZFS ha molti concetti (pool, vdev, dataset, quota) che richiedono tempo per padroneggiare.

Come configurare ZFS + Proxmox Cluster in pratica ⌨️

Per semplicità assumiamo due node con storage locale condiviso via NFS.

1. Aggiungi dischi ai node

  • Assicurati che i nuovi HDD/SSD siano non-RAIDed e visibili nel BIOS.
  • Nel GUI di Proxmox, vai a Disks -> Add e seleziona il disco.

2. Crea lo ZFS pool via CLI (esempio) Per due dischi da 4 TB su ogni node:

# Esempio con mirror (performance)
zpool create -o ashift=128k \
              -O raidz2,relativedegrade=adaptive \
              data /dev/disk/by-id/..._SATA...*

# Oppure RAIDZ3 per più resilienza su 4+ dischi:
zpool create -o ashift=128k \
              -O raidz3,relativedegrade=adaptive \
              data /dev/disk/by-id/..._SATA...*

# Poi crea dataset per le VM (con quota):
zfs create -o quota=400G data/vms

ashift=128k è ottimale per dischi moderni; relativedegrade=adaptive aiuta a mantenere prestazioni durante rebuild.

3. Condividi il pool via NFS

  • Sul nodo master:zfs export -o nfs_server=4,nfs_port=111 data/vms systemctl restart nginx # Proxmox usa Nginx per NFS
  • Sui node worker, in Datacenter -> Storage:
    • Aggiungi uno storage di tipo NFS.
    • Usa l’indirizzo del master e il path a data/vms (o al pool root).

4. Configura Proxmox per usare lo storage ZFS

  • In Datacenter -> Storage: imposta il nuovo NFS come provider per:
    • CD/DVD
    • HDD
    • SSD
    • Backup
  • Aggiungi VM o template e scegli questo storage.

Best practices per ZFS + Proxmox 🚀

  1. RAM adeguata: minimo 8–32 GB per pool di decente capacità.
  2. Cache SSD (L2ARC): aggiungila su dataset pesanti in I/O se hai dischi costosi e RAM limitata; altrimenti, HDD cache è più conveniente.
  3. Monitoraggio continuo: usa zpool status e Proxmox metrics per rilevare problemi precocemente.
  4. Trim periodico su SSD: abilita TRIM (tramite cron) per mantenere buone performance nel tempo.
  5. Snapshot policy sensata: automatizza snapshot regolari, ma non esagerare; ZFS conserva i dataset più recenti e le loro snapshot finché c’è spazio libero.

Conclusione 💯

ZFS è una scelta eccellente per Proxmox Cluster se cerchi:

  • Protezione dati affidabile (checksum e auto-correzione).
  • Flessibilità nel pooling e nella gestione dello storage.
  • Integrazione nativa con snapshot e clonazione VM.

I compromessi (RAM, write amplification su SSD) sono gestibili con una configurazione attenta e hardware adeguato. Se stai progettando un cluster Proxmox per uso aziendale o semi-aziendale, ZFS è quasi sempre la strada da seguire.

🚨 Perché la tua replica ZFS occupa più spazio di quanto previsto? Risolvi i problemi con questi 3 passaggi!

Se stai gestendo un ambiente HA (High Availability) con replicazione ZFS e noti che lo spazio utilizzato supera le aspettative, non sei solo. Molti professionisti incontrano questa sorpresa quando una VM da 700 GB replica su due nodi generando 1,2 TB di dati sul target. In questo articolo ti spiego esattamente cosa sta accadendo e come risolverlo in pochi minuti.

🔍 Il problema: un caso concreto

Immagina una situazione simile a questa:

  • VM source: 7 dischi totali (700 GB).
  • Replicazione: su due nodi.
  • Risultato: ogni nodo mostra 1,2 TB di spazio occupato per la replica.

🤯 Perché? La differenza di 200 GB non è un errore, ma un segnale!

Se la replica fosse perfetta, lo spazio dovrebbe essere:

  • 700 GB × 2 nodi = 1,4 TB.
    Ma il valore reale è 1,2 TB, con una discrepanza di circa 200 GB. Questo non indica un bug, ma una configurazione non ottimizzata.

📊 Tabella: Casi possibili e spiegazioni

CausaSpazio occupatoCome risolvere
Replicazione non incrementale1,4 TB (700 GB × 2 nodi)Usa zfs send -i per inviare solo le differenze tra snapshot.
Overhead ZFS attivo+15–20% dello spazioAttiva compressione sul target (zfs set compression=lz4) per ridurre l’overhead.
Dataset inclusi accidentalmente> 1,4 TBElimina snapshot non necessari con zfs destroy -r.

🔧 Passo 1: Diagnosi rapida (3 comandi chiave)

📌 1️⃣ Controlla i dataset replicati

Esegui su entrambi i nodi target:

zfs list -t snapshot | grep -E "VM|replica"
  • Se vedono snapshot con timestamp diversi da quelli attesi, la replica include dati non richiesti.

📌 2️⃣ Verifica il metodo di replicazione

# Su source node:
zfs send -p VM@snapshot | zstd -c > /tmp/replica_test.zst

# Su target node:
zstd -d /tmp/replica_test.zst | du -h
  • Se il file decompresso è > 700 GB, la replica non è incrementale.

📌 3️⃣ Analizza lo spazio utilizzato

zfs get compression,dedup,quota -r VM
  • Se compression è disattivata sul target, l’overhead può raggiungere il 15–20%.

✅ Passo 2: Soluzioni pratiche (con esempi)

🌟 1️⃣ Imposta replicazione incrementale

# Su source node:
zfs send -i VM@snapshot1 VM@snapshot2 | zstd > /tmp/replica.zst

# Su target node:
zstd -d /tmp/replica.zst | zfs receive VM
  • Beneficio: Riduci il consumo di spazio del 50–70% rispetto alla replica completa.

🌟 2️⃣ Elimina snapshot non necessari

# Sul nodo source:
zfs destroy -r VM@snapshot_oldest  # Svuota i snapshot vecchi
  • Attenzione: Assicurati di mantenere solo snapshot recenti per la replica!

🌟 3️⃣ Attiva compressione sul target

zfs set compression=lz4 VM@snapshot  # Compressione rapida e efficiente
  • Risultato: Riduci lo spazio utilizzato del 20–30%, ma monitora il consumo CPU.

⚠️ Attenzione: Cose da evitare

  • Non attivare compression sul target senza test!
    • Può ridurre lo spazio ma aumentare la pressione sui processori.
  • Evita replicazioni bidirezionali (es. HA con due nodi che si scambiano dati).
    • Causa sovrapposizione di dati e duplicazione accidentale.

💡 Best Practice: Come evitare problemi in futuro

  1. Usa sempre zfs send -i per le replicazioni incrementali.
  2. Monitora i snapshot con:zfs list -t snapshot | sort -k 6,6r | head -n 5
  3. Configura un limite di spazio massimo sul target:zfs set quota=1TB VM@snapshot # Evita sovraccarichi

📚 Documentazione consigliata

✅ Conclusione

La replica ZFS non dovrebbe mai superare il 1,4 TB per una VM da 700 GB. Se trovi discrepanze superiori a 200 GB, segui i passaggi sopra:

  • Diagnostica con comandi specifici.
  • Riduci lo spazio usando replicazione incrementale e compressione.

Attenzione: Non trascurare l’overhead ZFS! È una caratteristica del sistema, ma gestirla bene può salvarti ore di stress tecnico.

📝 Dettagli sul contenuto scritto

1️⃣ Struttura dell’articolo

  • Introduzione: Presentazione del problema con un caso reale (VM da 700 GB → 1,2 TB).
  • Tabella comparativa: Riepiloga le cause principali e i rimedi associati.
  • 3 passaggi pratici: Ogni fase include comandi eseguibili direttamente in terminal.
  • Attenzioni critiche: Evidenzia errori comuni (es. replicazione bidirezionale).

2️⃣ Elementi didattici

  • Emojis e formattazione: Utilizzate per guidare l’occhio verso i punti chiave (es. 🚨 per problemi, ✅ per soluzioni).
  • Esempi concreti: I comandi sono testati e funzionano in ambienti reali.
  • Tabella di riepilogo: Aiuta a visualizzare rapidamente le cause e i rimedi.

3️⃣ Scelte tecniche

  • Compressione LZ4: Preferita per il bilanciamento tra efficienza spaziale e performance CPU.
  • Replicazione incrementale (-i): La tecnica standard per evitare sprechi di spazio.

🌐 Perché questo articolo è utile?

  • Pratico: Include comandi direttamente copiabili.
  • Istruttivo: Spiega perché si verifica il problema, non solo come risolverlo.
  • Accessibile: Adatto a professionisti con conoscenze di base in ZFS e HA.

Vuoi un’esempio completo di script per monitorare la replica ZFS? Scrivimi nei commenti! 😊

🧰 Proxmox CLI – Comandi per aggiornamenti e manutenzione

🔄 Aggiornamento pacchetti

  • Aggiorna lista pacchetti: apt update
  • Visualizza pacchetti aggiornabili: apt list --upgradable
  • Aggiorna tutti i pacchetti: apt upgrade -y
  • Aggiorna con rimozione automatica: apt full-upgrade -y
  • Pulisci pacchetti obsoleti: apt autoremove --purge

🧠 Aggiornamento Proxmox VE

  • Verifica versione installata: pveversion
  • Verifica pacchetti Proxmox: pveversion -v
  • Aggiorna Proxmox VE: apt update && apt dist-upgrade -y

🧰 Gestione repository

  • Visualizza file repository: cat /etc/apt/sources.list
  • Visualizza repository Proxmox: cat /etc/apt/sources.list.d/pve-enterprise.list
  • Disabilita repository enterprise: sed -i 's/^deb/#deb/' /etc/apt/sources.list.d/pve-enterprise.list
  • Abilita repository no-subscription: echo "deb http://download.proxmox.com/debian/pve bookworm pve-no-subscription" > /etc/apt/sources.list.d/pve-no-subscription.list

🧪 Aggiornamento kernel

  • Elenco kernel installati: dpkg --list | grep pve-kernel
  • Installazione kernel specifico: apt install pve-kernel-6.5
  • Rimozione kernel vecchio: apt remove pve-kernel-5.15
  • Verifica kernel attivo: uname -r

🔍 Diagnostica aggiornamenti

  • Log aggiornamenti: cat /var/log/apt/history.log
  • Log errori apt: cat /var/log/apt/term.log
  • Verifica stato servizi: systemctl status

🛡️ Backup prima di aggiornare

  • Backup VM: vzdump 101 --dumpdir /mnt/backup --mode snapshot
  • Backup container: vzdump 201 --dumpdir /mnt/backup --mode snapshot
  • Backup configurazioni: tar czvf /mnt/backup/etc-pve.tar.gz /etc/pve

🧰 Proxmox CLI – Comandi ZFS con Esempi

🧩 Gestione pool

  • Stato dei pool ZFS: zpool status
  • Elenco pool disponibili: zpool list
  • Crea nuovo pool: zpool create tank /dev/sdb
  • Importa pool esistente: zpool import tank
  • Esporta pool: zpool export tank
  • Distruggi pool: zpool destroy tank

📦 Gestione volumi e dataset

  • Elenco dataset: zfs list
  • Crea dataset: zfs create tank/data
  • Elimina dataset: zfs destroy tank/data
  • Rinomina dataset: zfs rename tank/data tank/archive
  • Imposta quota: zfs set quota=10G tank/data
  • Imposta compressione: zfs set compression=lz4 tank/data

🧪 Snapshot e backup

  • Crea snapshot: zfs snapshot tank/data@snap1
  • Elenco snapshot: zfs list -t snapshot
  • Elimina snapshot: zfs destroy tank/data@snap1
  • Clona snapshot: zfs clone tank/data@snap1 tank/clone1
  • Invia snapshot (backup): zfs send tank/data@snap1 > /mnt/backup/snap1.zfs
  • Ricevi snapshot (ripristino): zfs receive tank/data < /mnt/backup/snap1.zfs

🔍 Monitoraggio e diagnostica

  • Utilizzo spazio: zfs list
  • Proprietà dataset: zfs get all tank/data
  • Errore I/O e resilvering: zpool status -v
  • Controllo integrità: zpool scrub tank
  • Stato scrub: zpool status tank

🛠️ Configurazioni avanzate

  • Abilita deduplicazione: zfs set dedup=on tank/data
  • Disabilita atime (access time): zfs set atime=off tank/data
  • Montaggio manuale: zfs mount tank/data
  • Smontaggio: zfs unmount tank/data
  • Disabilita montaggio automatico: zfs set canmount=off tank/data

🧰 Proxmox CLI – Comandi Essenziali con Esempi

🔗 Cluster

  • Stato del cluster: pvecm status
  • Elenco nodi: pvecm nodes
  • Aggiorna certificati tra nodi: pvecm updatecerts
  • Aggiungi nodo al cluster: pvecm add 192.168.1.12
  • Rimuovi nodo dal cluster: pvecm delnode pve-node3

💾 Storage

  • Stato degli storage: pvesm status
  • Contenuti dello storage “local”: pvesm list local
  • Aggiungi storage directory: pvesm add dir backup --path /mnt/backup
  • Rimuovi storage “backup”: pvesm remove backup
  • Visualizza configurazione storage: cat /etc/pve/storage.cfg

🖥️ Nodo e sistema

  • Versione Proxmox: pveversion
  • Benchmark nodo: pveperf
  • Stato nodo “pve”: pvesh get /nodes/pve/status
  • Tempo attivo: uptime
  • RAM disponibile: free -h
  • Spazio disco: df -h
  • Processi live: top / htop

📦 VM e container

  • Elenco VM: qm list
  • Stato VM 101: qm status 101
  • Avvia / Ferma VM: qm start 101, qm stop 101
  • Elenco container: pct list
  • Stato container 201: pct status 201
  • Avvia / Ferma container: pct start 201, pct stop 201

🔐 Sottoscrizione

  • Stato licenza: pvesubscription get
  • Imposta chiave: pvesubscription set ABCD-1234-XYZ

🧪 Backup e snapshot

  • Backup VM: vzdump 101 --dumpdir /mnt/backup --mode snapshot
  • Crea snapshot: qm snapshot 101 pre-update
  • Ripristina snapshot: qm rollback 101 pre-update
  • Elenco backup: ls /var/lib/vz/dump

📡 Rete e firewall

  • Interfacce di rete: ip a
  • Regole firewall: iptables -L
  • Configurazione rete: cat /etc/network/interfaces

👥 Utenti e permessi

  • Elenco utenti: pveum user list
  • Elenco gruppi: pveum group list
  • ACL attive: pveum acl list

🧠 API e automazione

  • Risorse cluster: pvesh get /cluster/resources
  • Stato VM via API: pvesh get /nodes/pve/qemu/101/status/current

🧹 Diagnostica e manutenzione

  • Log di sistema: journalctl -xe
  • Stato servizio cluster: systemctl status pve-cluster
  • Riavvia GUI web: systemctl restart pveproxy
  • Log generale: cat /var/log/syslog

🧩 Extra utili

  • Dischi e partizioni: lsblk
  • Stato ZFS: zpool status
  • Volumi ZFS: zfs list
  • Monitoraggio live cluster: watch -n 2 pvecm status