Das Setup
HP MicroServer Gen8, 4x WD Red 4TB im ZFS RAIDZ2-Pool tank. Dazu ein SSD-Mirror als Special VDEV (Metadaten) und zwei SSDs als L2ARC (Read-Cache). Proxmox VE als Hypervisor, Plex in einem LXC-Container, PBS lokal für Backups.
tank
raidz2-0 (4x WD Red 4TB — die sollen schlafen)
special mirror-1 (2x Samsung SSD — Metadaten + kleine Dateien)
cache (2x Samsung SSD — L2ARC)
Ziel: Die vier HDDs sollen nach 5 Minuten Inaktivität in den Standby gehen und dort bleiben, bis jemand tatsächlich einen Film abspielt oder ein Backup läuft.
Warum ein Special VDEV der Schlüssel ist
ZFS lagert mit einem Special VDEV automatisch alle Metadaten auf die SSDs aus — Verzeichnisbäume, Dateinamen, Berechtigungen, Dateigrößen. Zusätzlich landen Dateien unter special_small_blocks (hier: 512K) ebenfalls dort.
Das heißt: Wenn du mit Kodi durch /tank/Filme/ browsst, liest ZFS den Verzeichnisbaum von den SSDs. Die HDDs schlafen weiter. Erst wenn du einen Film abspielst, müssen die Spindeln anlaufen.
# Prüfen ob special_small_blocks gesetzt ist
zfs get special_small_blocks tank
Ohne Special VDEV liegen Metadaten auf den HDDs, und jedes ls weckt alle Platten auf. Mit Special VDEV ist Browsen kostenlos.
hdparm -S: Spindown konfigurieren
hdparm -S 60 /dev/disk/by-id/ata-WDC_WD40EFRX-68N32N0_WD-XXXXXXXXXXXXX
-S 60 bedeutet 60 × 5 Sekunden = 5 Minuten bis zum Standby. Nicht 60 Sekunden — die hdparm-Zeiteinheiten sind gewöhnungsbedürftig.
Nachtrag 2026-10-21: Der Timer hat bei mir nie gefeuert
Vier Monate später habe ich das auf derselben Hardware nachgemessen. Ergebnis: hdparm -S nimmt den Befehl ohne Fehler an, der Timer feuert aber auf keiner der vier Platten — auch nicht auf der WD Red Pro, von der ich damals annahm, sie könne es.
Messreihe mit ruhendem Pool (0 IOPS über 60 s, geprüft per /proc/diskstats): -S 1 (5 Sekunden), -S 12 (1 Minute) und -S 60 (5 Minuten) gesetzt, jeweils danach vier Minuten gewartet. Die Platte blieb durchgehend active/idle. Auch APM komplett aus (-B 255) änderte nichts.
Was funktioniert: hdparm -y (sofort Standby). Damit schlafen die Platten sofort und bleiben es auch.
# Test, ob der Timer auf DEINER Platte wirkt
sudo hdparm -S 12 /dev/disk/by-id/ata-DEINE-PLATTE # 1 Minute
sleep 70
sudo hdparm -C /dev/disk/by-id/ata-DEINE-PLATTE # muss "standby" sagen
Sagt sie weiter active/idle: Timer vergessen, und stattdessen einen Watchdog bauen, der bei leerem Pool hdparm -y ausführt.
#!/bin/bash
# /usr/local/bin/hdd-standby-watchdog — stündlich per systemd-Timer
STATS=$(timeout -k 5 20 zpool iostat -Hp tank 5 2 | tail -1)
READS=$(echo "$STATS" | awk '{print $4}')
WRITES=$(echo "$STATS" | awk '{print $5}')
if [ "$READS" = "0" ] && [ "$WRITES" = "0" ]; then
for d in /dev/disk/by-id/ata-WDC_WD40EFRX-*; do
timeout -k 2 5 hdparm -C "$d" | grep -q "active/idle" && timeout -k 2 10 hdparm -y "$d"
done
fi
Die timeout -k sind kein Zierrat: ein hdparm im D-State ignoriert SIGTERM. Ohne Timeout hängt der Oneshot ewig in activating — bei mir waren es 78 Tage, ohne dass ein Alarm anschlugen.
Erste Falle: /dev/sd* ist nicht stabil
Device-Buchstaben können sich nach jedem Reboot verschieben. Was heute /dev/sda ist, kann morgen /dev/sdf sein. Wenn dein Crontab hdparm -S 60 /dev/sdb sagt und nach einem Reboot /dev/sdb plötzlich eine SSD ist, hast du wirkungslose Spindown-Regeln auf Geräten ohne Spindeln.
Immer /dev/disk/by-id/ verwenden:
# Stabile Pfade finden
ls -l /dev/disk/by-id/ | grep -v wwn | grep ata-WDC
# Crontab mit by-id Pfaden
@reboot hdparm -S 60 /dev/disk/by-id/ata-WDC_WD40EFRX-..._WD-SERIAL1
@reboot hdparm -S 60 /dev/disk/by-id/ata-WDC_WD40EFRX-..._WD-SERIAL2
# usw.
Zweite Falle: hdparm -C weckt WD Red auf
Das war der eigentliche Showstopper. hdparm -C soll den Drive-State lesen — active/idle oder standby. Klingt harmlos. Auf bestimmten WD Red Firmware-Versionen weckt der Befehl die Platte aber auf.
In meinem Fall lief ein selbstgeschriebenes Monitor-Script als systemd-Service, das alle 10 Sekunden hdparm -C auf allen vier Drives ausführte. Gedacht als Überwachung, wann die Platten schlafen. In Wirklichkeit hat es sie permanent wachgehalten — ein endloser Aufweck-Loop.
# /var/log/drive-wakeups.log — alle 10 Sekunden
2026-06-02 05:13:39 - /dev/sdh woke up
2026-06-02 05:13:49 - /dev/sdh woke up
2026-06-02 05:13:59 - /dev/sdh woke up
Das Script hat seinen eigenen Wakeup als “unerwartetes Aufwachen” geloggt. Es hat die Platten geweckt und sich dann über den Lärm beschwert.
Lösung: Monitor-Script deaktiviert, Standby-Monitoring über Zabbix mit 5-Minuten-Intervall. Ein Wakeup alle 5 Minuten ist akzeptabel — alle 10 Sekunden ist destruktiv.
Nachtrag 2026-10-21: Nachgemessen — hier weckt -C gar nicht
Diese Erklärung war bequem, aber ich hatte sie nie isoliert geprüft. Auf derselben Hardware, vier Monate später:
- Alle vier Platten im Standby, 5-Minuten-Polling per Zabbix (
hdparm -C) läuft seit Stunden: Platten bleibenstandby. - Dreimal
hdparm -Chintereinander auf einer schlafenden Platte: SMARTStart_Stop_CountundLoad_Cycle_Countunverändert. - Eine gezielt geweckte Platte bleibt nach
hdparm -yüber Minuten schlafen, obwohl das Polling weiterläuft.
Heißt: Der damalige Aufweck-Loop kam sehr wahrscheinlich nicht von -C selbst. -C ist eine Abfrage, und auf dieser Firmware ist sie billig. Was die Platten wachhielt, war etwas anderes — das Script hat nur protokolliert, was es beobachtet hat.
Konsequenz für dich: Prüf es an deinen Platten, bevor du den Alarm abschaltest oder auf -S verzichtest. Nimm Start_Stop_Count vor und nach einer Minute Polling. Steigt der Zähler, weckt deine Firmware wirklich.
Und eine echte Messfalle: smartctl -n standby meldet auf der WD Red Pro hinter dem LSI-Controller auch im Standby „aktiv" (exit 0). Wer sich darauf verlässt, jagt ein Phantom — und schaltet womöglich das funktionierende Polling ab. Nur hdparm -C sagte in meinem Test die Wahrheit.
Die versteckten Weckquellen
Nachdem hdparm fixiert war, schliefen die Platten — aber nicht durchgängig. Ein Blick auf die Zabbix-Daten zeigte nachts stundenlange Wachphasen. Die Ursachen:
Plex Media Server
Plex scannt per Default stündlich die Bibliothek und führt nachts Deep Media Analysis durch. Beides liest Dateiinhalte von den HDDs.
<!-- In Preferences.xml -->
ScheduledLibraryUpdatesEnabled="0"
ButlerStartHour="1"
ButlerEndHour="4"
ButlerTaskDeepMediaAnalysis="0"
Automatischen Scan deaktivieren, Butler in ein Zeitfenster legen, manuellen Scan per Cron:
# Plex Container Crontab
45 1 * * * curl -s http://localhost:32400/library/sections/1/refresh \
-H "X-Plex-Token: <token>" && \
curl -s http://localhost:32400/library/sections/2/refresh \
-H "X-Plex-Token: <token>"
PBS Prune (stündlich!)
Der PBS-Prune-Job auf dem Backup-Datastore war auf stündlich konfiguriert — und der Datastore liegt auf den HDDs. Jede Stunde Spinup für ein paar Sekunden Prune-Arbeit. Auf täglich geändert.
Backup-Chaos: Fünf Jobs über die Nacht verteilt
Verschiedene Backups liefen zu verschiedenen Zeiten:
- 00:01 — Remote vzdump Push vom Haupthost
- 01:30 — Nextcloud PBS-Backup (1,5 Stunden!)
- 03:00 — Lokales vzdump
- 03:15 — PBS Sync Pull
Jeder Job weckt die Platten auf, und bevor sie nach 5 Minuten einschlafen können, kommt der nächste. Ergebnis: HDDs, die ganze Nacht aktiv.
Das perfekte Backup-Fenster
Alles in ein Zeitfenster konsolidiert:
01:00 ├─ Lokales vzdump (3 min)
01:00 ├─ Remote Push ───────────────────┤ ~01:39
01:15 ├─ PBS Sync Pull
01:45 ├─ Nextcloud-Backup ──────────────────────────────────┤ ~03:15
01:45 ├─ Plex Scan
01:00 ──────────────── Plex Butler ─────────────────────┤ 04:00
Platten wach von 01:00 bis ~03:15, danach Standby bis zum nächsten Abend.
Der Timer, der nie wieder feuert
Wenn der Spindown über einen systemd-Timer läuft, gehört dieser Check dazu. Sonst merkst du den Ausfall erst, wenn eine Platte wochenlang wach bleibt.
systemctl show hdd-spindown.timer -p ActiveState -p SubState \
-p NextElapseUSecRealtime -p NextElapseUSecMonotonic
systemctl show hdd-spindown.service -p ActiveState -p SubState -p RemainAfterExit
Fehlerbild:
ActiveState=active
SubState=running
NextElapseUSecRealtime=
NextElapseUSecMonotonic=infinity
LastTriggerUSec=Fri 2026-10-09 01:04:34 CEST
Der Timer ist „aktiv", hat aber keinen nächsten Termin. Bei mir stand das so seit dem Boot — zwölf Tage lang, ohne einen einzigen Lauf.
Ursache: Der Service ist Type=oneshot mit RemainAfterExit=yes. Damit bleibt er nach dem ersten Lauf dauerhaft active (exited). systemd legt den nächsten Timer-Termin aber erst fest, wenn die getriggerte Unit wieder inaktiv wird. Sie wird nie inaktiv, also feuert der Timer nie wieder.
Beweis statt Vermutung: Service einmal stoppen. Springt der Timer sofort auf waiting und bekommt einen Termin, war es das.
systemctl stop hdd-spindown.service
systemctl show hdd-spindown.timer -p SubState -p NextElapseUSecRealtime
Fix: RemainAfterExit raus, TimeoutStartSec rein (ein Oneshot hat keinen Default), und die Unit nur vom Timer starten lassen.
[Service]
Type=oneshot
TimeoutStartSec=30
ExecCondition=/bin/sh -c '! /usr/sbin/hdparm -C /dev/disk/by-id/ata-DEINE-PLATTE | grep -q standby'
ExecStart=/usr/sbin/hdparm -B 127 /dev/disk/by-id/ata-DEINE-PLATTE
# kein RemainAfterExit, kein [Install]
Das ExecCondition spart den unnötigen hdparm-Lauf, solange die Platte ohnehin schläft.
Überwachung, die das sieht: Das Alter des letzten abgeschlossenen Laufs (InactiveEnterTimestamp) wächst bei Timer-Tod, hängendem und fehlgeschlagenem Service gleichermaßen.
UserParameter=hdd.spindown.lastok,sh -c 'ts=$(systemctl show hdd-spindown.service -p InactiveEnterTimestamp --value); [ -n "$ts" ] && echo $(( $(date +%s) - $(date -d "$ts" +%s) )) || echo 999999'
UserParameter=hdd.spindown.stuck,sh -c 'st=$(systemctl show hdd-spindown.timer -p ActiveState --value); nx=$(systemctl show hdd-spindown.timer -p NextElapseUSecMonotonic --value); [ "$st" = active ] && [ "$nx" = infinity ] && echo 1 || echo 0'
Trigger: lastok > 5400 (90 Minuten, der Timer läuft stündlich) und min(stuck,10m)=1.
Warum der Summen-Trigger nicht reicht: „Keine Platte hat in 6 Stunden geschlafen" bleibt grün, solange irgendeine Platte schläft. Bei vier Platten und einem Watchdog, der drei davon zuverlässig schlafen legt, ist das praktisch immer der Fall. Eine einzelne wach gebliebene Platte fällt durch.
Besser: die Zahl der active/idle-Platten nur zählen, wenn der Pool im selben Moment ruht. Dann braucht es keine Zeitfenster für die Backup-Zeiten, und der Alarm nennt die richtige Platte.
UserParameter=hdd.spindown.idle_awake,/usr/local/bin/hdd-idle-awake
# gibt 0 aus, wenn der Pool gerade Reads/Writes hat; sonst die Anzahl wacher Platten
Trigger pro Platte: max(hdd.standby[<id>],1h)=0 and min(idle_awake,1h)>0. Das max ist wichtig, min feuert schon bei einem einzigen Wach-Sample im Fenster.
Monitoring mit Zabbix
UserParameter für den Drive-State:
# /etc/zabbix/zabbix_agent2.d/hdd-standby.conf
UserParameter=hdd.standby[*],sudo /usr/sbin/hdparm -C /dev/disk/by-id/$1 \
2>/dev/null | grep -q standby && echo 1 || echo 0
UserParameter=hdd.standby.count,for d in ata-WDC_WD40EFRX-...; do \
sudo /usr/sbin/hdparm -C /dev/disk/by-id/$d 2>/dev/null | \
grep -q standby && echo 1 || echo 0; done | awk '{s+=$1} END {print s}'
hdparm braucht root — der Zabbix-Agent läuft als zabbix:
# /etc/sudoers.d/zabbix-hdparm
zabbix ALL=(root) NOPASSWD: /usr/sbin/hdparm -C /dev/disk/by-id/*
Trigger, wenn in 6 Stunden keine Platte geschlafen hat — dann stimmt was nicht.
Ergebnis
Vorher: HDDs 24/7 aktiv, unnötiger Stromverbrauch rund um die Uhr. Nachher: HDDs schlafen ~21 Stunden pro Tag. Aufwachzeit bei Film-Start: wenige Sekunden.
Die Kombination aus ZFS Special VDEV (Metadaten auf SSDs), konsolidiertem Backup-Fenster und korrektem Monitoring macht den Unterschied. Der größte Zeitfresser war die Diagnose — nicht die eigentliche Konfiguration.
Checkliste: HDD Standby auf ZFS
- Special VDEV für Metadaten eingerichtet
-
special_small_blocksgesetzt (512K empfohlen) -
hdparm -Smit/dev/disk/by-id/Pfaden — und getestet, ob der Timer überhaupt feuert - Falls
-Signoriert wird: Watchdog mithdparm -ybei leerem Pool (timeout -knicht vergessen) - Timer-Frische überwacht (Alter des letzten Laufs, kein
NextElapsebei aktivem Timer) - SMART-Daemon:
-n standbygesetzt (weckt schlafende Platten nicht) - Plex: Automatischer Scan deaktiviert, Butler-Fenster gesetzt
- PBS Prune: Nicht stündlich (täglich reicht)
- Alle Backups in ein Zeitfenster konsolidiert
- Kein hochfrequentes
hdparm -CPolling — aber vor dem Abschalten messen, ob es deine Platten wirklich weckt - Zabbix-Monitoring für Drive-State eingerichtet