Data Deduplication (Windows Server)

Allgemeine Infos

Data Deduplication (Datendeduplizierung) ist eine Funktion der Datei- und Speicherdienste in Windows Server 2016 bis 2025. Sie erkennt doppelte Abschnitte in Dateien eines Volumes, speichert jeden Abschnitt nur einmal und komprimiert ihn optional. Für Benutzer und Anwendungen bleibt das unsichtbar, Dateien werden beim Lesen transparent zusammengesetzt.

Microsoft nennt als typische Einsparungen 30 bis 50 Prozent bei Benutzerdokumenten, 50 bis 60 Prozent bei allgemeinen Dateifreigaben, 70 bis 80 Prozent bei Software-Bereitstellungsfreigaben und 80 bis 95 Prozent bei Virtualisierungsbibliotheken mit ISO- und VHD-Dateien. Gute Kandidaten sind Dateiserver, VDI-Umgebungen und Backup-Ziele, schlechte Kandidaten sind Datenbanken und bereits komprimierte Daten.

Abgrenzung: Deduplizierung als herstellerübergreifendes Verfahren in Backup- und Speichersystemen beschreibt ein eigener Eintrag. Windows Server 2025 bringt zusätzlich die neue Deduplizierung und Komprimierung für ReFS, die auch für aktive Workloads gedacht ist. Microsoft weist darauf hin, dass für reine Platzeinsparung auch Azure File Sync mit Cloud-Tiering eine Option ist.

Funktionsweise & Details

Die klassische Data Deduplication arbeitet nachgelagert (Post-Processing):

  1. Neue Daten werden zunächst normal geschrieben.
  2. Ein Optimierungsauftrag (standardmäßig stündlich) zerlegt geeignete Dateien in Blöcke variabler Größe, speichert eindeutige Blöcke im Chunk Store im Ordner System Volume Information und ersetzt den Dateiinhalt durch einen Analysepunkt (Reparse Point).
  3. Der Filtertreiber Dedup.sys setzt die Datei beim Lesen transparent aus den Blöcken zusammen.
  4. Die Speicherbereinigung (Garbage Collection, standardmäßig samstags) entfernt nicht mehr referenzierte Blöcke, die Integritätsprüfung (Scrubbing) erkennt und repariert Beschädigungen im Chunk Store.
  5. Die Nutzungstypen Default (allgemeine Dateiserver, Mindestalter drei Tage), Hyper-V (VDI) und Backup (virtualisierte Backup-Anwendungen wie DPM) passen Priorität und Optimierungsregeln an.

Aktiviert wird pro Volume über Server-Manager, Windows Admin Center oder PowerShell (Enable-DedupVolume), der Status lässt sich mit Get-DedupStatus prüfen.

Vorteile & Nutzen

  • Spürbar weniger Speicherbedarf bei redundanten Daten, besonders bei VHD-Bibliotheken und Software-Freigaben.
  • Für Benutzer und Anwendungen transparent, Pfade und Berechtigungen bleiben gleich.
  • Optimierung läuft im Hintergrund nach Zeitplan und belastet den Server tagsüber kaum.
  • Ohne Zusatzlizenz in Standard und Datacenter enthalten, also günstiger als zusätzlicher Speicher.
  • Kann in VDI-Szenarien Lastspitzen beim gleichzeitigen Start vieler VMs (Boot Storm) abmildern.

Praxisbeispiel

Ein Softwarehaus mit 120 Mitarbeitenden speichert auf einem Dateiserver Installationspakete, ISO-Abbilder und Build-Artefakte, das Volume ist zu 90 Prozent belegt. Die IT aktiviert Data Deduplication mit dem Nutzungstyp Default und schließt den Ordner mit einer Datenbank von der Optimierung aus. Nach den ersten Optimierungsläufen zeigt Get-DedupStatus einen deutlichen Rückgang des belegten Speichers, eine Speichererweiterung ist vorerst nicht nötig. Die Backup-Software wird auf deduplizierungsfähige Sicherung geprüft, damit die Sicherung nicht wieder alle Daten expandiert.

Worauf sollte man achten?

  • Teste die Einsparung vorab mit dem Tool DDPEval.exe, statt pauschale Werte anzunehmen.
  • Setze Deduplizierung nicht auf Volumes mit Datenbanken, Exchange-Postfachdatenbanken oder stark veränderlichen Dateien ein.
  • Ändere den Chunk Store nie manuell, Microsoft warnt ausdrücklich vor Datenverlust.
  • Prüfe, ob Deine Backup-Software deduplizierte Volumes optimiert sichern und wiederherstellen kann.
  • Plane genug freien Speicher ein, bevor Du die Deduplizierung wieder deaktivierst, weil das Rückgängigmachen alle Daten expandiert.

Lizenz & Verfügbarkeit

In Windows Server Standard und Datacenter (2016 bis 2025) ohne Zusatzlizenz enthalten; die ReFS-Deduplizierung und -Komprimierung ist mit Windows Server 2025 hinzugekommen. Für zugreifende Benutzer gelten die Windows Server CALs. Stand: Oktober 2026.

Fazit

Data Deduplication holt auf Dateiservern und Bibliotheken mit vielen ähnlichen Dateien viel Speicher heraus, ohne dass Benutzer etwas merken. Prüfe vorher die Eignung der Daten und die Verträglichkeit mit Deiner Backup-Lösung.