ZFS (Dateisystem)

ZFS ist ein 128-Bit Copy-On-Write-Dateisystem mit einer im Vergleich zu herkömmlichen Dateisystemen deutlich erweiterten Funktionalität. Bei herkömmlichen Dateisystemen verwaltet genau ein Dateisystem genau eine Partition. Sollen mehrere physische Partitionen zu logischen Partitionen zusammengefasst werden, muss hierzu eine zusätzliche Logical-Volume-Manager-Software installiert werden. Zur Ausfallsicherung können viele Dateisysteme zusätzlich durch ein optionales softwarebasiertes RAID-Subsystem (Software-RAID) abgesichert werden. ZFS fasst diese drei Funktionen zusammen und ergänzt diese um einen prüfsummenbasierten Schutz vor Datenübertragungsfehlern.

In der Praxis werden zunächst aus physischen Datenträgern (eigentlich Datenspeicher-Geräten) logische Einheiten – sogenannte Pools (bzw. zPools) – gebildet, welche optional auch ausfallsicher ausgelegt sein können (RAID). Innerhalb eines Pools können dann beliebig viele logische Partitionen (mit je einem Dateisystem) angelegt werden, wobei diese, soweit es die Größe des Pools zulässt, dynamisch wachsen, aber auch verkleinert werden können. Um administrative Einschränkungen durchzusetzen, kann für jede logische Partition eine minimale und maximale Größe vorgegeben werden. Die logischen Partitionen können dabei in eine hierarchische Struktur eingebettet werden, innerhalb derer diese und andere Parameter auch vererbt werden können. Weiterhin ist es möglich, Datenbereiche aus Pools als dedizierte „Block-Devices“ (siehe auch Datenblock-orientierte Geräte) zur Verfügung zu stellen.

Die zweite Besonderheit von ZFS ist die besonders einfache Administration. Um einen Pool über mehrere Festplatten zu erzeugen und auf diesem eine Partition anzulegen, werden lediglich zwei einfach strukturierte Befehle benötigt. Das Partitionieren, Aufbauen des logischen Volumens und schließlich das Einhängen ins bestehende Dateisystem werden automatisch erledigt, können aber bei Bedarf auch manuell vorgenommen werden.

Wie bei einem klassischen Volume-Manager können die zugrunde liegenden Pools ausfallsicher angelegt sein. Hierzu werden aus mehreren physischen Datenträgern per Software-RAID sogenannte Redundanz-Gruppen gebildet, eine oder mehrere dieser redundanten Gruppen bilden dann einen ausfallsicheren Pool. Das in das Dateisystem integrierte RAID-Subsystem bietet gegenüber klassischen Hardware- oder Software-Raid-Implementierungen den Vorteil, dass zwischen belegten und freien Datenblöcken unterschieden werden kann und somit bei der Rekonstruktion eines Raid-Volumens nur belegter Plattenplatz gespiegelt werden muss, hieraus resultiert im Schadensfall, besonders bei wenig gefüllten Dateisystemen, eine enorme Zeitersparnis. ZFS stellt mehrere RAID-Level zur Auswahl. Bei der Spiegelung (RAID-1) bilden zwei (oder mehr) Festplatten eine gespiegelte Redundanz-Gruppe, wobei die Daten zweimal oder öfter gespeichert werden können. Weiter gibt es zwei RAID-Z genannte Implementierungen. RAID-Z1 arbeitet ähnlich wie RAID-5, RAID-Z2 entspricht weitestgehend RAID 6. Bei RAID-Z1 bilden drei (oder mehr) Festplatten die Redundanz-Gruppe, dabei sind die Daten wie bei einem RAID 5 System paritätsgesichert, so dass eine der Festplatten ausfallen kann, ohne dass dabei Datenverluste entstehen. Durch das integrierte Design des ZFS wird jedoch im Gegensatz zu RAID-5 kein batteriegepufferter Speicher (NVRAM) benötigt, da keine Schreiblücke (write hole) zwischen Daten-Schreiben und Parity-Schreiben auftritt. Die RAID-Z2 genannte, ebenfalls schreiblückenfreie Implementierung von RAID-6 ist seit Solaris Express 47 verfügbar. Seit Juli 2009 ist auch RAID-Z3, also eine RAID-Z-Implementierung mit 3 Paritätsbits, verfügbar.^[10] Die Geschwindigkeitsoptimierung durch parallelen Zugriff (RAID-0 – Striping) wird von ZFS automatisch vorgenommen.

Copy-On-Write erlaubt es, sehr effizient Snapshots zu erstellen, dies geschieht praktisch sofort und das Dateisystem bleibt online. Ein Snapshot friert den aktuellen Dateisystemzustand ein, darauf folgende Schreiboperationen repräsentieren jeweils die Differenzen zum letzten Snapshot. ZFS-Snapshots können zum Lesen gemountet oder auch archiviert (zfs send) werden, des Weiteren gibt es ZFS-Clones, diese entsprechen einem beschreibbaren Snapshot.^[11]

Neben den Möglichkeiten, Daten gegen Festplattenausfälle zu sichern, wird außerdem jeder einzelne Block im Dateisystem mit einer Prüfsumme versehen, sodass Datenfehler im Dateisystem (z. B. verursacht durch Datenübertragungsfehler) automatisch erkannt und ggf. ohne manuellen Eingriff behoben werden können. Der Performance-Verlust ist dabei minimal. Auch stellt ZFS sicher, dass der Zustand des Dateisystems zu jeder Zeit konsistent ist und deshalb auch beispielsweise nach einem Stromausfall kein Überprüfen des Dateisystems (per fsck) notwendig ist.

Im Oktober 2009 wurde Deduplikation für ZFS freigegeben.^[12] Dadurch werden Blöcke mit identischem Inhalt nur noch einmal physisch abgelegt, was hilft Plattenplatz zu sparen. Ein typischer Anwendungsfall ist das Anlegen von virtuellen Festplatten für virtuelle Maschinen, die jeweils alle eine Installation eines virtualisierten Betriebssystems enthalten. Eine weitere wäre aus gleichartigen Backups redundante Information zu entfernen. Deduplikation benötigt allerdings viel RAM, wodurch ZFS bei Nutzung als ressourcenhungrig bezeichnet wurde. In OpenZFS bietet sich daher eher die LZ4 Kompression an, die eher auf Geschwindigkeit als auf Kompression ausgelegt ist und keinen zusätzlichen Speicher benötigt.

Weiterhin ist ZFS ein relativ schnelles Dateisystem; aufgrund der integrierten RAID-Funktionen und End-To-End-Checksummen kommt es jedoch in der Geschwindigkeit auf älteren bzw. langsameren Systemen nicht an einfachere Dateisysteme heran, wobei die Performance von ZFS auch davon abhängig ist, welche RAID-Funktionalität genutzt wird und ob die einzelnen Platten unabhängig voneinander und gleichzeitig Daten transferieren können.

ZFS ist für sehr große Datenmengen ausgelegt, was durch die durchgängige Verwendung von 128-Bit-Zeigern erreicht wird. In der Praxis sind die Grenzen jedoch mit denen eines 64-Bit-Dateisystems vergleichbar. Bei der Implementation unter Solaris und beispielsweise auch FreeBSD werden 64-Bit-Datentypen verwendet, da es in C derzeit keine architektur- und compilerübergreifend nutzbaren 128-Bit-Datentypen gibt. Im Wesentlichen werden die ersten 64 Bits des Zeigers immer zusammen mit 64 Nullen abgespeichert, die bei der Verarbeitung ignoriert werden. Das ermöglicht es, bestehende Dateisysteme später als echte 128-Bit-Dateisysteme weiterhin verwenden zu können.

Sun entwickelte ZFS seit 2001 für das Betriebssystem Solaris und hat es 2006 mit Solaris 10 6/06 offiziell, inklusive kommerziellem Support, veröffentlicht. Zudem stellte Sun ZFS unter der Common Development and Distribution License (CDDL) für OpenSolaris (ab Build 27a) bereit. ZFS war auf allen von Solaris unterstützten Architekturen verfügbar: SPARC und x86 (sowohl 32-Bit-x86, IA-32, als auch 64-Bit, x64). Entworfen und umgesetzt wurde das Projekt vom Sun-Team unter der Leitung von Jeff Bonwick.

Auf Basis der Veröffentlichung von Sun wurde ZFS von Pawel Jakub Dawidek, mit Unterstützung durch Sun-Entwickler, bereits früh auf FreeBSD portiert^[13] und ist seit FreeBSD 7.0 (veröffentlicht Anfang 2008) im Basissystem enthalten, wurde damals aber noch als experimentell eingestuft; Mit FreeBSD 8.0 (Ende 2009) gilt es als stabil.^[14]

Auch Apple hatte ZFS-Unterstützung, vorerst nur lesend, in Mac OS X Leopard (veröffentlicht Ende 2007) integriert. Volle Implementierung war für die Server-Version 10.6 (Snow Leopard, 2009) angekündigt worden, wurde dann jedoch doch nicht umgesetzt. Stattdessen wurden auf Apples Open-Source-Projektseite Mac OS Forge Quelltext und Binärprogramme der ZFS-Portierung veröffentlicht. Am 23. Oktober 2009 gab Apple dort bekannt, dass das ZFS-Projekt eingestellt worden war.^[15] Don Brady, der bei Apple für die Entwicklung von ZFS zuständig gewesen war, gründete nach seinem Austritt bei Apple die Firma Ten’s Complement und entwickelte dort das Dateisystem unter dem Namen ZEVO weiter. 2012 wurde die Firma von GreenBytes übernommen,^[16] die 2014 wiederum von Oracle übernommen wurde.^[17][18] Obwohl ZEVO kostenpflichtige kommerzielle Software war^[19] gab es von GreenBytes 2012 eine Community Edition gratis.^[20]

Eine direkte Unterstützung innerhalb des Linux-Kernels ist aus Lizenzgründen problematisch,^[21] daher gibt es keine in die offiziellen Kernelquellen integrierte Linux-Implementierung.^[22] Allerdings wurde mit dem Projekt ZFS on FUSE eine Implementierung geschaffen, die ZFS auch unter Linux nutzbar machte.^[23] Diese lief jedoch im Userspace und hatte dadurch verschiedene Nachteile, unter anderem einen verminderten Datendurchsatz.^[24] ZFS on FUSE wird seit 2012 nicht mehr weiterentwickelt, die letzte Version ist 0.7.0 und erschien am 9. März 2011.^[25][26] Dessen Ersatz ist die OpenZFS-Portierung ZFS on Linux.

Nach der Übernahme von Sun durch Oracle (in den Jahren 2009 bis 2010) findet die Weiterentwicklung von ZFS im Rahmen von Solaris statt. Da diese jedoch nicht öffentlich ist, ist auch nicht leicht zu erkennen, wie engagiert Oracle dabei tatsächlich vorgeht.^[27]

Unter der Bezeichnung OpenZFS wurde im September 2013 damit begonnen, alle bisherigen, von Sun bzw. Oracle unabhängigen Entwicklungen in einem Projekt zusammenzuführen. Dabei sollte das Dateisystem unter anderem auch betriebssystemübergreifend vereinheitlicht werden.^[28][29][30]

Als Basis dienten die bereits vorhandenen Weiterentwicklungen, wie jene aus FreeBSD, die wiederum auf der CDDL-Veröffentlichung von Sun basieren. OpenZFS ist daher grundsätzlich zwar zu Oracle ZFS kompatibel, aber nicht vollständig.^[31][32] Von OpenZFS gibt es einzelne Entwicklungszweige für diverse Betriebssysteme:^[33]

• illumos – OpenZFS ist in das Betriebssystem integriert
• ZFS on FreeBSD (ZoF)
• ZFS on Linux (ZoL)
• OpenZFS on macOS (O3X)
• OpenZFS on Windows (ZFSin)

Das als Abspaltung von OpenSolaris hervorgegangene freie Betriebssystem illumos dient den OpenZFS-Portierungen als Basis. Neue Funktionen und Weiterentwicklungen werden so in illumos direkt eingepflegt und daraus von den Portierungen, und somit betriebssystemübergreifend, übernommen.^[34]

Auch in FreeBSD ist ZFS integriert und kann wahlweise genutzt werden. Einige Distribution verwenden sogar primär ZFS, wie beispielsweise TrueNAS Core (vormals FreeNAS^[35]). Von dieser Distribution ist auch eine Enterprise-Version, wahlweise mit zertifizierter Hardware, genannt TrueNAS Enterprise, verfügbar.^[36] Für beide Versionen trägt die Firma iXsystems die Projektverantwortung.

War das ab 2006 entwickelte ZFS on FUSE ursprünglich die einzige Möglichkeit unter Linux, so wurde nun mit OpenZFS ein alternativer Lösungsansatz möglich. Als ZFS on Linux werden dabei die nötigen Kernel-Module außerhalb des Kernel-Quellbaums gepflegt. Da diese Implementierung im Kernelspace läuft, entfallen die Nachteile, die sich zuvor aus der (notgedrungenen) Nutzung von FUSE ergeben hatten. Nach Aussagen der Entwickler ist dieses Projekt seit der im April 2013 veröffentlichten Version 0.6.1 reif für den produktiven Einsatz.^[37] Es ist u. a. in der Linux-Distribution Ubuntu von Canonical seit Version 16.04 („Xenial Xerus“) enthalten, muss jedoch vom Benutzer installiert werden. Die OpenZFS-Binärpakete werden dabei direkt aus dem offiziellen Repository bezogen.^[38]

Für das auf BSD basierende macOS von Apple gibt es mit OpenZFS on OS X (der Name von macOS bis 2016 war OS X) ebenfalls eine Portierung, die als Dateisystemtreiber die Verwendung von ZFS in macOS ab Mountain Lion (Version 10.8, 2012) ermöglicht.^[39]

Die Portierung auf Windows von Microsoft heißt ZFSin. Die erste Alpha-Version, ZFSin 0.1, wurde am 20. September 2017 für Windows 10 x64 veröffentlicht.^[40]

• ¹Beschränkungen ergeben sich nur durch aktuelle Implementationen. Per Definition könnte das Dateisystem weitaus größere Datenmengen speichern.

ZFS wurde für den Server- und Rechenzentrumseinsatz konzipiert. Eigenschaften, die in diesem Einsatzgebiet von Vorteil sind, erweisen sich teilweise als Nachteil beim Einsatz auf Arbeitsplatzrechnern und eingebetteten Systemen. So ist für eine Verwendung von ZFS, die Anlegung eines Pools notwendig, auch unterstützt ZFS bisher kein Shrinking von Partitionen, was die Handhabung auf Arbeitsplatzrechnern mit z. B. nur einer Festplatte, deutlich erschwert.

Die Verarbeitung der 128-Bit-Pointer (siehe Eigenschaften) ist vergleichsweise aufwendig, da sie nicht der Wortbreite aktueller CPUs entspricht, die typischerweise bei 32 Bit im Bereich Appliances und älterer Personal Computer sowie bei 64 Bit im Bereich aktueller Einzelplatzrechner und den meisten Servern liegt. Somit ist auf derartigen Systemen keine optimale Performance gegeben. Überhaupt bringt die 128-Bit-Auslegung nur dort Vorteile, wo ungewöhnlich große Datenmengen gespeichert werden sollen. Im SOHO-Bereich hingegen sind je nach Datenträgergröße 32- oder 64-Bit-basierte Dateisysteme bezüglich der ablegbaren Datenmengen ausreichend (vergl. Btrfs, Ext2, FAT32, HFS+, NTFS, UFS usw.), die üblicherweise schon unter Verwendung von 32-Bit-Datentypen Dateisysteme mit einer Kapazität von knapp 16 Terabyte (z. B. ext2) verwalten können, bei 64-Bit-Pointern natürlich weitaus mehr, beispielsweise ca. 8 Exabyte (8 Millionen Terabyte) bei XFS. Die 128-Bit-Auslegung bedeutet hier also nur zusätzlichen Rechen- und Zeitaufwand sowie einen etwas erhöhten Platzbedarf auf dem Medium.

ZFS nutzt Copy-On-Write und ein Journal (ZIL, ZFS Intent Log). ZFS kann so zu jeder Zeit auf ein konsistentes Dateisystem zurückgreifen. Sicherungen und Rücksicherungen von Blöcken sowie Dateisystemprüfungen sind so bei Abbrüchen wie einem Stromausfall nicht nötig. Inkonsistenzen in Metadaten und Daten werden bei jedem Lesevorgang automatisch erkannt und bei redundanter Information soweit möglich automatisch korrigiert. Die Leistung von solchen Dateisystemen nimmt allerdings ab ca. 80 % Belegung spürbar ab, wie bei allen anderen Dateisystemen auch.

Zur theoretischen Kapazität von ZFS kursiert folgendes Zitat:

Zum Verständnis des Zitats sei angemerkt, dass die Speicherung oder Übertragung einer Informationseinheit – z. B. ein Bit – an die Speicherung oder Übertragung von Energie gekoppelt ist, da Information ohne ein Medium nicht existieren kann, d. h. Information ist an die Existenz unterscheidbarer Zustände gekoppelt. Um einen Speicherpool mit 128-Bit-Adressierung zu füllen, wäre eine Energiemenge notwendig, die größer ist als die Menge an Energie, die ausreichen würde, um die irdischen Ozeane zu verdampfen. Gleichzeitig ist „boiling the ocean“ im Englischen ein idiomatischer Ausdruck dafür, etwas Unmögliches zu versuchen. Bonwick illustriert damit, dass ZFS für alle Zukunft genügend Kapazität bietet.

Bemerkung

Die mindestens notwendige Energie zur Speicherung von 2¹²⁸ Bytes beträgt (bei 20 °C) 2100 TWh und ergibt sich nicht aus der Quantenmechanik, sondern aus der Thermodynamik. Sie geht auf Boltzmann und Planck zurück, siehe Boltzmann-Konstante. Damit kann man knapp 3 Kubikkilometer Wasser von 20 °C verdampfen, das ist weniger als ein Hundert Millionstel der Wassermenge unserer Ozeane und deutlich weniger als die Wassermenge des Bodensees.

• bcachefs
• btrfs
• Liste von Dateisystemen

• Das ZFS-Dateisystem – Die eierlegende Wollmilchsau von Sun Microsystems – CRE-Sendung 049
• Solaris 10: New Features – ORDIX news Artikel
• FreeBSD 7.0 mit experimenteller Unterstützung von ZFS – Golem Artikel
• ZFS unter Linux
• Grundlagenartikel zu RAID-Z – Storage-Insider

• ZFS auf FreeBSD
• ZFS auf Illumos (OpenSolaris-Fork) – Liste der Distributionen
• ZFS unter Mac OS X (10.5 und 10.6) – Repository auf GitHub
• Videos über ZFS auf der Oracle Solaris Seite
• OpenZFS – Open-Source-Projekt zur Verbreitung und Verbesserung von ZFS

1. ↑ oracle.com
2. ↑ freebsd.org
3. ↑ ixsystems.com
4. ↑ ZFS is Here! Unraid 6.12.0-rc1 Now Available. In: unraid.net. 15. März 2023, abgerufen am 13. Juni 2023 (englisch). 
5. ↑ wiki.netbsd.org
6. ↑ openzfsonosx.org
7. ↑ zfsonlinux.org
8. ↑ openzfsonwindows.org
9. ↑ vgl. You say zeta, I say zetta
10. ↑ Adam Leventhal: Triple-Parity RAID-Z in Adam Leventhal’s Weblog; abgerufen am 2. November 2009.
11. ↑ Amy Rich: ZFS. Abgerufen am 17. Juni 2010. 
12. ↑ Jeff Bonwick: ZFS Deduplication. Abgerufen am 19. Juni 2010. 
13. ↑ lists.freebsd.org
14. ↑ svn.freebsd.org
15. ↑ Vgl. ZFS Project Shutdown (Memento vom 29. Oktober 2009 im Internet Archive) (23. Oktober 2009): „The ZFS project has been discontinued. The mailing list and repository will also be removed shortly.“
16. ↑ Chris Mellor: Greenbytes crunches up ex-Apple man's Zevo ZFS. The Register, 23. Juli 2012, abgerufen am 5. Mai 2020 (englisch). 
17. ↑ Oracle Buys GreenBytes. Oracle, abgerufen am 5. Mai 2020 (englisch): „On May 15, 2014, Oracle announced it has agreed to acquire GreenBytes, a provider of ZFS technology with domain expertise in the areas of deduplication, replication, and virtualization.“ 
18. ↑ Chris Mellor: Dedupe, dedupe... dedupe, dedupe, dedupe: Oracle polishes ZFS diamond. The Register, 11. Dezember 2014, abgerufen am 5. Mai 2020 (englisch). 
19. ↑ Ben Schwan: Einfach zu installierendes ZFS für den Mac. In: Heise online. 1. Februar 2012. Abgerufen am 5. Mai 2020.
20. ↑ Ben Schwan: ZFS-Unterstützung ZEVO demnächst kostenlos. In: Heise online. 27. Juli 2012. Abgerufen am 5. Mai 2020.
21. ↑ Thorsten Leemhuis: Juristen uneins bei ZFS-Lizenzproblematik in Ubuntu 16.04 LTS. In: Heise online. 29. Februar 2016. Abgerufen am 2. Mai 2020.
22. ↑ Fabian A. Scherschel: Linus Torvalds erteilt ZFS im Linux-Kernel erneute Absage. In: Heise online. 10. Januar 2020. Abgerufen am 22. Mai 2020.
23. ↑ Archivlink (Memento vom 13. Mai 2013 im Internet Archive)
24. ↑ Ben Martin: Using ZFS though FUSE. Linux.com, 19. Juni 2008, abgerufen am 5. Mai 2020 (englisch): „Write operations do suffer a performance loss with zfs-fuse as apposed to an in-kernel filesystem…“ 
25. ↑ Announcing: ZFS-fuse 0.7.0 (Memento vom 30. Dezember 2012 im Internet Archive)
26. ↑ github.com/zfs-fuse (abgerufen am 5. Mai 2020)
27. ↑ Thorsten Leemhuis: Wachstumsprobleme – Besonderheiten beim Zusammenspiel von Linux mit großen Festplatten. In: c’t. Band 2020, Nr. 4. Verlag Heinz Heise, 31. Januar 2011, S. 44, Abschnitt „ZFS != OpenZFS != ZoL“ (Heise Select [abgerufen am 2. Mai 2020]): „Der mehrdeutige Begriff steht im engeren Sinne tatsächlich für die ZFS-Implementierung von Oracle, die seit der Sun-Übernahme von 2010 hinter verschlossenen Türen entwickelt wird. Von außen ist nicht recht zu erkennen, wie engagiert Oracle da noch zu Werke geht – jenseits einer High-End-Storage-Appliance und den Solaris-Überbleibseln ist bei Oracle kaum etwas von ZFS zu sehen.“ 
28. ↑ OpenZFS: Community will ZFS-Implementierungen vereinheitlichen – Artikel bei Golem.de, vom 18. September 2013 (Abgerufen am: 24. September 2013)
29. ↑ Oliver Diedrich: OpenZFS. In: Heise online. 18. September 2013. Abgerufen am 2. Mai 2020.
30. ↑ Announcement (englisch) – Ankündigung bei OpenZFS, vom 17. September 2013 (Abgerufen am: 24. September 2013)
31. ↑ Thorsten Leemhuis: Wachstumsprobleme – Besonderheiten beim Zusammenspiel von Linux mit großen Festplatten. In: c’t. Band 2020, Nr. 4. Verlag Heinz Heise, 31. Januar 2011, S. 44, Abschnitt „ZFS != OpenZFS != ZoL“ (Heise Select [abgerufen am 2. Mai 2020]): „Diese Implementierung [ZFS von Oracle] liegt aber nicht offen und stünde daher nicht für die Integration in Linux zur Verfügung. Dass Torvalds den ZFS-Code-Stand von 2010 meint, scheint unsinnig: Der passt gar nicht an Linux dran und hinkt der Entwicklung ohnehin stark hinterher. Aus diesem Code ist OpenZFS hervorgegangen, das einen ähnlichen, im Detail aber anderen Funktionsumfang bietet – und daher nicht vollends kompatibel mit ZFS ist. Auch ZFS on Linux (ZoL), das Linux-Distributionen und -Anwender zur ZFS-Unterstützung nutzen, basiert auf OpenZFS. Das erfreut sich bester Gesundheit, wie Torvalds in seinem zweiten Forenbeitrag auch anführt.“ 
32. ↑ FAQ. (Wiki) In: OpenZFS Wiki. Abgerufen am 5. Mai 2020 (englisch, Mit Pool-Version 28 von OpenZFS mit ZFS von Solaris und ZEVO kompatibel.). 
33. ↑ OpenZFS. (Wiki) Abgerufen am 2. Mai 2020 (englisch). 
34. ↑ Philip Paeps: The ZFS filesystem. (PDF; 1,4 MB) COSCUP 2019. 18. August 2019, S. 26-27, abgerufen am 5. Mai 2020 (englisch): „illumos, a fork of the last open source version of Solaris, became the new upstream for work on ZFS“ 
35. ↑ Features – FreeNAS – Open Source Storage Operating System. In: FreeNAS – Open Source Storage Operating System. (freenas.org [abgerufen am 2. April 2018]). 
36. ↑ TrueNAS All-Flash and Hybrid Storage | ZFS Storage Appliance – FreeNAS – Open Source Storage Operating System. In: FreeNAS – Open Source Storage Operating System. (freenas.org [abgerufen am 2. April 2018]). 
37. ↑ admin-magazin.de
38. ↑ Thorsten Leemhuis: Linux-Distribution Ubuntu 16.04 LTS freigegeben. In: Heise online. 21. April 2016. Abgerufen am 2. Mai 2020.
39. ↑ OpenZFS on OS X. Abgerufen am 2. Mai 2020. 
40. ↑ First binary 20170920 (englisch) von ZFSin (OpenZFS für Windows 10 x64)