[Sammelthread] ZFS Stammtisch

[andrer250282]

Wenn man unter Free-BSD oder Linux einen Pool mit ACL Rechten sichert und wiederherstellt, hat man nur die uid/gid als Datei ACL-Referenz. Windows (AD) Rechte erhält man erst durch ein Mapping der uid/gid Nummern z.B 101 auf eine Windows SID wie S-1-5-21-722635049-2797886035-3977363046-2147484648 bei dem die Domäne Teil ist und die daher weltweit eindeutig ist.

Okay, versteh ich. Aber ist das was tendenziell schlechtes? Also habe ich damit Probleme? Eigentlich doch nicht oder?
Wenn ich einen TrueNAS Pool exportiere und in einem anderen TrueNAS einbinde (natürlich beide müssen AD Clients sein!) dann müsste das so doch weiterlaufen oder?
Von TrueNAS exportieren und in System XY (nicht-TrueNAS) wird natürlich nicht laufen, das ist klar

 

[gea]

Okay, versteh ich. Aber ist das was tendenziell schlechtes? Also habe ich damit Probleme? Eigentlich doch nicht oder?
Wenn ich einen TrueNAS Pool exportiere und in einem anderen TrueNAS einbinde (natürlich beide müssen AD Clients sein!) dann müsste das so doch weiterlaufen oder?
Von TrueNAS exportieren und in System XY (nicht-TrueNAS) wird natürlich nicht laufen, das ist klar

Nicht ganz:
Unter Windows und Solaris/Illumos sind die ACL Referenzen in den Dateien (SID) gespeichert. Da muss man nichts beachten. Da reicht es in der Tat, dass die jeweiligen Rechner AD Mitglied sind um die SID aufzulösen.

Linux und Free-BSD können SID nicht, die verstehen ausschließlich uid/ gid als Dateireferenz und es ist eine Instanz zum übersetzen notwendig und die heißt SAMBA.

Damit da Rechte erhalten bleiben, muss SAMBA ein mapping durchführen, das quasi "faken damit eine uid 1234 auf dem einen Rechner auf die gleiche SID zeigt wie uid 1234 auf dem anderen. Da ist also die exakte SAMBA Konfiguration der Schlüssel. Einfach so gehts da nicht.

 

[sch4kal]

Diese zfs rewrite Funktionalität klingt sehr interessant 🧐

OpenZFS 2.3.4 Brings Linux 6.16 Kernel Compatibility, "zfs rewrite" Command - Phoronix

www.phoronix.com

 

[gea]

OmniOS r151054r (2025-09-04)

Weekly release for w/c 1st of September 2025

Release Notes

illumos based server OS with ZFS, Bhyve, DTrace, Crossbow, SMF and Linux zone support

omnios.org

This update requires a reboot

Changes

• SMB failed to authenticate to Windows Server 2025.
• Systems which map the linear framebuffer above 32-bits caused dboot tooverwrite arbitrary memory, often resulting in a system which did not boot.
• The rge driver could access device statistics before the chip was set up.
• The rge driver would mistakenly bind to a Realtek BMC device.

 

[Mac_leod]

hi,
ich würde gern meine truenas vm mit mehr Speicher versorgen, habe aber nur noch 2x PCIe 2.0 1x Slots auf dem Board.
Könnt ihr mir einen Raidcontroller empfehlen, den ich im esx7 per pathtrough durchreichen kann?
4 Sata Platten möchte ich verwenden.
Proxmox kompatibel sollte er auch sein, denn ich möchte den hypervisor tauschen.

hmm, maximal 500 mb/s sind echt wenig für einen 2.0 1x Slot, ich bin am überlegen ob ich das Board tauschen sollte.

 

[Trambahner]

Eher 400 bis max. 450. Denn du musst noch den Protokolloverhead abziehen . B450 ist halt extrem dünn was der Chipsatz kann.

Sprich 2 Sata HDDs kannst dranhängen, aber selbst da bist schon über der Grenze; moderne Sata-Disks haben teilw. bis knapp an die 300 mb/s sequentiell auf den äusseren Spuren. Ist es mehr Random I/O, dann reichts natürlich weit weit aus.
> Kann man für HDDs machen, ist aber nicht ideal.

Was hast Du im x16 Grafikslot für Controller oder SSDs drin? Und was für ne CPU?

 

[pwnbert]

Könnt ihr mir einen Raidcontroller empfehlen, den ich im esx7 per pathtrough durchreichen kann?

HBA oder Raidcontroller?
Inspur 9207-8i
Bekommst mit 8x SATA-Kabel um knappe 30€ inkl. Versand auf ebay (aus China) (schon mit IT Firmware, also HBA). Der Kühlkörper ist winzig und bekommt gefühlt 70°C, macht aber nix... kann PCIe 3.0, also auch auf PCIe 3.0x1 irgendwo halbwegs sinnvoll verwendbar. Stromverbrauch so lala, 8W +/-...
P/L der Hit.

Moderner gibts den 9400-16i zum vernünftigen Preis (Lenovo, ebay, auch aus China, ca.100€ mit SATA Kabeln), dicker Kühlkörper, recht sparsam (so 5-6W hätte ich gesagt), die nvme Funktion bekommt man privat damit wsl. eher nicht zum laufen (braucht spezielle Kabel, recht selten usw.).

 

[Mac_leod]

Natürlich ist ein HBA gemeint, sorry.
CPU ist ein Ryzen 7 5700G.
Auf dem 16x Slot steckt schon ein HBA der 2 SSDs und 2 HDDs an die Truenas VM durchreicht.
Auf dem zweiten 16er Slot steck eine 10G Karte.
Im NVMe Slot steckt eine optane Disk, für die zfs Cache Thematik.

Ich habe also nur noch die Wahl zwischen 2 Slots mit jeweils PCIe 2.0 1x.

Der zweite HBA, soll einfach nur ein großes Grab für Fotos werden, um Google und Apple Medien zu spiegeln.
Dafür sollte die Performance eigentlich reichen.

 

[Trambahner]

Ähm, seh ich das richtig das das ist ein Raidcontroller mit Cache und Akku lt Foto? Das ist schlecht für ZFS. Oder hast Du da irgendwie ne IT-Firmware drauf die den Cache umgeht?
Ich hoffe, Du reichst da keine vom Raidcontroller selber gebildeten raid-Volumes durch; das wäre völlig kontraproduktiv für ZFS.

Und warum sind da nur 2 SSDs und 2 HDDs dran? Das wirkt auf mich wie Verschwendung von Lanes.

Ein 9400-16i wie von @pwnbert vorgeschlagen wäre was: 8 Lanes gen3, mit dem Ding bekommst Du doch 7.5 Gbyte/s durch; das langt für jede Menge Sata-SSDs und HDDs.
Ein 9400-16i liegt bei mir im Schrank; der spielt derzeit Reservecontroller (wird nicht verkauft) wenn ich doch mal mehr Sata-Ports brauche.
Nen alten 9211 hab ich kürzlich erst verloren (warum auch immer rennt der nicht mehr). 😵 machs gut, alter umgeflashter M1015, mit dir hab ich ZFS, ESXI und Passthrough entdeckt.

Der zweite x16 ist eh nur ein x4 x gen2 => das passt für die 10G Karte.
Die Optane ist ne P1600 als Slog, oder? (Btw, als Hinweis, das ist funktional kein Cache).

 

[Mac_leod]

Ich such gerade weiter vorn den Beitrag von mir, wo es um genau den Controller ging, der mir für zfs empfohlen wurde.
IT Firmware ist drauf.
Ich reiche den kompletten Controller an die TruenasVM durch.
Diese erkennt die 4 Platten einzeln, woraus dann 2x ein RAIDZ1 gebaut wird.
Ein langsames und ein schnelles Tier.
SLOG und auch der Cache liegt auf der Optane.

Den aktuellen Controller zu tauschen bzw. zu prüfen, ob der mit den passenden Fan-out Kabeln pro minisas Port dann 4 SATA Disks anstatt nur 2 betreiben kann, auf die Idee bin ich noch gar nicht gekommen.
Im besten Fall müsste ich nur Kabel bestellen.
Das ist natürlich die bisher beste Idee!

Im ESX wird die Karte so angegeben:
"Avago (LSI) Logic Fusion-MPT 6GSAS SAS2308_2 PCI-Express"

 

[AliManali]

Kabel würde ich in der Bucht bestellen. Bzw. gleich nen HBA samt Kabel, die kriegst Du um die 35-50$. Das kosten bei uns die Kabel alleine schon um den Dreh, wenn nicht mehr.