(Proxmox / TrueNAS) HBA-Alternative zu Dell H330 (LSI SAS3008)

[hs_warez]

Hallo!

Habe seit einigen Jahren einen Dell H330 (mit IT-Firmware) HBA für mein "bare metal TrueNAS" laufen -hier hängen 2 SATA SSD's + 2 HDD's drauf.
Einziges "Problem" - der "nackte" Controller braucht grob um die 15 Watt.

Gäbe es hier eine "sinnvolle" stromsparendere Alternative?


TrueNAS läuft noch bare metal - möchte aber bald mal via Proxmox virtualisieren und hier dann einen ganzen Controller durchreichen.


Danke!


LG

 

[pwnbert]

9400-16i / Lenovo 430-16i, ca. 110€ mit SATA Kabeln aus China.
So 6-8W und dicker Kühlkörper.

PS: der -8i braucht das gleiche und ist nicht billiger.
ASM1166 könntest dir überlegen, per Windows flashbar gibts wohl neuere Firmware die ASPM ganz gut können sollte. Ob Passthrough etc. alles klappt, musst halt testen.

Der 9300er ist wohl der "hungrigste", 9207-8i braucht weniger, aber ist halt alt und meh und hat mini Kühler drauf die total heiß werden.

 

[hs_warez]

Ok, dann suche ich mal bezüglich 9400-16i.

Danke!

 

[BobbyD]

Ggf. den SATA-Controller vom Board durchreichen.

 

[pwnbert]

Ja, ist in jedem Fall einen Versuch wert.

Manche Boards haben ja so Frickellösungen, dass ein paar SATA direkt über PCH sind und ein paar über Controller, das ist in so einem Fall eine tolle Sache (wenns geht, IMMOU mäßig).

Einfach mal reinschauen und testen.

 

[Supaman]

Für 4x Sata braucht man keinen dedizierten Raid Controller... es gibt genug Boards mit 6-12 SATA Onboard, oder PCIe Steckkarten, oder auch so halbe Frankenstein Lösungen wie 5x SATA als Adapter in einem m2 Slot. Die Raid Funktionalität kann man über TrueNAS abbilden.

 

[hs_warez]

Ggf. den SATA-Controller vom Board durchreichen.

die fertige Ausbaustufe wäre dann:
1x SATA SSD für Proxmox
2x NVME SSD's für die VM's
2x SSD + 2x HDD - direkt durchgereicht an TrueNAS

Ob das mit meinem Gigabyte-Board ginge!?
Hm, das müsste ich dann wohl in "echt" mal testen.

Für 4x Sata braucht man keinen dedizierten Raid Controller... es gibt genug Boards mit 6-12 SATA Onboard, oder PCIe Steckkarten, oder auch so halbe Frankenstein Lösungen wie 5x SATA als Adapter in einem m2 Slot. Die Raid Funktionalität kann man über TrueNAS abbilden.

Hm, interessant.

Habe das mit dem HBA schon einige Zeit laufen und bin bisher leider noch nicht zur Umstellung auf Proxmox gekommen.
Vorher lief das ganze Setup natürlich einfach ohne HBA - TrueNAS-Datenträger also direkt am Board angesteckt.

Warum liest man dann immer von einem "guten" Controller mit "it-Firmware", wenn man dann genauso einen billigen SATA-Controller fürs Durchreichen bei Proxmox nehmen kann!?



Danke!


LG

 

[Supaman]

Warum liest man dann immer von einem "guten" Controller mit "it-Firmware", wenn man dann genauso einen billigen SATA-Controller fürs Durchreichen bei Proxmox nehmen kann!?

Kommt auf den Anwendungsfall an. Für ein "klassische" Raid Setup für Windows ist ein echter Raid Controller, idealerweise mit BBU nach wie vor eine gute Sache, jedenfalls für SATA Datenträger.

ZFS mag keine Raid Controller und braucht auch keinen, daher: Raid Controller auf IT Mode geflasht -> Controller ist dann eine (dumme) XX-Port Sata Karte. Das wurde dann gerne genommen, wenn man viele Datenträger anschliessen wollte ODER einen ganzen Controller dediziert für eine VM (z.B. TrueNAS) bereitstellen wollte. Weil: alles was an dem Controller hängt, gehört der VM, und dann pfuscht da keine andere Instanz mit rein oder rum.

 

[underclocker2k4]

Weil LSI Controller (und um die geht es eigentlich und nicht um "gute") einen breiten Treibersupport über verschiedenen OSen haben.
Für die Grundfunktion tut es jeder SATA Controller.
Zudem kommt noch der Support für SAS, der weitere Optionen bei der Laufwerksauswahl bereitstellt.

 

[hs_warez]

Hm, wäre halt interessant wie viel/wie wenig so ein "normaler" SATA-Controller im Vergleich zu einem "verdummten" RAID-Controller braucht!?

Ist halt trotzdem interessant, dass in sämtlichen Beiträgen/HowTo's/Videos immer nur von einem "geflashten" RAID-Controller geredet wird, wenn's ein billiger/neuer SATA-Controller auch tut.

 

[underclocker2k4]

Wie gesagt weil LSI eben der Goldstandard ist und die preislich mitunter für <5 Dönerpreise hinterhergeworfen werden.

Bei der Leistungsaufnahme würd so ein einfacher SATA-Controller <50% vom LSI haben.

 

[pwnbert]

Hm, wäre halt interessant wie viel/wie wenig so ein "normaler" SATA-Controller im Vergleich zu einem "verdummten" RAID-Controller braucht!?

Google nach ASM1166, das ist das "beste" "normale".
9400-16i ist ihmo das beste, was man P/L bekommt (16i ist natürlich groß, 8i ist aber weder billiger noch sparsamer), der ist bei ca. 6-8W meine ich.

Wie gesagt weil LSI eben der Goldstandard ist und die preislich mitunter für <5 Dönerpreise hinterhergeworfen werden.

Naja, um ein Deluxe-Döner ist aber nur der 2308-8i von Inspur sinnvoll, der 3008er braucht eigentlich zu viel Strom (inwiefern der im IT Mode "besser" als der 2308er mit seinem Uralt-Bios ist... kein Plan) imho, den hat er ja schon. 9400 kostet dann schon Geld (ca. 100€), 9500 und neuer mal außen vor.


Aber ja, ASM1166 vs. 2308-8i (ca. preisgleich), da nimm ich den LSI mit dem blauen Breakout-Kabel-Satz aus China.
Ausser man zählt Watt, da ist der ASM1166 evtl. gar ned so übel.


Allgemein liest man gutes über den ASM1166, irgendwer hier war aber letztes Jahr irgendwann nicht happy damit. Schwer zu sagen.

LSI funktioniert halt einfach.


PS:
Upgrade vom 9300 zum 9400 wird aber nie nen Break Even haben mit seinen 5W weniger (braucht der echt 15W? So 12 hätte ich gemeint, erlesen zu haben...).
Downgrade zum 2308-8i ist ja auch Bullshit.

 

[underclocker2k4]

Naja, um ein Deluxe-Döner ist aber nur der 2308-8i von Inspur sinnvoll, der 3008er braucht eigentlich zu viel Strom

Vorteil ist 12gbit/s SAS und, für ESX, nen besserer Treibersupport.
Für einfach so etwas NAS tut es nen 2000er LSI alle mal, habe aus dem Grund auch ein paar, weil man die echt hinterhergeworfen bekommt, die kauft man einfach kistenweise.
Vom Treiber her, denke ich, wird sich in einer "Linux"welt nicht viel ändern. Da haben wir vermutlich 100TB USB-Sticks, bis sich da was ändert.

Ansonsten ist LSI halt LSI. Ich mache mit den schon seit der guten alten SCSI-Zeit rum. (da gabs noch mehr Hersteller), das passt eigentlich.

Fujitsu Raid Controller D2607 mit IT Mode BIOS wäre halt ne Alternative, wobei ich nicht glaube, dass sich da viel tut, evtl. 5W weniger? (davon habe ich ein paar, neben 3008er Versionen)

Am Ende kann man sagen, kein Controller = kein Stromverbrauch.
Ich würde versuchen das BootLW auf ne m.2 zu packen, ggf. sogar als RAID1 und kombiniert für VMs/Apps.
Dann ist der onboard SATA frei und kann ggf. komplett durchgereicht werden.
Im Zweifel muss man sich mit nem M.2-PCIe Adapter behelfen.

 

[pwnbert]

Für einfach so etwas NAS tut es nen 2000er LSI alle mal, habe aus dem Grund auch ein paar, weil man die echt hinterhergeworfen bekommt, die kauft man einfach kistenweise.

2308 ist auch schon PCIe 3.0 ...
SAS ist halt so ne Sache, wenn man irgendwo SSDs/HDDs her bekommt klar, aber so als "Consumer" wsl. eher unnötig, aber klar.

D2607

Ist halt noch ein 2008er mit PCIe 2.0, 2308/9207-8i darfs imho sein, ist auch nicht teuer, hat dann PCIe 3.0, was auf Consumer Boards mit nur 4 Lanes oder gar nur 1 Lane dann doch flotter ist....

2308i braucht ca. 2W mehr als der 9400-16i, so 8-9 gegen 5-6W etwa, wobei die Zahlen natürlich mit etwas Spielraum zu betrachten sind, ich tu mir schwer, das genauer einzugrenzen... der 9300er soll der hungrigste sein.

 

[Supaman]

GitHub - lrq3000/lsi_sas_hba_crossflash_guide: A 2023 guide and toolset to crossflash LSI SAS HBA controllers, including DELL and Fujitsu

A 2023 guide and toolset to crossflash LSI SAS HBA controllers, including DELL and Fujitsu - lrq3000/lsi_sas_hba_crossflash_guide

github.com

Die LSI kann man auch CrossFlashen wie man lustig ist, und auf den Hersteller Anpassen wie man das grade braucht, oder was am billigsten ist.

 

[pwnbert]

Auf Ebay gibts eh total viel schon im IT mode mit passenden Kabeln... aus China meist.

 

[b99]

also rein von der Kompatibilität für aktuellere Hardware kann ich die LSI-9500er HBAs empfehlen. Wenn man da eine Menge Platten oder SSDs dran hat, bringen die alles über PCIe 4.0 ins System. Hab da selbst einen 9560-8i in meinem Desktop im Raid-Modus mit 4x 20TB SAS am laufen. Die Karten rennen einfach nur. Macht spaß damit. Geschwindigkeit passt mit 4x Seagate ST20000NM002D

 

[underclocker2k4]

Ist halt noch ein 2008er mit PCIe 2.0, 2308/9207-8i darfs imho sein, ist auch nicht teuer, hat dann PCIe 3.0, was auf Consumer Boards mit nur 4 Lanes oder gar nur 1 Lane dann doch flotter ist....

Selbst ne PCIe 2 x1 macht noch 500MB/s. Das reicht für 2x 2,5GBE aus.
Der Controller dürfte hier aber in einem deutlich breiteren Slot gesteckt werden.

Ansonsten kostet ein 2308 min. 3x soviel wie ein 2008. (.de/.eu)

Was man hier durchrechnen sollte ist der ROI.
1W 24/7 sind ~3EUR/Jahr an Kosten.

Ich würde, wie gesagt, einfach zusehen, ob man den onboard SATA freibekommt und ob man den durchgereicht bekommt.
Wenn ja, dann eben wie oben vorgeschlagen.
Denn, wenn man den Controller rauswirft, hat man gar keine Kosten mehr.

 

[pwnbert]

Supermicro 9207-8i gibts auf ebay aus China mit gratis Versand um 24€.
Inspur 9207-8i gibts mit Kabel auf 8x SATA um 32€ (auch aus CN mit gratis Versand).

Wüsste jetzt nicht, warum man in de/eu ein Vielfaches zahlen sollte - das kann man durchaus kaufen.

War ja nicht böse gemeint.


Ja, ROI wirds whl nicht geben.

 

[underclocker2k4]

Wüsste jetzt nicht, warum man in de/eu ein Vielfaches zahlen sollte - das kann man durchaus kaufen.

Weil man ggf. das staatliche Geschäftsgebaren nicht unterstützen mag?

 

[pwnbert]

Nun, ob das der richtige Ort zum politisieren ist?
Aus China kommt wohl der Großteil der Hardware, egal, wo man sie am Ende kauft.

Aber ja, klar, wenn das für die persönliche Entscheidung relevant ist, ändert das die Sache natürlich.