[Kaufberatung] Empfehlung für Home Server gesucht (Proxmox oder Unraid!?)

[klayman]

Hallo zusammen,

Ich bin auf der Suche nach einer HW-Empfehlung für einen Homeserver mit folgenden Eigenschaften/Anforderungen:

1. Proxmox mit
   1. VM für HomeAssistant
   2. VM mit Windows 11 für ETS 6 (KNX Konfigurationssoftware, braucht 4C/8GB)
   3. Paperless im Container
   4. NAS für Photos/Lightroom Katalog (ca 3TB)
   5. Bei Bedarf 1-2 weitere VMs zum rumprobieren…
2. 19 Zoll Gehäuse, Lautstärke egal, steht im Keller
3. USB-C Port für ext. Platten
4. 10GBASE-T (nice to have, macht bei Photoshop und Lightroom mehr Spaß)
5. Integrierte Grafik für lokalen Monitor und Tastatur/Maus
6. Niedriger Stromverbrauch (wie es bei den Wünschen eben geht)

Bzgl. RAID, ECC und Backup bin ich mir noch nicht so sicher wie das mit Proxmox am Besten geht. Aktuell habe ich einen Windows Hyper-V mit VM für HA und VM für Windows Dateiserver. Gespeichert wird 1x pro Monat zu Amazon Glacier und unregelmäßig auf externe Platten. So viel ändert sich aber nicht. Funktionieren read only Snapshots z.B. von ZFS eigentlich auch auf hyper-v Ebene?
RAID ist schön damit gerade HomeAssistant immer verfügbar ist (wobei es da mehr ums Logging geht, Steuerung geht auch fast alles über KNX), oder Paperless wenn ich gerade nicht zu Hause bin. Wenn das also mit zwei oder drei zusätzlichen Platten machbar ist, dann gerne…
ECC scheint ja gerade bei modernen Dateisystemen sinnvoll zu sein. Also warum nicht…

Danke für Eure Hilfe
Klayman

 

[klayman]

Moin,

nach weiterem Stöbern hier im Forum habe ich mal versucht mir ein paar Komponenten zusammenzustellen. Sie orientieren sich an "Der Gerät 2.0". Was haltet Ihr davon: https://geizhals.de/wishlists/4441799
Noch zwei drei Fragen dazu:

• Die M2 SSDs sind für OS und VMs/Container vorgesehen. Macht ein RAID-Verbund hier überhaupt Sinn, fallen SSDs öfter aus als die übrigen Komponenten? Denn dann wäre ja nichts gewonnen...
• Brauche ich eine SSD als Cache Drive wenn die Datenplatten auch SSDs sind?
• ECC kostet mal schlappe 500€ extra in der Größenordnung, oder hab ich da was falsch interpretiert?

Viele Grüße,
Klayman

 

[Haldi]

• Die M2 SSDs sind für OS und VMs/Container vorgesehen. Macht ein RAID-Verbund hier überhaupt Sinn, fallen SSDs öfter aus als die übrigen Komponenten? Denn dann wäre ja nichts gewonnen...

Nein die fallen nicht häufiger aus wenn man Qualität verbaut.
Raid für OS lohnt sich nur wenn man eine schlechte Backup Strategie hat und das System nicht mal eben 1-3h down sein darf.

• Brauche ich eine SSD als Cache Drive wenn die Datenplatten auch SSDs sind?

Nein.
SSD Cache ist eh so ne Sache die sich nur in ganz spezifischen Anwendungsfällen lohnt. Sonst ist mehr RAM als Cache immer vorzuziehen.

• ECC kostet mal schlappe 500€ extra in der Größenordnung, oder hab ich da was falsch interpretiert?

Tja. DDR5 halt.
Wobei selbst ddr4 noch Ärsche teuer ist... 90€ anstatt 35€ für nen 32gb Riegel.

 

[pwnbert]

Asrock Live-Mixer B850, wenn schon 19", dann Full-Size. Viel PCIe und so.

Die BX sind Scheiße, nimm auch M.2, hat besseres P/L, SATA kannst eigentlich nur 870 EVO kaufen, was zu teuer ist.

 

[klayman]

Danke für Eure Kommentare. Für ECC brauch ich echt noch Überwindung - oder ne Horrorstory ink. zerstörter Backups ;-)
Zum Board: Würde ein größeres Board mit mehr Features nicht auch mehr Strom verbrauchen? Ob da viel leerer Raum im Gehäuse ist oder nicht ist mir ziemlich egal. Nur steht eben schon ein 19 Zoll Schrank im Keller für das Netz, da ist es naheliegend auch den Homeserver mit rein zu stecken. Meine aktuelle Kiste hab ich vor 10 Jahren gebaut und seitdem nur 1x geöffnet um die CMOS Batterie zu wechseln.
Zur SSD: Die M2 Module scheinen in fast allen Kategorien 10x so performant zu sein wie ein SATA Modell. Dann also lieber 2-4 M2 Karten auf einer Erweiterungskarte? Funktioniert es mit o.g. Board und der M2 Card von ASROCK (Link)? Das Board hat PCIe 4.0 x16 und kann wohl bifurcation...

Puh, je mehr ich mich damit beschäftige, desto komplizierter wird's ;-) Jetzt stellt sich noch die Frage ob Proxmox wirklich das richtige ist. Gemessen an meinen Fähigkeiten und meiner Zeit komme ich wahrscheinlich mit Unraid schneller voran, auch wenn das Lizenzgebühren kostet. Dann wiederum brauche ich keine Systemplatte, weil das ja nur von einem USB-Stick bootet... Nach ein paar Videos dazu finde ich das ehrlich gesagt recht charmant.

 

[pwnbert]

Zum Board: Würde ein größeres Board mit mehr Features nicht auch mehr Strom verbrauchen?

No, X870E braucht mehr als B850 (600er analog zu 800er).

Danke für Eure Kommentare. Für ECC brauch ich echt noch Überwindung - oder ne Horrorstory ink. zerstörter Backups ;-)

Jo, kann ich liefern, ging aber am Ende alles gut aus, war nur blöde Arbeit.
Seither gibts im Desktop-PC ECC für mich. Wegen den paar € mehr und den paar % schlechterer Latenz eiere ich da nimmer herum.

Zur SSD: Die M2 Module scheinen in fast allen Kategorien 10x so performant zu sein wie ein SATA Modell.

Vor allem billiger. Leider.

Dann also lieber 2-4 M2 Karten auf einer Erweiterungskarte

Jo.

Aber schau dir echt das Live-Mixer an, hast mehr PCIe Slots.

 

[klayman]

Aber schau dir echt das Live-Mixer an, hast mehr PCIe Slots.

Gerne. Da wird ja ziemlich viel über das Chipset angebunden, u.A. der dritte M.2 Slot und die PCIe Steckplätze 3 und 4. Alles läuft dann über 4 PCIe Gen4 Lanes zwischen Chipset und CPU. Ist das ein Problem wenn man mal größere Datenmengen hin und her schaufelt? Beispielsweise Daten von einem Client über eine 10G Netzverbindung speichern würde dann einmal von der NIC über Chipset zur CPU und dann wieder zurück zur M.2 SSD laufen. Wenn mich nicht alles täuscht gehen da aber nur 8 GBit/s. Die Lanes wären doch schon mit der NIC ausgelastet, oder?

P.S.: Glaub mir fehlen da ein paar Grundlagen seit ich vor 20 Jahren mit dem PC-Basteln aufgehört hab 😅

 

[pwnbert]

Jein, irgendwann wirds zum Problem, idR. ist das Problem der geteilten Bandbreite aber eher klein.
4x PCIe 4.0 sind 8 Gigabyte/s (nicht Gigabit).
10 Gbit LAN sind ca. 1 Gigabyte/s.

Dem "100 Gbit Thread" kann man entnehmen, dass >40 Gbit (und wsl. auch schon >25 Gbit) die Sache recht kompliziert wird, da man hier schon diese ganzen modernen Zauberfeatures vom SMB etc. benötigt, um überhaupt so hohe Datenraten hinzubekommen.

Ich postuliere also, dass das kein praktisch relevantes Problem ist (und in naher Zeit auch keines sein wird).

X870E hat USB4, welches PCIe 5.0 Lanes verschwendet und sehr nutzlos ist. Zudem brauchen die 2 Chips einfach mehr Strom, bieten viel USB, welches man ebenso nicht braucht.
Daher meine ich B850 > X... (auch 650 ggf.).

Ich hab hier mal meine Gedanken niedergeschrieben bezügl. B850 Live Mixer, selbst bin ich noch auf AM4 / B550 unterwegs (mit 128gb ECC und 5750G, wird daher noch länger so bleiben).

AM5 ECC-Server – Erfahrungen auch ggf. im Vergleich zu AM4/Intel

Hmmmw was micht am B650M-CT etwas stört ist dass es im BIOS so weit ich das im Handbuch gesehen habe kein SMI gibt und auch die Event Logs wohl auch keine ECC Fehler protokollieren - da hätte ich den grossen :D Verdacht, dass in dem Boards zwar ECC Rams laufen aber die ECC Funktionalität nicht...

www.hardwareluxx.de

Ich halte das Live-Mixer für recht interssant, man bekommt mit der 4x M.2 Karte 6x M.2 direkt an die CPU, an den 2 Chipsatz-Slots bekommt man z.B. nen HBA und ne NIC unter (9400-16i, 2x 25 Gbit NIC z.B.), das ist schon ziemlich viel.
Alternativ auch mit dem 2x M.2 + PCIe x8 (16) Adapter im x16 Slot 4 M.2 gesamt und 3 PCIe Karten (z.B. noch ne Low-Profile GPU oder sowas).

Dann gäbe es noch von QNAP/Syno diese PCIe-Karten mit 2x M.2 drauf und ner 10 Gbit NIC (über so nen Switch), auch ganz interessant, die sind gar nicht soo teuer (knappe 200?).

Beitrag automatisch zusammengeführt: Dienstag um 16:26

Nachtrag:

Ohne ECC wäre vllt. ein Z890 (auch Live-Mixer?) + 265k vielleicht interessant(er)?

W880 gibts ja (noch?) nicht.
Angesichts der DDR5 ECC UDIMM Preise tut so ein W880 Brett dann auch nimmer weh, und die sind scho ganz nett. iGPU SR-IOV ist auch kein Fehler und naja... könnte man sich schon ansehen, wenn mal was rauskommt.

 

[klayman]

Aaaah, hier also Byte... Wieder was gelernt ;-)

Falls es Unraid wird sehe ich drei 4TB M.2 SSDs, eine davon als Parity. Würdest Du die dann auch über eine Adapterkarte in den direkt angebundenen Slot stecken, oder meinst Du die drei M.2 Slots auf dem Mainboard reichen und auch über den Chipsatz gäbe das ohnehin kaum Einbußen; auch in Verbindung mit der Netzwerkkarte? Und könnte auf dieser Plattform eigentlich auch eine Grafikkarte an eine VM weitergereicht werden? Wer weiß welche Ideen noch kommen...

 

[pwnbert]

Also, CPU Lanes Passthrough ist immer easy, Chipset muss man schauen, da bin ich mir nicht sicher, wie das mit diesen IMMOU Gruppen gemacht ist, kann bissl kompliziert sein auf Consumer Boards, also imho müssen alle Devs in einer IMMOU Gruppe zusammen an eine VM durchgereicht werden, wenn mans tut. Wenn der x4 Slot allein in einer IMMOU ist, kein Thema, wenn er z.B. gemeinsam mit dem Netzwerk-Chip in einer IMMOU wäre, müsste man beide Devices durchgeben, wenn ich das richtig habe.

Muss man halt überlegen, wie man das will und so.

Proxmox/Unraid ist kein Windows, da braucht man keine PCIe 4.0x4 SSD, damit das flüssig läuft, das läuft auch auf den totalen Gruken sauber.

 

[Haldi]

oder ne Horrorstory ink. zerstörter Backups ;-)

Wie kommst du darauf das wenn du ein Backup einer korrupten Datei einspielst es plötzlich wieder laufen würde?

 

[pumuckel]

Hallo zusammen,

Ich bin auf der Suche nach einer HW-Empfehlung für einen Homeserver mit folgenden Eigenschaften/Anforderungen:

1. Niedriger Stromverbrauch (wie es bei den Wünschen eben geht)

das macht alles vorher obsolt

ein "Server" arbeitet und genehmingt sich dafür gern Strom
ein "idle" Knecht kann nicht "alles"

ich würde raten mit einem HP Elitedesk 800 G4 Mini (gibts mit nem 8xxxer ab 120€) anzufangen (wenn KNX dann mit 16GB oder mehr)

der Knechtet erstmal für wenig Geld, Aufwand und Strom ... und den kann man später noch weiternutzen z.B. für ne Node

hierzu kann man sich z.B. auf mydealz oder anderen nen Alarm einrichten wenn die mal wieder günstig sind denn mehr als 100-120€ sind die nicht wert (zumindest ich würde nicht mehr als 120 für nen 6 core 8xxx mit 12 Monaten GW bezahlen)

 

[klayman]

Wie kommst du darauf das wenn du ein Backup einer korrupten Datei einspielst es plötzlich wieder laufen würde?

Natürlich gar nicht. Ich glaub da haben wir uns falsch verstanden. Backup habe ich online lokal und quasi-offline auf Amazon Glacier. Das funktioniert ganz gut und kostet nicht die Welt...

ein "Server" arbeitet und genehmingt sich dafür gern Strom
ein "idle" Knecht kann nicht "alles"

Das ist klar, ich hoffe auf irgendwas zwischen 20 und 30 Watt. Daher stand der Energieverbrauch auch nicht an erster Stelle der Anforderungen ;-) Frage dazu direkt: Ich habe eine VM mit Homeassistant die recht viel Traffic empfängt (20-30 KNX Telegramme pro Sekunde) und in einer SQL-Datenbank wegspeichert. Verhindert mir alleine das schon tiefere Energiesparmodi im Idle? Ein richtiger "Sleep-Mode" des Host geht dann ja eigentlich nicht...

Aber wie das immer so ist in einem Forum: Es kommen einem ständig neue Ideen wie man noch mehr optimieren kann. Aktuell sieht der Plan so aus (Link). Das Netzteil wird vermutlich noch ein anderes werden, da das aktuelle kaum verfügbar ist. Aber da gibt es ja eine schöne Liste zur Effizienz im Teillastbereich. Könnt Ihr mal schauen ob die Komponenten so zusammenpassen? Und weiß jemand ob das Mainboard 4x4x4x4x bifurcation kann?
Beim Betriebssystem tendiere ich immer mehr zu TrueNAS Scale mit einem RaidZ1 Array über 4 SSDs. Ich glaube das kombiniert die Einfachheit eines NAS mit der Möglichkeit den persönlichen Spieltrieb zu befriedigen. Weitere Argumente für mich sind die Möglichkeit read-only snapshots zu erstellen um sich so ein wenig vor eigener Dummheit zu schützen (ungeachtet der Backups natürlich), Schutz vor Bit rot (gerade wenn das Ding jahrelang läuft), und open source.

Dank für Eure Unterstützung und Viele Grüße,
Klayman

 

[pwnbert]

Ich habe eine VM mit Homeassistant die recht viel Traffic empfängt (20-30 KNX Telegramme pro Sekunde) und in einer SQL-Datenbank wegspeichert.

Je nach Filesystem auf Write-Amplification achten und ggf. Gegenmaßnahmen ergreifen.
Ich geh erstmal nicht tiefer drauf ein, du kannst bissl googeln.

x4x4x4x4 sollte es können, sollten eigentlich alle AM5 Bretter können, hängt eher von der CPU ab, der 7700er etc. sollte es auch können (also alle 7--0er + 9--0er, bei den 8---ern ist Vorsicht geboten).

https://www.reddit.com/r/AMDHelp/comments/14qvith/ryzen_7600_and_pcie_4x4_bifurcation_when_paired/

Achtung, dein RAM ist falsch, du brauchst für ECC einen ECC UDIMM und keinen ECC RDIMM, was die Sache noch unangenehmer macht.
Hier eine Filterliste für dich, die Preise sind allerdins nicht besonders angenehm:

Arbeitsspeicher (RAM) Speicher mit Standard: DDR5, Typen: DIMM/mit ECC/kein Registered Modul/Unbuffered Memory, Packungsgröße ab 32GB Preisvergleich Geizhals Deutschland

Preisvergleich und Bewertungen für Arbeitsspeicher (RAM) Speicher mit Standard: DDR5, Typen: DIMM/mit ECC/kein Registered Modul/Unbuffered Memory, Packungsgröße ab 32GB

geizhals.de

Beitrag automatisch zusammengeführt: Gestern um 11:29

Beim Betriebssystem tendiere ich immer mehr zu TrueNAS Scale

... dessen Virtualisierungsmöglichkeiten waren bisher ziemlich mies.
Da hat sich jetzt was geändert, obs dadurch besser wurde, muss man sich ansehen. Supaman war davon bisher nicht so begeistert, ich hab mich damit nicht weiter auseinandergesetzt nachdem ichs noch nicht mal geschafft hab ein Pool für die VMs auszuwählen, lol.

Ich mag nicht sagen, dass es nicht geht. Du musst es halt einfach ausprobieren. Wenns trotz aller Mühen einfach nix wird, dann solltest irgendwann davon ablassen und auf Proxmox wechseln.



TrueNAS will eine eigene Boot-SSD haben (muss im Prinzip noch nicht mal Raid 1 sein, solang man die Konfig welche ein paar kb hat speichert zu sinnvollen Zeitpunkten) und so...

Oder halt Proxmox mit napp-it (von gea) als NAS, hab das selbst noch nicht ausprobiert, soll aber ganz cool sein.
Mir ist momentan noch ein virtuelles TrueNAS im Proxmox irgendwie lieber, da kommt der ganze HBA per passthrough durch, dann hab ich die NAS-Drives nicht am Proxmox gemountet und kann dort keinen Unsinn durch Dummheit damit machen... so 100% Trittfest in Unix-Konsolen bin ich halt doch nicht...

 

[klayman]

Danke für den Hinweis mit dem RAM, ist angepasst (link). OS ist man ja flexibel, lediglich die Systemplatte würde es bei Unraid nicht brauchen, macht aber den Kohl nicht fett. Eine Frage noch: die SSDs werde ich ja mit ihren 7 Gigabyte pro Sekunde selbst mit einer 10 Gigabit Netzwerkkarte nie auslasten können. Spricht daher was gegen die Lexar NQ790 4TB zum Beispiel? Ist ähnlich schnell, fällt nur bei den IOPS teils deutlich hinter die WD Black zurück. Was aber, soweit ich es verstehe, eher für sehr viele sehr kleine Zugriffe wie DB-Server relevant ist (da würde ich meine HA-Datenbank aber mal noch nicht hinzuzählen).