Kleines Tagebuch: Umstellung Serverhardware auf AM4 und Migration von Server 2008 R2 auf Sever 2019

[Hammerhead Shark]

Bei SFP+ mit entsprechenden Transciever laut CLP, DAC 0,5w Glasfaser 1w und RJ-45 5w - das schon nicht wenig. Ob direkt RJ-45 auch 5w pro Port braucht wäre noch die Frage.

Als ich mich vor 2 Jahren wegen der 10G Anbindung meines Servers informiert habe, habe ich etwas von 3W pro Port gelesen.
Deswegen hatte ich mich auch für SFP+ entschieden.

Mein Einstieg in 10GbE LAN mit SFP+

Inspiriert von erattes Erfahrungsbericht über seinen Einstieg in das 2,5 GbE LAN teile ich hier meine Erfahrungen mit 10GbE, und warum ich mich für SFP+ entschieden habe. Nachdem ich meinen neuen Heimserver endlich Fertiggestellt hatte, sollte auch das alte 1G Netzwerk aufgerüstet werden...

forum.planet3dnow.de

Beim OS bin ich damals von Windows Server 2008 R2 auf Open Media Vault (Debian basiert) umgestiegen.
Bietet eigentlich alles was man so braucht. Für Speziallösungen gibt es Docker und aufgrund des Dabian Unterbaus lassen sich auch beliebige Debian packages installieren.

Ja mit den IntelNetzwerkschips ist bekannt - ja schon länger so.

Die AMD Chipsatzteiber muss ich auch immer manuell updaten weil das Setup meint was mit RAID zu finden.

Als GPU ist die 1030 mit den nvidiateibern kein Problem.

Letztes Problem war wie geschrieben der aktuelle Marvell ACQxxx Treiber der unter W11 funktioniert und bei Server 2019 nicht.
Nur die meisten 10G Karte die auch expliziert für Server angeben sind kommen mit PCIe 2.0 x8 und hätten nicht gepasst
weil der freie Steckplatz nur 4 Lanes hat.

Bei mir wurde die Netzwerkkarte (Intel Chip) auf dem Server unter Linx dirket erkannt. Auf dem Hauptrechner unter windows musste ich die Treiber manuell installieren, unter Linux wiederum funktioniert sie auch hier out of the box.

Ich betreibe meine PCIe 2.0 x8 Karten auch im x4 Slot (mechanisch x16). PCIe2 x4 liefert 2GB/s an Roh-Bandbreite, was im Normalfall für 10G ausreichen sollte. Bei voller Last im Full Duplex Betrieb bleibt eventuell etwas an Leistung liegen, aber im Normalbetrieb reicht das zumindest in meinem Anwendungsfall vollkommen aus..

 

[eratte]

Ok das gut zu wissen das die auch mit 4 Lanes funktioniert - da war ich mir nicht sicher deswegen ich lieber eine Karte mit PCIe 3.0 x4 genommen habe.
Zu dem die ASUS Karte neu auch nicht zu teuer ist.

PS.: deinen Thread habe ich ganz übersehen, werde da auch noch mal meinen Endstand hinterlassen.

 

[eratte]

Patchmanagement: Auto-Upgrade auf Windows Server 2025 frustriert Admins (golem)

uiui

Für die Betreiber der betroffenen Systeme ist das unter anderem deshalb ein Problem, weil in der Regel gar nicht die erforderliche Lizenz für das neuere Betriebssystem vorliegt.

Das wäre ja auch bei mir das Problem.

 

[eratte]

So nach ca 2 Wochen Betrieb die Feststellung läuft alles so wie es soll auch mit den Vorteilen der höhren Bandbreite zsichen den Switchen und zum Server.

Die Karte im Server wird noch zur Sicherheit von einem 92er/15mm Noctua "angepustet" - das ganze nicht hörbar.

Die Möglichkeiten der Zyxelswitch habe ich mir angeschaut, aber im Moment fehlt mir da der Usecase zu - z.B. ein VLAN zu nutzen.

 

[eratte]

Da durch diverse "Umstände" der R5 7600 aus dem HTPC frei wurde habe ich mich doch entschieden zeitnah meinem Serverrechner ein Hardwareupdate zu verpassen.

Der dort noch eingesetzte R5 5600 und DDR4 3200 ECC RAM sollen in OMV Backupsystemen weiter verwendet werden.

Sollte wieder ein MATX Mainboard werden, da ich mit dem TUF Gaming B550M-Plus Wifi sehr zufrieden bin ist es
das TUF Gaming B650M-Plus geworden. WifI braucht es nicht, beim B550 war es nur die WiFi Version geworden weil
die damals billiger war als die ohne.

Dadurch kriege ich auch abseits von SATA wieder Raum für Erweiterungen mit NVME Laufwerken. 2 Gründe warum es die
B650 Version und nicht die B850 geworden ist sind:

1. B650 ist deutlich günstiger als B850. Über 50 Euro weniger.

2. B650 bietet 2 x M.2 und 1 x PEG x16, 1 xPCIe x1 und 1 x PEG x4
B850 bietet 3 x M.2 und 1 x PEG x16, 1 xPCIe x1

Den PEG x4 brauche ich für die 10G LAN Karte mit SFP+, so bleibt der PEG x16 frei und bei Bedarf könnte da eine ASUS Hyper M.2 x16 Gen4 oder5
Karte mit 4 x M.2 Einzug halten. Der PEG x16 kann im BIOS entsprechend auf 4x4x4x4 eingestellt werden.

Mainboard ist auch schon da und der R5 7600 durfte schon mal Platz nehmen:



M.2 Kühler sind demontiert, die vorhandenen SSDs kommen mit Kühlern von Be Quiet.

Was noch fehlt ist der DDR5 ECC 5200 RAM von Kingston, es werden erst mal nur 32 GB werden. Die 64 GB vorher waren es hauptsächlich weil
da noch Festplatten im Einsatz waren die auch nicht 2,5 GB LAN 100 % bedienen konnten um da einen möglichst großen Cache zu haben.

Mit der Lexar 4 TB als Hauptdatenlaufwerk und zukünftigen NVME Laufwerken ist das kein Thema mehr.

Testaufbau noch mit "normalen" DDR5 6000@4800 32 GB RAM und em Boxedkühler vom R5 7600 gibt es auch schon. BIOS auf neuste Version geflashed. Positiv ist dasauch mehr Lüfteranschlüsse vorhanden sind als beim B550. Eindruck vom Baord ist gut und solide. Front USB-C hätte aber schon USB 3.2 Gen2 sein können. Immerhin gibt es hinten USB3.2 Gen 2 2x2.



Zum testen ist eine Micron 1TB OEM PCIe 4.0 SSD montiert, werde ein aktuelles Image vom Server 2019 aufspielen und schauen wie das sich verhält.
Wenn der DDR5 ECC da ist und funktioniert wird ugebaut, dann wird auch die GT 1030 dank iGPU vom R5 7600 endlich überflüssig.

 

[eratte]

Das TUF Gaming B850M-Plus (WiFI) hat natürlich auch Vorteile, da wäre PCIe 5.0 auf dem PEG x16 Slot und Front USB-C mit USB 3.2 Gen2 (10).
Das ist zwar nett aber für den Serverrechner nicht so von relevanz. PCIe 5.0 SSDs sind deutlich zu teuer im Moment und als Datenlaufwerk auch "oversized".

Ich hoffe ja das die 4 TB NVME noch mal was günstiger werden, 8 TB sind sehr überteuert finde ich.

 

[eratte]

So die Vorabtest sind so weit durch, Hardware läuft so weit aber der Treibersupport von AMD für Windowsserver ist unterirdisch.

Für 2019 kriegt man auch per Gerätemanager nicht mehr alles fehlerfrei von den Chipsatztreibern installiert. Von GPU Treibern rede ich da noch gar nicht.

Mit 2022 sieht es besser aus, Chipsatztreiber alle ok und AMD Adrenalin Pro läuft auch wenn man weiß wo man ihn herbekommt.
Jetzt warte ich auf meine Server 2022 Lizenz, dann werde ich umbauen und ein Inplaceupdate machen.

 

[eratte]

So, Server 2022 Lizenz ist da. Gut das ich noch BD/DVD Laufwerke habe da konnte ich von der DVD ein ISO erzeugen und dann einen USB-Stick zum installieren erstellen.

Plan ist beim 2019 ein Image zu erstellen dann die nVidiatreiber zu deinstallieren mit folgendem Shutdown. Dann umbauen und per USB-Stick ein Inplaceupdate durch führen. Dann noch Treiber und Updates ziehen und checken ob es läuft. Wenn es so klappt sollte das recht schmerzlos abgehen.

Neue Hardware ist ja schon ausreichend getestet.

 

[Sightus]

So die Vorabtest sind so weit durch, Hardware läuft so weit aber der Treibersupport von AMD für Windowsserver ist unterirdisch.

Könnte durchaus besser sein. Ich habe eigentlich alles zum Laufen bekommen, jedoch scheitere ich an meine Radeon Pro VII.

Für 2019 kriegt man auch per Gerätemanager nicht mehr alles fehlerfrei von den Chipsatztreibern installiert. Von GPU Treibern rede ich da noch gar nicht.

Was denn z.B. nicht? Chipsatztreiber entpacken und manuell installieren hat bei mir alles gefunden.

Mit 2022 sieht es besser aus, Chipsatztreiber alle ok und AMD Adrenalin Pro läuft auch wenn man weiß wo man ihn herbekommt.
Jetzt warte ich auf meine Server 2022 Lizenz, dann werde ich umbauen und ein Inplaceupdate machen.

Gerne per PM ==> welchen Treiber hast Du?

 

[eratte]

Was denn z.B. nicht? Chipsatztreiber entpacken und manuell installieren hat bei mir alles gefunden.

AMD IC2 Controller glaube ich, Treiber installieren ja aber Gerät startet nicht bleib auf Fehler. Kann ich aber nach dem Umbau noch genau sagen.
Unter 2022 wird er auch so erkannt und auch alle anderen Treiber vom Chipsatz lassen sich wie gewohnt installieren.

PM kommt

 

[eratte]

So erfolgreich umgebaut/geputzt - allerdings hatte ich vergessen das Inplace nur geht wenn OS gestartet. Also 2019 gestartet. Das klappt gut hatte ich auch vorher ja ausprobiert auf der neuen Plattform in dem Image auf gespielt ohne LAN.

Die ASUS 10G SFp+ Karte wurde neu erkannt so das ich erst mal das alte "Gerät" deinstalliert haben und nach einem Neustart TCP/IP neu eingerichtet habe.

Inplace ist aber gescheitert - heul - 0xC1900101 - 0x20017 Phase SAFE_OS

 

[eratte]

Inplace wolle um das verrecken nicht, habe nun den Server mit 2022 neu aufgesetzt, der 2019 läuft offen parallel.

Jetzt muss ich den nächsten Tagen AD, Dienste, Freigaben etc switchen.

 

[eratte]

- Server 2022 erfolgreich auf neuer Plattform installiert (R5 7600, TUF Gaming B650M-Plus, 32 GB Kingston DDR5 5200 ECC, 950 Pro und NM790 plus 4 TB SSD230S SATA SSD, ASUS XG-C100F 10G SFP+ (onboard LAN aus).
- alle Updates installiert, AMD Chipsatztreiber alle erfolgreich manuell per Gerätemanager installiert (unter 2019 ließ sich AMD IC2 Controller nicht funktional installieren) - Treiber für ASUS LAN musste auch als 1. installiert werden.
- AMD Adrenalin Pro (bei Supermicro ergattert) installiert - v23.30.02



- Server 2022 in Domäne aufgenommen
- Freigaben auf Server 2022 wieder hergestellt und getestet
- IP auf Server 2019 geändert und die IP die er hatte auf dem Server 2022 statisch eingestellt
- AD, DNS, DHCP und WINS Rollen/Feature auf Server 2022
- AD, DNS und DHCP eingerichtet/konfiguriert
- DHCP und WINS auf Server 2019 entfernt

Läuft so weit alles, als nächstes kontrollieren ob auch ohne den Server 2019 aktiv keine Probleme aufgehen. Dann überlege ich ob ich den auf dem Backupsystem statt OMV weiter laufen lasse oder ihn auch den DNS entferne und aus dem AD raus nehme.

 

[eratte]

wmic memphysical get memoryerrorcorrection in cmd eingeben:



Laut dem Multi-bit ECC auch hier wieder aktiv

Übersicht der Returned Codes:

(0x0) Reserved
1 (0x1) Other
2 (0x2) Unknown
3 (0x3) None
4 (0x4) Parity
5 (0x5) Single-bit ECC
6 (0x6) Multi-bit ECC
7 (0x7) CRC

Im UEFI ECC vorher von AUTO auf Enable gestellt und Disable Memory Error Injection auf false.

 

[eratte]

Übernahme der FSMO Rollen erfolgreich durchgeführt.

 

[eratte]

DNS Rolle auf Server 2019 entfernt und System nun runter gefahren.

 

[eratte]

Für zukünftige Speicherplatzerweiterungen im Serverrechner gedacht, wie geschrieben PEG16 ist frei und kann auf 4x4x4x4 gestellt werden.
Ist die PCIe 4.0 Version der ASUS Hyper M.2 x16. Der Lüfer lässt sich über einen kleinen Schalter an der Slotblende ausschalten.

 

[eratte]

"Traurige" Nachricht, nach dem ich die Vorgängerhardware in einen Rechner umgebaut habe und dann dort den Server 2019 weiterlaufen lies hat nach ca 4 Wochen ausgeschaltet der Rechner nicht mehr gestartet. Power LED an und wieder aus und kurzes zucken der Lüfter.

Das TUF Gaming B550M-Plus Wifi hat den Geist warum auch immer aufgegeben, alles andere läuft (CPU, RAM, Grafikkarte). Sichtbar ist da nichts, lief ja auch vorher noch tadellos. WiFi Karte noch raus genommen und wo anders gegen schlechtere getauscht.

Hatte bis vor kurzem noch ein 2 TUF Gaming B550M-Plus Wifi - das hatte ich aber vor ca 3 Wochen mit einem R5 3600 und RAM verkauft.

 

[ghostadmin]

Netzteil funktioniert auch?

 

[eratte]

Ja, als erstes ausgebaut an anderes Netzteil angeschlossen > tot
CPU und RAM auf vorhanden ITX AM4 Board ausprobiert > laufen
Andere CPU und RAM B550M-Plus > tot

Auf dem B550M-Plus hat auch nichts mehr "geleuchtet" - keine LED/RGB und auch der Link am RJ45 mit angeschlossenem Kabel im Standby.
Board ist defintiv hinüber.

Hatte ja auch erst gehofft das das alte Be Quiet Netzteil nur den Geist aufgeben hat - aber es ist unschuldig.

 

[eratte]

Dem TUF Gaming B550M-Plus Wifi konnte leider kein "Leben" mehr eingehaucht werden. Wurde auch mittlerweile entsorgt.

Dadurch frei:

R5 5600
4 x 16 GB Kingston DDR4 3200 CL22 ECC
MSI GT 1030 Passiv DDR4

Das wird nun teilweise in den "Serversatelliten" weiter verwendet, das sind ITX Rechner mit Open Media Fault auf denen die Daten automatisch
und manuell gesichert werden.

Nr. 1 hat schon die Änderungen hinter sich:

R5 5600 statt R5 5600G - Kühler bleibt der NH-L12Sx77
Mainboard bleibt AsRock B550 Phantom Gaming-ITXax
32 GB Kingston DDR4 3200 CL22 ECC statt 32 GB DDR4 3000@3200 Crucial

Gehäuse ist ein Lian Li Mini-Q PC-Q25 mit SATA Hotswap, Corsair SF450 Netzteil.

Als Medien dient eine 250 GB Samsung 960 Evo für OMV und 2 x 8 TB Seagate Ironwolf Pro für die Daten.
OMV Installation wurde übernommen.

Nr. 2 ist noch ein i5 3400 auf einem ASUS P8H77-I mit 16 GB DD3 1600 - 128 MB SATA SSD für OMV und
5 x 1 TB WD RED (alt aber alle ohne Fehler).

Wird nun "endlich" ersetzt durch

R5 5600G - Kühler NH-L12 mit 92er Lüfter unten.
32 GB DDR4 3000@3200 Crucial
Mainboard Gigabyte B550I AORUS PRO AX V1.3
Samsung 950 Pro 256 GB
ASUS U3S6 2 USB 3.0 und 2 x SATA 6G

Gehäuse ist das Fractal Design Array R2 - gibt es auch nicht mehr - und das zum Gehäuse gehörende Netzteil.

System ist noch nicht umgebaut, aber im offenem Aufbau wurde schon OMV neu aufgesetzt. Scripte auf neue MAC angepasst und erfolgreich getestet.
Fehlt noch der Umbau, Übernahme des RAIDs und einrichten von Usern, Freigaben und Rechten.

Gesichert wird mit Robocopy vom Server aus, Nr.1 wird automatisch aufgeweckt, Daten gesichert und dann wieder runter gefahren.
Nr.2 das selbe nur manuell von mir gestartet, überlege das auch mit größerem Zeitlichen Abstand zu automatisieren.

OMV ist da für meine Zwecke recht pflege leicht, ab und zu mal so starten und Updates installieren lassen. Da nur zur Sicherung sind auch nicht viele Plugins installiert.

Die noch freien 32 GB Kingston DDR4 3200 CL22 ECC werde auch noch Verwendung finden.

 

[eratte]

Nr. 2. ist auch fertig, war etwas Fummelei bis es richtig in das Gehäuse passte.

Mit dem Digitus DS-30104-1 4fach SATA Controller blieb das System nach dem BIOS Post stehen und hat nicht von der NVME gestartet.
Anstatt gute alte ASUS U3S6 eingebaut um die benötigen 5 SATA Schnittstellen zur Verfügung zu haben so lange da die 5 x 1TB WD Red
im Einsatz sind. 4 an den Ports vom Board und eine an der U3S6. Wäre also noch eine frei.

Benutzer und Gruppen in OMV eingerichtet, den MDM Raid übernommen und wieder eingebunden.
Freigaben eingerichtet und erfolgreich Sicherung vom Server aus laufen lassen.

 

[eratte]

Habe einen Zyxel XS1930-10 zum testen und ggf behalten hier - als erstes den Lüfter gegen einen Noctua 40x40/22 getauscht. Da bei muss man die Verdrahtung anpassen. Nicht geräuschlos aber deutlich leiser.

10 Ports mit 10 Gbit/S, die 8 mit RJ45 bieten dabei 1, 2,5, 5 und 10 Gbit/S. Behalte ich ihn können dann nach und nach die Clients nachziehen.

Direkt profitiert der Hauptrechner mit dem Crosshair X870E Hero das schon einen Realtek 5 Gbit/S LAN Adapter dabei hat.
Läuft sofort auch mit dem vorhandenen CAT5/6 Kabel.

Schnelltest mit NAS Tester auf Freigabe vom Server der mit 10 Gbit/S SFP+ angebunden ist liefert das erwartete:



Webübersicht:

 

[eratte]

Zum weiteren ausprobieren habe ich noch einen UGREEN USB-C to RJ45 5GbE Adapter hier, aber noch nicht ausprobiert.

 

[eratte]

Test mit UGREEN USB-C to RJ45 5GbE Adapter