Der P3D-Cluster am Standort Hannover

[thorsam]

Ich habe jetzt Beide auf 50% gesetzt, und lasse 24 Stunden MIPs laufen.

 

[thorsam]

Glaube nur der Statistik, die Du selber gefälscht hast. Hier mal die blanken Zahlen.

P3D-7763 (256 threads)
            Project: #WUs: ~Runtime: ~Credits: C/d/Core: C/d/Host:
                MIP1   188   2581.12     49.21   1647.05 421644.80

P3D-7V12-3 (256 threads)
            Project: #WUs: ~Runtime: ~Credits: C/d/Core: C/d/Host:
                MIP1   116   3522.68     48.86   1198.04 306698.24

Kommt mir irgendwie spanisch vor.
Wenn ich die Anzahl der WUs verdoppel, die zum Mitteln herangezogen werden sollen, sieht es so aus:

P3D-7763 (256 threads)
            Project: #WUs: ~Runtime: ~Credits: C/d/Core: C/d/Host:
                MIP1   229   2552.80     49.52   1675.75 428992.00

P3D-7V12-3 (256 threads)
            Project: #WUs: ~Runtime: ~Credits: C/d/Core: C/d/Host:
                MIP1   157   3666.46     51.29   1208.39 309347.84

 

[sompe]

Bei mir waren die Einflüsse durch den L3 schon erheblich, vor allem der 2990WX schnitt da übel ab.

12. Pentathlon 2021 - WCG/MIP (Speerwerfen)

Spannend wird das bei den Prozessoren der ersten Zen Generation denn beispielsweise dürfte ich bei meinem 2990WX gerade einmal 16 WUs knabbern damit die 64 MB L3 reichen. Mit meinem Ryzen 1700X mach ich nun 50/50 SiDock/MIP Ja, mal schauen, was das bringt.

forum.planet3dnow.de

12. Pentathlon 2021 - WCG/MIP (Speerwerfen)

Spannend wird das bei den Prozessoren der ersten Zen Generation denn beispielsweise dürfte ich bei meinem 2990WX gerade einmal 16 WUs knabbern damit die 64 MB L3 reichen. Mit meinem Ryzen 1700X mach ich nun 50/50 SiDock/MIP Ja, mal schauen, was das bringt.

forum.planet3dnow.de

Ich sehe gerade nochmal in den Postings nach ob ich da auch mit dem 3990x gerechnet hatte, der hat ja nur halb so viel Speicherkanäle wie dein Epyc.
[automerge]1624221216[/automerge]
Beim Durchblättern hatte ich nur das gefunden aber leider nichts mit 64 Threads.

12. Pentathlon 2021 - WCG/MIP (Speerwerfen)

DASS MIR JA KEINER AUF IDEE KOMMT, NOCH EINEN 5. WURF BEIM SPEERWERFEN WERFEN ZU WOLLEN! Wenn ich noch einen ungeworfenen Bunker finde, dann fliegt der auch! ;)

forum.planet3dnow.de

 

[Outlaw9876]

Beim Durchblättern hatte ich nur das gefunden aber leider nichts mit 64 Threads.

12. Pentathlon 2021 - WCG/MIP (Speerwerfen)

DASS MIR JA KEINER AUF IDEE KOMMT, NOCH EINEN 5. WURF BEIM SPEERWERFEN WERFEN ZU WOLLEN! Wenn ich noch einen ungeworfenen Bunker finde, dann fliegt der auch! ;)

forum.planet3dnow.de

Ich meine, hier ging es aber um SiDock.

 

[sompe]

Steht doch im Code Bereich von thorsams Posting darüber das es MIPs waren.

 

[Outlaw9876]

Steht doch im Code Bereich von thorsams Posting darüber das es MIPs waren.

Ich meine deinen letzten verlinkten Beitrag aus dem Peta-WCG/MIP-Fred.

 

[sompe]

Stimmt, da war ich wohl durcheinander geraten und hatte damit keine direkten MIP Rechenzeiten vom TR 3990x sondern nur die vom 3950x.
Das hätte ich auch anhand der 2 Tage Haltbarkeit erkennen können die bei MIPs höher war.

Ich dreh mal ein paar Proberunden mit der Kiste wenn es kühler ist.

 

[Outlaw9876]

Linus hat auch zwei 7763 in die Finger bekommen:

 

[Outlaw9876]

Hat der Cluster es etwa auf Platz 4 der Top 500 Supercomputer geschafft?

 

[Crashtest]

Unsere EPYC 7V12 laufen voll dh. 64C und nicht 48C

Da hat wohl jemand ein paar Microsoft Azure HPC VMs für die Top500 Liste eingereicht.
Vergleichbar mit den ganzen Lenovo Rechnern die Teile von chinesischen Webbetreibern sind (hierzu wirds Video on STH empfohlen)

PS damit der Cluster in die Top500 kommen könnte müsste er:
- etwa 100 so viele CPUs
- etwa 200 so viele GPUs
- ein gescheiten Interconnect
haben

 

[thorsam]

Das Gigabyteboard von Landjunge ist angekommen.



Jetzt kann ich endlich die beiden 7V12 vom Supermicroboard umbauen, weil sie darauf nicht 100% richtig liefen.
Also ich hoffe jedenfalls das es am Board liegt. We will see.

 

[Landjunge]

Ich hab das erstmal umverpackt. Der Mindfactory Karton war so groß, ich dachte die schicken 6 Boards Auch der Weiterversand wäre dann etwas teurer gekommen. Aber nu isses ja angekommen.

 

[thorsam]

Weil ich ganz scharf auf ein Supermicro H12DSi-NT6 war, hatte ich es in USA bestellt.
Ziemlich bald hat sich ein RAM-Slot verabschiedet.
Soweit läuft das Board noch, nur halt nicht im 8-Channel Modus.

Da ich das Board über Shipito mir habe liefern lassen, war meine Vermutung, dass es ein riesen Umstand ist,
darüber eine RMA abzuwickeln.

Um es kurz zu machen: Das Supermicro-Board liegt als Reserve im Regal, und ich habe mir ein weiteres Gigabyte-Board MZ72-HB0 mit der Revision 3.1 bestellt.
Was soll ich sagen, dort war auch ein RAM-Slot defekt. Ich werde ich jetzt gleich zur Packstation bringen.

Darum ist der Rechner P3D-7V12-1 erstmal nicht online.

Warum ich den Kram nicht wieder aufs Supermicro-Board umbaue?
Keine Zeit, und ehrlich gesagt ist bei mir in Sachen DC so ziemlich die Luft raus.

 

[thorsam]

Crashtest, Sightus und ich machen mal wieder wilde Sachen.

Auf Ebay werden fürn Appel und nem Ei EPYCs angeboten.
Da scheinbar bei einem meiner 7V12 der RAM-Controller einen weg hat, habe ich testhalber zwei 7C13 bestellt.
Laut Beschreibung sollen die unlocked sein, was bedeutet, dass sie nicht mit 2.000 MHz, sondern mit 2.450 MHz laufen.
Sollte es beim 7V12 tatsächlich der RAM-Controller sein, sollte das o.g. SM-Board dann auch auf allen RAM-Slots laufen. Inclusive dem o.g. GB-Board und dem zwischenzeitlich gekauften ASRock-Board.

Von der Bestellung bis Ankunft vor meiner Wohnungstür, sind gerade mal 5 Tage vergangen. In der Anzeige ist die Rede von 14 Tagen. Der Weg ging von SHENZHEN -> GUANGZHOU -> COLOGNE -> HANGOVER

FedEx hat einen guten Job gemacht. Nur die Verpackung der Chinesen war recht lieblos.

​

Als nächstes baue ich die beiden EPYCs ein. Dann gibt es weitere Bilder, wenn das BIOS die Beiden erkannt hat.

 

[Outlaw9876]

Mahlzeit!

Wie ist denn hier der aktuelle Stand der Dinge?

Läuft der Spaß, oder gab es Probleme?

 

[thorsam]

CPUen eingebaut, gestartet, erkannt.

Taktgeschwindigkeit beträgt wie zu erwarten 2.000 MHz. Nix mit 2.450 MHz.

Die Milan mit 2.000 MHz erreichen bei BOINC die gleichen Werte wie die Rome mit 2.450 MHz.

Bei der Einfuhr hat vermutlich der Lupo-Umschlag beim Zoll keine Aufmerksamkeit erregt, sodaß es unterm Strich bei 2x 750,00 € geblieben ist.

Der Rechner läuft unter der Kennung P3D-7C13.

Für das Gigabyte-Board habe ich zwischenzeitlich den Kaufpreis nach 10 Monaten erstattet bekommen.

Für das Supermicro-Board, das hier noch rumliegt, werde ich 2x EPYC 7T83 bestellen.
Die entsprechen den EPYC 7763, von denen 2 beim Cluster bereits rechnen.

Danach geht es mit Genua weiter.

 

[thorsam]

Wie am Cluster-Standort TAL9000, ist auch der Standort Hannover per Mobilfunk mit dem Internet verbunden.
Nachdem mehrfach die 100 GB Datenvolumen bereits am 20. des Monats verbraucht waren, habe ich den Vertrag jetzt auf unbegrenztes Datenvolumen umgestellt.

Nichts ist für Ewigkeit. Nach 15 Jahren 24/7 hat sich doch tatsächlich der 8-Port Switch verabschiedet.
Ersatz ist beschafft. Komme aber erst Freitag dazu, den Switch zu tauschen.
Darum kommen in letzter Zeit keine Rechenergebnisse.

 

[thorsam]

Der P3D-7V12-2 ist in der Vergangenheit zu oft weggeschmirrt, sodaß ich das Gigabyte MZ72-HBO jetzt durch ein ASRock Rack Rome 2D16-2T ersetzte.
Ansonsten habe ich hier noch zwei 7V12 rumliegen, wo beim einen der RAM-Controler einen weg hat, sodaß keim 8-Channel möglich ist. Mal sehen, ob ich die Beiden in das alte Gigabyte-Board packe.
Die Zukunft vom P3D-Cluster-Standort ist auch nicht mehr allzusehr sicher, sodaß ich erstmal kein Geld in die ZEN4-Technik stecken werde.

Ich bin auf das Sommergrillen in Dresden gespannt, ob einer der Cluster-Rechner umgewidmet wird, um BOINC-Projekte oder ähnliches darauf zu betreiben.

 

[NEO83]

Dann bin ich mal gespannt was da raus kommt