Intel und seine Xeons regierten viele Jahre lang bedingungslos auf dem Markt für Serverprozessoren und Chipsätze, doch 2017 konkurrierte AMD schließlich mit der Veröffentlichung der ersten Reihe ihrer neuen EPYC-Serverprozessoren. Seitdem hat sich ihre Position nur verstärkt und das Lineup wurde mit einer neuen Version von "epics" ergänzt. AMD liefert seine modernen Prozessoren an viele bekannte Unternehmen, darunter Dropbox, Hetzner, Linode, CERN, OVHcloud, Scaleway, mehrere Universitäten und kleinere Organisationen, einschließlich Rechenzentren. Jeder lobt die Plattformen bei EPYC und empfiehlt sie für die Organisation und Skalierung eines Clusters von Hochleistungsservern.
Als die Nachricht eintraf, dass AMD damit begann, Prozessoren herzustellen, die
Intel-Prozessoren in Bezug auf Leistung und Preis-Leistungs-Verhältnis umgingen , begannen wir über einen separaten Dienst auf dieser Plattform nachzudenken. Die Wahl fiel auf Supermicro A + Server 2124BT-HNTR . Der Server besteht aus 4 Knoten, jeder Knoten hat die folgende Spezifikation:
- Prozessoren: 2x AMD EPYC 7742 64-Core-Prozessor 2,25 GHz;
- Speicher: 16 x 64 GB RAM 3200 MT / s;
- NVMe-Festplatten für den Cluster: 4x INTEL SSDPE2KE076T8;
- Systemfestplatte: 1x INTEL SSDSC2KB240G8;
- Netzwerkcontroller: AOC-MH25G-m2S2T.
Alle Eigenschaften
In Moskau und Russland gab es keinen solchen Server, wir mussten ihn direkt beim
Hersteller bestellen . Nach dem Warten, das durch einige logistische Probleme im Zusammenhang mit COVID-19 ergänzt wurde, landete der Server Anfang Juni bei uns.
Versammlung
Auf den ersten Blick schien uns der Server nichts besonders Episches zu sein, da wir Erfahrung mit Plattformen mit 12 Knoten für den Service von Hi-CPU-Servern haben . Dieselbe Plattform repräsentiert nur vier unabhängige Knoten, aber wir haben noch nicht verstanden, wie viel Leistung sie insgesamt geben.
Tests
Nach dem Zusammenbau wollten wir natürlich den Server laden, wir haben es insgesamt mit einem Monster zu tun
, das 1024 Kerne, 4 TB RAM auf 4 Knoten hat: Klickbares Bild Die Ergebnisse der Leistungstests haben uns beeindruckt. Erfreulich ist auch die Verarbeitungsqualität der Supermicro-Ingenieure.
Installation
Wir haben es in ein Rack eingebaut und mit dem Zusammenbau des Clusters begonnen: Der
Cluster wird auf diesen 4 Knoten zusammengesetzt. In Zukunft kann der Cluster auf ähnlichen
Geräten oder auf ähnlichen Geräten anderer Anbieter skaliert werden . Das öffentliche Netzwerk des Clusters befindet sich auf
Schnittstellen mit 25 Gbit / s (SFP28), das private Netzwerk ebenfalls mit 25 Gbit / s (SFP28).
Software-Revision
Die in der Client Service Management-Software festgelegten Grundlagen und Prinzipien ermöglichten die schnelle Fertigstellung des Codes für die neue Architektur. Mitte Juni wurde der Epic Servers- Dienst gestartet.
Vorteile für uns und Kunden
Mit AMD EPYC können Sie Tarife bis zu EPIC 128 x 3,4 GHz CPU / 512 GB RAM / 4000 GB NVMe erstellen, die niemand auf einer Plattform mit Prozessoren von Intel anbieten kann. Darüber hinaus verwenden wir nur NVMe NAS mit dreifacher Datenreplikation.
Während der zweimonatigen Arbeit mit dieser Plattform haben wir all ihre Reize gespürt - Kunden können mit den gleichen Ressourcen wie im Fall von Intel ausgestattet werden, jedoch für weniger Geld. Ein Knoten mit 2 CPUs von AMD ersetzt 10 Knoten durch 2 CPUs Intel Scalable Silver.
Ein Löffel Teer
Ein solcher Server ist sehr teuer - die Kosten betragen ungefähr 150.000 US-Dollar, und natürlich wurde er bei voller Vorauszahlung gekauft. Tatsächlich kauften wir ein Schwein im Sack, da wir noch nie zuvor mit AMD-Servern gearbeitet hatten.
Der zweite Punkt, QEMU-KVM, ermöglicht keine ununterbrochene Migration virtueller Maschinen von AMD zu Intel und umgekehrt. Mit unserer Sicherungsfunktion können Sie jedoch jederzeit ohne Datenverlust von einem Servertyp zu einem anderen wechseln.
Der Cluster zeigte uns bisher unbekannte Leistungsindikatoren, die natürlich
die Temperatur von Prozessoren beeinflussten. Selbst bei einer Prozessorlast von 30% auf dem Knoten näherte sich die Temperatur 95 Grad. Wir haben die Kühlung etwas optimiert
Rack, aber es gab kein signifikantes Ergebnis. Dann wurde in Form eines Tests die Abdeckung des Servergehäuses entfernt:
Der Temperatursprung betrug mehr als 10 Grad und überschritt 80 Grad nicht, selbst bei einer
Last von mehr als 70%, was uns mehr als zufriedenstellt. Es ist auch geplant, zusätzliche Kühlung in das Rack einzubauen.
Ergebnis
Infolgedessen hat der Server unsere Erwartungen mehr als erfüllt, der AMD EPYC 7742- Prozessor scheint uns in der Last unzerbrechlich zu sein. Das auf solchen Lösungen basierende Programm wird weiter
skaliert. Mit der Zeit planen wir, diesen Service in den Niederlanden zu starten. Wir haben die Zusammenarbeit mit EPYC sehr genossen und hoffen, dass es Ihnen auch gefallen wird!
