Supercomputer made in Jülich setzt neue Maßstäbe

Das Forschungszentrum Jülich und seine Partner haben einen unvergleichlich flexiblen und energieeffizienten Supercomputer konstruiert – es ist der schnellste Rechner Europas.

Jülich, 16. November 2020 – Der Jülicher Supercomputer JUWELS wurde in den letzten Monaten fertig ausgebaut. Dank eines neuen Booster-Moduls sind nun 85 Petaflops möglich, was 85 Billiarden Rechenoperationen pro Sekunde oder der Rechenleistung von mehr als 300 000 modernen PCs entspricht. JUWELS kann damit die Grenzen von Simulationen massiv ausweiten und bietet zudem die stärkste Plattform Europas für den Einsatz künstlicher Intelligenz (KI). Der Rechner, den das Forschungszentrum Jülich, das französisch-deutsche Unternehmen Atos und der Münchner Supercomputing-Spezialist ParTec gemeinsam mit dem US-Hersteller NVIDIA entwickelt haben, ist aktuell das schnellste System in Europa.

Der Jülicher Superrechner, der durch das nationale Gauss Centre for Supercomputing finanziert wird, erreichte den 7. Platz auf der heute erschienenen TOP500-Liste der schnellsten Computer der Welt. Auf der aktuellen Green500-Liste rangiert JUWELS auf Platz 3 und ist das energieeffizienteste System in der höchsten Leistungsklasse.

Video: Flexibler Superrechner made in Jülich (Länge: 4:01 Min.)

„Wir verstehen Supercomputing nicht nur als Gegenstand unserer Forschung, sondern vor allem auch als mächtiges Werkzeug, mit dem wir gemeinsam mit unseren Partnern aus Wissenschaft und Industrie komplexe Forschungsfragestellungen beantworten können“, sagt Prof. Wolfgang Marquardt, Vorstandsvorsitzender des Forschungszentrums Jülich.

„Mit dem vollständig ausgebauten JUWELS-System ermöglicht das Forschungszentrum Jülich Wissenschaftlerinnen und Wissenschaftlern unterschiedlichster Institutionen und wissenschaftlicher Disziplinen den Zugriff auf Höchstleistungsrechenkapazitäten auf allerhöchstem Niveau. Gleichzeitig demonstrieren wir mit dem System aber auch den verantwortungsvollen Umgang mit dem immer weiter zunehmenden Energiebedarf für die Bereitstellung von Rechenleistung.“

Größere Realitätsnähe

„Ein in der derzeitigen COVID-19-Krise sehr aktuelles Beispiel liefert die Unterstützung der Medikamentenentwicklung am Computer“, erklärt Prof. Thomas Lippert, der Leiter des Jülich Supercomputing Centre. „Erst die Rechenpower des Boosters ermöglicht es unseren Forschern, die Prozesse vor, während und nach dem Aufeinandertreffen eines potenziellen Wirkstoffs mit einem Rezeptor oder Protein realitätsnah genug zu simulieren.“

Wirkstoffforschung
Wirkstoffforschung auf biologisch relevanten Zeitskalen
Forschungszentrum Jülich, HHU Düsseldorf / C. Pfleger, H. Gohlke

Ein weiteres Beispiel ist die detaillierte Simulation von Oberflächen-, Erd- und Grundwasserbewegungen. Mit dem neuen JUWELS-Booster sind Forscher erstmals in der Lage, Simulationen für Deutschland und Europa mit der erforderlichen Feinauflösung, zum Beispiel von einzelnen Hängen oder Flusskorridoren, durchzuführen.

 
 

Early Access Applications: Die ersten Anwendungen

Rechenzeit auf dem JUWELS-Booster ist kostbar. Schon während der ersten Testphase im Spätsommer und Herbst dieses Jahres liefen erste Anwendungen auf dem System. Die sogenannten „Early Access Applications“ geben wertvolle Hinweise für die Optimierung der Codes, und liefern erste handfeste wissenschaftliche Ergebnisse.

Mehr lesen...

Intelligente Aufgabenteilung – höchste Energieeffizienz

JUWELS beruht auf einer hochflexiblen modularen Architektur, die das Forschungszentrum Jülich gemeinsam mit europäischen und internationalen Partnern entwickelt hat. „Das neue Booster-Modul ist mit seinen leistungsstarken, hocheffizienten Grafikprozessoren speziell für ausgesprochen rechenintensive Anwendungen ausgelegt, die sich gut parallel auf einer großen Zahl von Rechenkernen bearbeiten lassen“, erläutert Dr. Dorian Krause, der in Jülich für den Aufbau und Betrieb des außerordentlich komplexen Systems verantwortlich ist. „Zudem ist JUWELS unter den Top 10 der weltweit schnellsten Rechner führend in der Energieeffizienz.“

NVIDIA A100 Tensor Core GPU
Forschungszentrum Jülich / TRICKLABOR

Der Jülicher Supercomputer ist als einer der ersten mit NVIDIA A100 Tensor Core GPUs ausgestattet, die auf der NVIDIA Ampere-Architektur basieren. Etwa 12 Millionen sogenannte CUDA-Kerne (FP64) vereint der Booster auf seinen über 3.700 Grafikprozessoren, die über ein NVIDIA Mellanox HDR Infiniband Höchstleistungsnetz mit 200 Gb/s miteinander verbunden sind. Der Booster allein erreicht eine Spitzenleistung von 73 Petaflops. Speziell für KI-Anwendungen, die andere Anforderungen an die Hardware stellen, sind sogar bis zu 2,5 Exaflops möglich: das entspricht 2,5 Trillionen Rechenoperationen pro Sekunde. Das Modul ist damit die stärkste Plattform Europas für den Einsatz künstlicher Intelligenz (KI).

„Der Clou bei JUWELS ist, dass beide Module, das bisherige ‚Cluster-Modul‘, das mit schnellen Prozessoren (CPUs) arbeitet, und das Booster-Modul mit seinen GPUs, ganz eng verschaltet sind“, sagt Bernhard Frohwitter, CEO des Münchner Supercomputing Spezialisten ParTec. Die Zusammenarbeit der Module steuert dabei ParTecs modulares Software-System ParaStation Modulo, eine weltweit führende Entwicklung aus Deutschland. „Mit ParaStation Modulo kann JUWELS innerhalb eines Codes dynamisch beliebig auf CPUs und GPUs zugreifen und die Rechnung so optimieren.“

Wasserkühlung im JUWELS-Superrechner
Forschungszentrum Jülich / TRICKLABOR

„Beide Module stammen von Atos und basieren auf unserer BullSequana X Infrastruktur, deren hocheffiziente, wassergekühlte, patentierte DLC-Lösung (Direct Liquid Cooling) wesentlich zum niedrigen Energieverbrauch des Systems beiträgt", erklärt Agnès Boudot, Senior Vice President, Head of HPC & Quantum bei Atos. „Das Design von Atos stellt sicher, dass die Rechenleistung der CPU- und GPU-Blades in vollem Umfang von Anwendungen genutzt werden kann.“

Vorbereitet auf Zukunftstechnologien

Für Prof. Thomas Lippert ist das JUWELS-System ein Meilenstein hin zum europäischen Exascale-Rechner, der ab 2023 an den Start gehen soll. Der Bau und Betrieb eines solchen Supercomputers gilt weltweit als nächster großer Schritt im Supercomputing. Mit einer Rechenleistung von mindestens einem Exaflops, also von 1 Trillion Gleitkommaoperationen pro Sekunde, wäre er noch mindestens zwölfmal schneller als der JUWELS-Supercomputer.

„JUWELS modulare Architektur, das Design seiner Rechenknoten, das Netzwerk, die Infrastruktur und die Kühlung sowie die Software-Architektur lassen sich ohne Weiteres auf einen Exascale-Rechner übertragen, wobei Kosten und Energieaufwand vertretbar bleiben“, erklärt Thomas Lippert.

Auch in anderer Hinsicht ist JUWELS perfekt auf die Zukunft des Supercomputing vorbereitet. Die modulare Bauweise ermöglicht es, Zukunftstechnologien zu integrieren, an denen auch im Forschungszentrum Jülich intensiv geforscht wird: Dazu gehören beispielsweise Quantencomputer-Module oder neuromorphe Module, die nach dem Vorbild des menschlichen Gehirns arbeiten.

JUWELS-Supercomputer in der Rechnerhalle des Jülich Supercomputing Centre
Forschungszentrum Jülich / Wilhelm-Peter Schneider

Förderung durch Bund und Land

Die Anschaffung des JUWELS-Boosters wird vom Bund und vom Land Nordrhein-Westfalen finanziert. Das JSC betreibt JUWELS als Mitglied des Gauss Centre for Supercomputing (GCS), dem Zusammenschluss der nationalen Höchstleistungsrechenzentren in Deutschland, zu denen die drei Rechenzentren des Forschungszentrums Jülich (JSC), der Bayerischen Akademie der Wissenschaften (LRZ) und der Universität Stuttgart (HLRS) gehören.

Die Rechenzeit wird nach Antragstellung und wissenschaftlicher Begutachtung auf nationaler und europäischer Ebene vergeben. Das GCS und das Forschungszentrum Jülich werden unterstützt vom Bundesministerium für Bildung und Forschung (BMBF) und dem Ministerium für Kultur und Wissenschaft des Landes Nordrhein-Westfalen sowie dem Ministerium für Wissenschaft, Forschung und Kunst Baden-Württemberg und dem Bayerischen Staatsministerium für Wissenschaft und Kunst.

 
 

Jülicher Konzept

Das am Jülich Supercomputing Centre (JSC) verwirklichte modulare Konzept wurde in langjähriger Zusammenarbeit mit der Münchner Softwarefirma ParTec entwickelt. Es sieht einen Superrechner aus mehreren spezialisierten Bausteinen vor, die sich über eine einheitliche Software je nach Bedarf dynamisch kombinieren lassen. Seit 2011 haben europäische Partner aus Industrie und Forschung unter Jülicher Leitung erste Systeme in modularer Bauweise entwickelt und erprobt, und das Konzept in den EU-geförderten DEEP-Forschungsprojekten beständig weiter ausgebaut.

Der Booster entstand aus einer Zusammenarbeit der Experten des JSC mit dem Supercomputer-Hersteller Atos (Frankreich), dem Software-Spezialisten ParTec (Deutschland) und dem Grafikprozessoren-Hersteller NVIDIA (USA). Der ebenfalls beteiligte israelische Netzwerkspezialist Mellanox wurde im Frühjahr dieses Jahres von NVIDIA übernommen.

Spezifikationen:

 

JUWELS-Cluster

JUWELS-Booster

Rechenleistung

12 Petaflops (12 Billiarden Rechenoperationen pro Sekunde)

73 Petaflops (73 Billiarden Rechenoperationen pro Sekunde)

Rechenknoten

2511 CPU-Knoten + 56 GPU-Knoten

936 GPU-Knoten

Prozessoren

insgesamt 5134 CPUs (Intel Xeon Skylake) + insgesamt 224 GPUs (NVIDIA V100)

insgesamt 1872 CPUs (AMD EPYC Rome) + insgesamt 3744 GPUs (NVIDIA A100)

Rechenkerne

122.768 CPU-Kerne + 71.680 FP64-CUDA-Kerne (GPUs insgesamt)

44.928 CPU-Kerne + 12.939.264 FP64-CUDA-Kerne (GPUs insgesamt)

Arbeitsspeicher

insgesamt 275 TB

insgesamt 479 TB + insgesamt 150 TB High Bandwidth Memory

Netzwerk

100 Gb/s (Mellanox InfiniBand EDR)

200 Gb/s (NVIDIA Mellanox HDR InfiniBand)

 
 

Supercomputer für große Rechenaufgaben und KI

JUWELS hat dank eines neuen Booster-Moduls noch einmal enorm an Rechenleistung zugelegt. Forschende aus ganz Europa haben in den letzten Monaten Programme so angepasst und weiterentwickelt, dass sie massiv parallel auf den mehr als 3.700 Grafikprozessoren (GPUs) des Boosters laufen.

Mehr lesen...

Weitere Informationen:

Pressemitteilung zum Download (pdf)

Pressemitteilung vom 14. November 2019, Ein Turbolader für den Superrechner JUWELS

Jülich Supercomputing Centre

TOP500-Liste der schnellsten Computer der Welt

Bilder:

Bilder dürfen mit Quellenangabe für die redaktionelle Berichterstattung verwendet werden.

Forschungszentrum Jülich / Wilhelm-Peter Schneider
Forschungszentrum Jülich / Wilhelm-Peter Schneider

Forschungszentrum Jülich / TRICKLABOR
Forschungszentrum Jülich / TRICKLABOR

Ansprechpartner:

Prof. Dr. Dr. Thomas Lippert
Direktor des Jülich Supercomputing Centre
Tel.: +49 2461 61-6402
E-Mail: th.lippert@fz-juelich.de

Dr. Dorian Krause
Jülich Supercomputing Centre
Tel.: 02461 61-3631
E-Mail: d.krause@fz-juelich.de

Pressekontakt:

Tobias Schlößer
Unternehmenskommunikation
Telefon: +49 2461 61-4771
E-Mail: t.schloesser@fz-juelich.de

Letzte Änderung: 10.11.2022