Nahezu jede HPC-Anwendung tauscht mittels MPI Daten zwischen den an der Lösung beteiligten Prozessen aus. Diese Kommunikation benötigt Zeit und muss somit bei der Performance Optimierung berücksichtigt werden. Insbesondere bei einer großen Anzahl von Cores nimmt die Kommunikation einen nicht vernachlässigbaren Anteil an der Laufzeit des Programms ein. Hinzu kommt, dass sich manche Probleme, wie beispielsweise Last-Imbalancen, auf die Kommunikationszeit auswirken, obwohl die Kommunikation an sich nicht ursächlich ist.
In diesem Teil des Moduls erläutern wir einige grundlegende Beiträge zur Kommunikationszeit, insbesondere Wartezeiten durch Last-Imbalancen, Wartezeiten durch Serialisierung in Kommunikationsmustern und die Zeit für die eigentlichen Datentransfers. Wir stellen Methoden vor, um die jeweiligen Anteile zu messen, und definieren damit ein System von Effizienzmetriken. Schliesslich erlernen Sie Techniken und Herangehensweisen, um die genannten Einflussfaktoren zu reduzieren, wie beispielsweise das Erstellen effizienter Kommunikationsmuster, die Verwendung kollektiver Operationen und das Überlappen von Kommunikation mit Berechnung während der Ausführung.
Weitere Informationen und die Registration zu diesem Kurs finden Sie auf der Seite der Supercomputing-Akademie
Flexible online course: Combination of self-study and live seminars (HLRS Supercomputing Academy) Organizer: HLRS, University of Stuttgart, Germany
11. Sept. 2023
13. Okt. 2023
Online (flexible)
Mittel
Paralleles Programmieren
Performance-Optimierung & Debugging
Supercomputing-Akademie
Code-Optimierung
Green IT & Nachhaltigkeit
MPI
OpenMP
Zurück zur Liste
Juni 16 - 17, 2025
Online
Juni 17 - 18, 2025
Juli 09 - 10, 2025
August 18 - September 26, 2025
August 20 - 29, 2025
Online by ETH
Oktober 13 - 17, 2025
Stuttgart, Germany
Oktober 21 - 22, 2025
November 03 - Dezember 05, 2025
Dezember 01 - 04, 2025
Online by JSC
