NHR-Tutorial: Effiziente Nutzung und Analyse von Deep-Learning-Frameworks auf HPC-Ressourcen

Date

Oct 24, 2024

Time

9:00 AM - 1:00 PM

Speaker

Holger Brunst, Sebastian Döbel (NHR@TUD)

Affiliation

ZIH

Language

de

Main Topic

Informatik

Other Topics

Informatik

Host

Anja Gerbes

Description

Deep-Learning-APIs wie TensorFlow oder PyTorch garantieren in der Regel keine effiziente Nutzung von HPC-Ressourcen. Mit bestehenden HPC-Tools ist die Effizienzanalyse von Deep-Learning-Anwendungen schwieriger als bei klassischen HPC-Anwendungen. Dieses Tutorial zielt darauf ab, die Lücke zwischen Deep-Learning-APIs und klassischer HPC-Infrastruktur zu schließen und stellt praktische Ansätze und Rezepte für ein effizientes Modelltraining auf HPC-Ressourcen vor. Darüber hinaus zeigen wir Methoden zur Analyse der Leistung von DeepLearning-Anwendungen.

Agenda

Dieses Tutorial wird als geführte praktische Sitzung organisiert, die die folgenden Themen abdeckt.

• Installation/Verwendung von Frameworks über PIP, CONDA, EasyBuild-Module und Container. Vor-und Nachteile.
• CPU- und GPU-Zuweisung für die TensorFlow- und PyTorch-Frameworks mit dem SLURM-Batch-System
• Effizientes Bereitstellen und Lesen von (Trainings-)Eingabedaten für verschiedene Klassen von Dateisystemen
• Verwenden von vorgefertigten Containern von Anbietern
• Paralleles Training / Skalierung des Trainings
• Möglichkeiten, die Leistung zu überprüfen

Donnerstag, 24.10.2024, 9:00 - 13:00 Uhr

Kurssprache: Englisch
Link zur Registrierung: http://event.zih.tu-dresden.de/nhr/deepl-hpc/ (http://event.zih.tu-dresden.de/nhr/deepl-hpc/)

Für Fragen steht Ihnen Dr. Natalie Breidenbach (natalie.breidenbach@tu-dresden.de (mailto:natalie.breidenbach@tu-dresden.de?subject=PIKA-Tutorial)) zur Verfügung.

Links

• Webseite
• Termindetails auf den Webseiten der TU Dresden (https://tu-dresden.de)

Last modified: Oct 24, 2024, 7:42:53 AM