Kennen Sie das? Sie haben gerade 50.000€ für einen humanoiden Roboter ausgegeben, aber auf Partys ist er eine echte Schnarchnase und deswegen müssen Sie ihn mit Reinforcement Learning in einer Simulationsumgebung auf Ihrem 100.000€ GPU-Cluster das Tanzen beibringen?

Was heißt hier „Nein“?

In diesem Talk zeigen wir Ihnen, wie Sie Ihrem humanoiden Roboter mithilfe von Reinforcement Learning in Simulationsumgebungen das Tanzen beibringen können. Wir starten mit einer Einführung in Reinforcement Learning (RL) und erklären die Grundlagen von Policies und Rewards. Danach machen wir unsere ersten Schritte in Simulationsumgebungen mit einer Einführung in NVIDIA Isaac Sim und das Unitree RL Lab. Wir durchlaufen die Schritte zur Entwicklung einer Lauf-Policy - und machen einen Sturz nach dem anderen.

Zum Schluss bringen wir mit einer Tanz-Policy richtig Schwung in die Bude: Sie lernen, wie Sie menschliche Bewegungen aus Videos auf den Unitree G1-Roboter übertragen und eine Imitations-Policy trainieren können, die genauso schlecht tanzt wie Sie. Während des Vortrags werden wir live auf der Bühne ein Gehtraining durchführen und regelmäßig den Fortschritt verfolgen. Zum großen Finale wird unser humanoider Roboter die Session mit einer Tanzvorführung abschließen.