AI-System erstellt 3D-Bewegungsskulpturen mithilfe von Videomaterial

MIT CSAIL hat faszinierende Aufnahmen eines Systems veröffentlicht, das komplexe menschliche Bewegungen über 3D-Bewegungsskulpturen visualisiert. Das Video zeigt, wie das System eine 3D-Struktur erstellt, die von einem menschlichen Körper überstrichen wird, wenn er sich durch den Raum bewegt.

Das aufgerufene System MoSculp wird zuerst mit einem Eingangsvideo gespeist. Das System bettet es dann 3D-fähig wieder in die Szene ein. Laut MIT CSAIL können Benutzer des Systems das Skulpturendesign anpassen, indem sie verschiedene Materialien und Lichtverhältnisse auswählen.

Durch die Visualisierung der Bewegung mit diesem System kann die menschliche Bewegung auf eine Weise verstanden werden, die unmöglich ist, wenn sie nur mit bloßem Auge betrachtet wird. Die Bewegungsskulpturen enthüllen Raum-Zeit-Bewegungsinformationen, die es dem Betrachter ermöglichen, zu interpretieren, wie verschiedene Teile des menschlichen Körpers sindzu unterschiedlichen Zeiten reagieren.

Das System kann sowohl von Profisportlern und ihren Trainern als auch von Ärzten und anderen Praktikern verwendet werden, die daran arbeiten, eine menschliche Bewegung zu verstehen, die bei der Entwicklung von Mobilitätshilfen und Prothesen helfen könnte.

„Stellen Sie sich vor, Sie haben ein Video von Roger Federer, der in einem Tennismatch einen Ball serviert, und ein Video, in dem Sie Tennis lernen“ sagt Doktorand Xiuming Zhang, Hauptautor eines neuen Papiers über das System. „Sie könnten dann Bewegungsskulpturen beider Szenarien erstellen, um sie zu vergleichen und umfassender zu untersuchen, wo Sie sich verbessern müssen.“

Das Forschungsteam wird seinen Beitrag zu MoSculp nächsten Monat auf der UIST-Konferenz User Interface Software and Technology in Berlin vorstellen.