Forscher aus Spanien haben einen Weg entwickelt, um künstliche Intelligenz anwenden zur automatischen Klassifizierung von Geigenbogengesten nach der Bewegung des Interpreten.
Für viele Instrumente sind die Gesten eines Musikers wesentlich, da sie sich direkt auf den vom Instrument erzeugten Klang und auf die Ausdruckskraft der gespielten Musik beziehen.
VERBINDUNG: 3 START-UPS, DIE DIE MUSIKALISCHE AI-REVOLUTION FÜHREN
Dies gilt insbesondere für Geigen, bei denen die Armbewegungen des Musikers für die Erzeugung des richtigen Klangs entscheidend sind. Es wurde viel Arbeit geleistet, um eine Technologie zu entwickeln, mit der gestische Details sehr genau erfasst werden können.
System kann gute Gesten schnell erkennen
David Dalmazzo und Rafael Ramírez, Mitglieder des Labors für Musik und maschinelles Lernen der Music Technology Group MTG am Department of Information and Communication Technologies DTIC des UPF, haben diese Technologie weiterentwickelt und einen Weg gefunden für künstliche Intelligenz um Bogenbewegungen mit einer Genauigkeit von 94% zu klassifizieren.
"Wir haben Bewegungs- und Audiodaten aufgezeichnet, die sieben repräsentativen Bogentechniken entsprechen Détaché, Martelé, Spiccato, Ricochet, Sautillé, Staccato und Bariolage, die von einem professionellen Geiger ausgeführt wurden. Wir erhielten Informationen über die Trägheitsbewegung vom rechten Unterarm und von unssynchronisierte es mit den Audioaufnahmen ", erklären Dalmazzo und Ramírez, Autoren der Studie. Die beiden Forscher verwendeten Daten, die öffentlich verfügbar waren.
Schüler lernen über KI
Sie extrahierten die Informationen aus den Daten in Bezug auf Bewegung und Audio; sie trainierten einen Algorithmus, um die verschiedenen Bogentechniken zu identifizieren, die beim Geigenspiel verwendet werden. Mit einer so hohen Genauigkeitsrate wird das System zu einem wichtigen Lernwerkzeug für Schüler, die davon profitieren könnenaus dem Feedback des Systems in Echtzeit.
Die Forscher arbeiteten im Rahmen des TELMI-Projekts Technology Enhanced Learning Performance of Music Instrument, das untersuchen soll, wie Technologie Sensoren, multimodale Daten, künstliche Intelligenz und Computersysteme die Praktiken von Musikstudenten verbessern kann.
angehende Musiker erhalten eine Hand
Das Projekt zielt darauf ab, Wege zu finden, wie die Schüler sich auf die genaue Entwicklung bewährter Verfahren konzentrieren können. Mit dem Geigenprojekt sollte ein Tool erstellt werden, das den Schülern in Echtzeit Feedback gibt.
Das Projekt zielte auch darauf ab, den Studenten eine klare Möglichkeit zu geben, ihre Leistungen mit denen führender Experten zu vergleichen.
"Unsere Ergebnisse wurden bereits auf andere Musikinstrumente übertragen und in musikpädagogischen Umgebungen angewendet", fügt Rafael Ramírez, Hauptforscher des Projekts, hinzu.
Technologie beeinflusst Musikproduktion
Technologie prägt seit Jahrhunderten die Art und Weise, wie Schüler Musik lernen und üben.
Zum Beispiel brachte der Phonograph bereits 1877 Musik in die Häuser von Menschen, die sich sonst selten ein Konzertticket leisten konnten. Zu Hause Musik aus aller Welt hören zu können, muss Generationen von Menschen inspiriert habenein Instrument abholen.
Da Musik zugänglicher geworden ist, können selbst die unerwartetsten Menschen Titel aufnehmen und veröffentlichen, die jeder auf der ganzen Welt hören kann. Mr. Musk bist du das?