Tone Tutor : A virtual teacher for music theory

Abstract

Dieses Projekt befasst sich mit der Herausforderung, Menschen zu motivieren, in ihrer Freizeit etwas so schwieriges wie Musiktheorie zu lernen, indem Gamification-Prinzipien und immersive Geräte wie die Meta Quest 3 genutzt werden. Ein Spiel wurde entwickelt, um Musiktheorie zu lehren und den Nutzern das Spielen auf einem MIDI-Controller zu ermöglichen, wobei Werkzeuge wie Unreal Engine und Cubase verwendet wurden, um das Engagement zu erhöhen. Das Spiel verfügt über einen virtuellen Lehrer, dargestellt durch einen Roboter „Tone Tutor“, in einer Mixed-Reality-Umgebung. Gamification-Elemente, einschließlich einer Erzählung und eines Punktesystems, schaffen herausfordernde Aufgaben. Der Roboter liefert alle Unterrichtsinhalte und ersetzt traditionelle schriftliche Tutorials. Das Spiel bietet zwei verschiedene Spiele, um das Nutzerengagement zu steigern. Trotz der Komplexität des Setups ist das Spiel angenehm zu spielen, und die Integration der Komponenten war erfolgreich. Wertvolles Feedback wurde für zukünftige Verbesserungen gesammelt. Dieses Projekt stellt einen vielversprechenden Ansatz zur Musiktheorie-Ausbildung durch Gamification dar und bietet eine solide Grundlage für zukünftige Versionen.

This project addresses the challenge of motivating individuals to learn something as difficult as music theory in their free time by using gamification principles and immersive devices like the Meta Quest 3. A game was developed to teach music theory and allow users to play on a MIDI controller, utilizing tools such as Unreal Engine and Cubase to enhance engagement. The game features a virtual teacher, represented by a robot “Tone Tutor”, in a mixed reality environment. Gamification elements, including a narrative and a points system, create engaging challenges. The robot delivers all instructional content, replacing traditional written tutorials, and the game offers two different games to boost user engagement. Despite the complexity of the setup, the game is comfortable to play, and the integration of components was successful. Valuable feedback was collected for future improvements. This project presents a promising approach to music theory education through gamification, providing a solid foundation for future versions.