Alexander Kläser


Magic Music Hand

Komponiere Musik mittels Handgesten


Magic Music Hand [link 01]

Magic Music Hand

Kurzdarstellung

Kurzbeschreibung

Magic Music Hand realisiert eine intuitive Schnittstelle zum freien, kreativen und echtzeitgesteuertem Komponieren von Musik.

KünstlerInnen / AutorInnen

  • Alexander Kläser

Entstehung

Kanada, 2001-2002

Eingabe des Beitrags

alexander.klaeser@smail.inf.fh-brs.de, 05.06.2002

Kategorie

  • Forschungsprojekt

Schlagworte

  • Themen:
    • Interface |
    • Mensch-Maschine-Interaktion HCI |
    • Kommunikation |
    • Mixed Reality |
    • Musik |
    • Audio |
    • Hypermedia |
    • Tracking |
    • Performance Kunst |
    • Interaktivität |
    • Klang |
    • Augmented Reality |
    • Virtuelle Realität
  • Formate:
    • Installation |
    • interaktiv |
    • Audio
  • Technik:
    • Optical Tracking |
    • Gesture Recognition

Inhalt

Inhaltliche Beschreibung

Magic Music Hand realisiert eine intuitive Schnittstelle zum freien, kreativen und echtzeitgesteuertem Komponieren von Musik. Dazu wird die Handbewegung des Benutzers mit einer Videokamera aufgenommen, Computer gestützt ausgewertet und in dem virtuellen Kontext des Computers umgesetzt wiedergegeben. Es wird möglich, über einfache Handgesten und -bewegungen Melodien zu erzeugen und verschiedenste Effekte der Musik beizumischen. Der Benutzer kann sich auf diese Weise durch die intuitive Mensch-Maschine Schnittstelle seiner eigenen Hand frei kreativ entfalten. Dadurch verschwimmen die Grenzen zwischen Mensch und Maschine. Die Funktionsfähigkeit des Systems wird am Beispiel der Improvisation über einen Blues mit seiner eigenen Hand dargestellt.

Technik

Technische Beschreibung

Das Projekt wurde unter Windows 2000 auf einem Pentium III mit 933 MHz entwickelt. Als Grabberkarte haben wir eine ATI Radeon Grafikkarte mit Videoeingang (an der York University, Kanada) sowie Winnov Videum Grabberkarte (an der FH Bonn-Rhein-Sieg, Deutschland) benutzt, die Kamera war eine KX-DP702 von Panasonic. Zum Ansteuern des Capture Devices der Grafik-, bzw. Grabberkarte sowie zum Erzeugen der Musik und zum Kontrollieren der Effekte wurde Microsoft DirectX 8 benutzt. Die dazugehörige GUI-Anwendung wurde auf der QT-Lirbary entwickelt

Hardware / Software

Pentium III 933 MHz
ATI Radeon, bzw. Winnov Videum
KX-DP702 von Panasonic
Microsoft DirectX 8
Trolltech Qt-Library

  • › digital sparks 2002 [link 02]
  • › Paper über die entwickelte Handgestenerkennung [PDF | 326 KB ] [link 03]
  • › Improvisation über einen Blues [3 MB ] [link 04]
  • › Demonstration der Grundfunktionen [2 MB ] [link 05]
  • › Screenshot 1 [53 KB ] [link 06]
  • › Screenshot 2 [50 KB ] [link 07]
  • › Screenshot 3 [49 KB ] [link 08]