\\ Learning\ I See What You Hear\ Theme: Interface



Thema: Interface (Only available in german)

multimodales Interface des MARS-Exploratory Media Lab

Spielarten aktueller Interfaceforschung


Grundlage für diesen Workshop war die Forschung des MARS-Exploratory Media Lab zum Thema intuitiver Interfaces. Interfaces sind die Schnittstellen, die eine Kommunikation zwischen Mensch und Computer erst ermöglichen. Traditionelle Interfaces sind z. B. Maus oder Tastatur. Intuitive Interfaces hingegen zielen darauf ab, für die BenutzerInnen mehr Handlungs- und Bewegungsfreiheit und damit multisensuale, spielerische Interaktionen zuzulassen. Ein solches intuitives Interface ist das elektronische Instrument [link 01] Theremin. Es funktioniert nicht nur autark, sondern auch als Schnittstelle zu komplexen multimedialen Mixed Reality-Architekturen.
Intuitive Interfaces arbeiten mit Erfassungssystemen wie Video-Tracking, elektrostatischen Feldern, Infrarot-, Druck- oder Gewichtssensoren, deren Daten durch Computerprogramme bearbeitet und mit audiovisuellen Daten zusammen zu komplexen, interaktiven Räumen generiert werden können. Für die AkteurInnen wird der eigene Körper zum Kommunikationsmedium im Aktionsraum.
Sensoren und elektronische Bauteile bilden die Interface-Hardware, Programme und Sensorengestaltung entsprechen der Software. Will man das Interface anders nutzen, so müssen sowohl Programm als auch Sensorengestaltung angepasst werden.
Zur Einstimmung auf das Thema werden Theremin- bzw. EFS (Electric Field Sensor) - Projekte des [link 02] MARS-Exploratory Media Lab, des Künstlers [link 03] Björn Schülke, sowie der Multimediafirma [link 04] Büro Hellblau vorgestellt. Die Projektleiter zeigen diese Projekte mit Hilfe von Videos und Powerpoint-Präsentationen am Beginn des Workshops in einem einführenden Vortrag

Exemplarische Projekte

Lauschfelder - ein Raum möbliert mit Daten.
[link 05] Abbildung vergrößern

Murmuring Fields


Die Installation "Murmuring Fields" ist ein Mixed Reality-Medienraum, in dem die Dynamik der Bewegung als Grundlage räumlichen Erlebens eingesetzt wird. Raum wird durch Bewegung generiert. Der Einsatz digitaler Techniken stimuliert dabei die körperliche Aktivität und spielt mit dem Rhythmus von Klang- und Bildraum.

"Murmuring Fields":
[link 06] Video [RealMedia | 31 Sek.]
[link 07] Video [Windows Media | 31 Sek.

[link 08] Abbildung vergrössern

eMUSE- System


Für Murmuring Fields wurde eigens das "eMUSE"-System (electronic Multi-User Stage Environment) entwickelt, eine Interface-Technik, die Körperbewegungen mit der virtuellen Umgebung verknüpft. Die interaktive Installation wurde in Ausstellungen sowie in einem Theater erprobt.
Das "eMUSE"- System ist eine Software-Plattform für die Fusion von digitalen und realen Handlungsräumen. Diese Architektur ist insbesondere für Anwendungen auf experimentellen Bühnen und im öffentlichen Raum einsetzbar. Das audiovisuelle Modul und das Netzwerk-Modul der eMUSE-Struktur unterstützt in Echtzeit vernetzte Szenarien auf der Basis von Java und des VRML-Browsers. eMUSE bindet mehrere BenutzerInnen ein und ermöglicht ihre Darstellung in einer virtuellen Umgebung sowie die Partizipation von räumlich entfernten Usern via Internet. Die Plattform unterstützt wichtige Komponenten performativer Künste, wie beispielsweise die Möglichkeit der freien Bewegung im Raum, die Übertragung der Bewegung in Echtzeit in eine virtuelle Umgebung, die Partizipation mehrerer Performer in interaktiven vernetzten Szenarien und deren Interaktion untereinander.

"eMUSE in public setting":
[link 09] Video [RealMedia | 48 Sek.]
[link 10] Video [Windows Media | 48 Sek.]
"eMuse in theatre space":
[link 11] Video [RealMedia | 1 Min.]
[link 12] Video [Windows Media | 1 Min.]

Die tönenden Taschen sind gleichzeitig digitale Agenten und autonome Systeme

MARS-Bag


"MARS-Bags" setzen die Gestik sich nähernder Personen in akustische Signale um. Sind sie auf eine eigene Frequenz eingestellt und mit persönlichen Daten programmiert, vergleichen sie diese Daten mit denen anderer "MARS-Bag" - Träger und reagieren mit Signaltönen auf Ähnlichkeiten. Die Unvorhersehbarkeit der Reaktionen schafft eine spielerische Erweiterung sozialer Interaktionsformen der Kontaktaufnahme.

"MARS-Bags" in Aktion:
[link 13] Video [RealMedia | 28 Sek.]
[link 14] Video [Windows Media | 28 Sek.]

[link 15] Abbildung vergrößern

MARS-Feld


"MARS-Felder" sind begehbare Theremin-Interfaces und mobile Performance-Bühnen. Die einzelnen Module können zu großen Tanzflächen zusammengefügt werden. Durch Effektgeräte sind die Tonsequenzen der einzelnen Module veränderbar. Das Theremin des "MARS-Feldes" hat eine Reichweite von ca. 32 cm. Aktiviert wird der Sensor, der hier ohne Rechneranbindung als Klangerzeuger genutzt wird, durch Betasten oder Betreten des Podests. Das "MARS-Feld" ist ein quadratisches, begehbares Podest von fünfzehn Zentimeter Höhe, das begehbar ist und in dem ein Thereminsensor, Effektgeräte, Verstärker und Lautsprecher eingebaut sind. Das Theremin ist ein "elektrostatischer Feldsensor", das ursprünglich als Musikinstrument konzipiert wurde, aber auch komplexe Programme steuern kann.
Es kann wie ein Tanzboden rhythmische Fußbewegungen eines Tänzers mit einem rhythmisch korrespondierenden Klangbild beantworten. Wenn es wie ein Spieltisch benutzt wird, übersetzt es aber auch kleinste Handbewegungen in ein sehr individuelles Klangmuster. Mehrere Spieler können auch ein gemeinsames Klangbild hervorrufen.

Liste der Links in der Seite:

[link 01]../theremines/
[link 02]http://www.imk.fraunhofer.de/mars
[link 03]http://www.schuelke.org/
[link 04]http://imk.gmd.de/ich-sehe-was-du-hoerst/hellblau.html
[link 05]images/murmuring_fields4-GROSS.jpg
[link 06]http://netzspannung.org/cat/servlet/CatServlet/$files/137417/e-muse1_ode_00h00m3
1s.ram
[link 07]http://netzspannung.org/cat/servlet/CatServlet/$files/137540/e-muse1_ode_00h00m3
1s.asx
[link 08]images/emuse_532-GROSS.jpg
[link 09]http://netzspannung.org/cat/servlet/CatServlet/$files/137422/e-muse2_ode_00h00m4
8s.ram
[link 10]http://netzspannung.org/cat/servlet/CatServlet/$files/137545/e-muse2_ode_00h00m4
8s.asx
[link 11]http://netzspannung.org/cat/servlet/CatServlet/$files/137427/e-muse3_ode_00h01m0
3s.ram
[link 12]http://netzspannung.org/cat/servlet/CatServlet/$files/137427/e-muse3_ode_00h01m0
3s.ram
[link 13]http://netzspannung.org/cat/servlet/CatServlet/$files/137412/marsbag_ode_00h00m2
8s.ram
[link 14]http://netzspannung.org/cat/servlet/CatServlet/$files/137535/marsbag_ode_00h00m2
8s.asx
[link 15]images/dancefloor1-gr.jpg