Macke Labor

Inhaltliche Beschreibung

Das MACKE LABOR greift die Vorzüge des bereits museumspädagogisch erprobten Audio Guides auf, stellt aber eine andere Technologie zur Verfügung, aus der sich neue Möglichkeiten ergeben. Auch bisher bestehende Probleme, so etwa das lästige 'Abfragen' der einzelnen Exponate, die Unbequemlichkeit des Tragens und das Mithören im Gedränge, können nun gelöst werden. Als temporäre Einrichtung im Kunstmuseum Bonn bindet das MACKE LABOR die neue Audiotechnologie LISTEN in ein pädagogisches Environment ein. Via Kopfhörer taucht der Besucher in einen die Ausstellung erweiternden Klangraum ein. Das Environment MACKE LABOR experimentiert mit neuartigen akustischen Möglichkeiten und macht unterschiedliche Perspektiven auf die Kunst von August Macke zugänglich: Kritiker, Kunsthistoriker und Restauratoren 'kommen zu Wort' und treten dem Besucher im Hörerlebnis eines Features entgegen. Welche Beiträge jeweils zu hören sind, hängt von der Kopfrichtung des Besuchers und seiner spontanen Bewegung im Raum ab.

Einige Monate zuvor war die LISTEN Technologie bereits als künstlisches Medium im Rahmen der audiovisuellen Installation `Raumfaltung´ von Beat Zoderer, Ramón González-Arroyo, Gerhard Eckel und Oswald Egger erprobt worden und Teil einer Ausstellung im Kunstmuseum Bonn (Kunstmuseum Bonn: Beat Zoderer - Der doppelte Boden ist tiefer als man denkt. Ausst. 6. Juli - 14. September 2003).
Im Anschluss daran entstand die pädagogische Anwendung im MACKE LABOR, ebenfalls im Kunstmuseum Bonn. Gerhard Eckel schreibt: „Mit dem MACKE LABOR präsentiert das Projekt LISTEN zum zweiten Mal im Kunstmuseum Bonn. Nach der Installation `Raumfaltung´, die das künstlerische Potential des neuen Mediums Listen im Sommer 2003 überzeugend demonstriert hat, präsentieren wir jetzt ein Beispiel aus der Kunstvermittlung. Im MACKE LABOR werden die neuen Gestaltungsmöglichkeiten der LISTEN Technologie pädagogischen Zielen untergeordnet. Dabei wird die für LISTEN typische Anpassung der Audioinhalte an das Verhalten der Besucher im Raum zum ersten Mal in einer realen Ausstellung mit historischen Kunstwerken ausgelotet. Das Ergebnis ist ein Klang- und Informationsenvironment, das weit über die Möglichkeiten der bekannten Audio-Guides hinausgeht und das versucht, das Publikum auch auf der sinnlichen Ebene anzusprechen. Nach professionellen Richtlinien der Radiokunst inszeniert und produziert, lädt das MACKE LABOR sein Publikum ein, mit einer Art Raumfeature zu experimentieren, das sich mit den authentischen Kunstwerken zu einer neuen Art der Museumserfahrung verbindet. In diesem sogenannten Audio-Augmented-Environment bewegt man sich frei und ohne mit der Technologie direkt interagieren zu müssen. Damit wird ein weiterer wesentlicher Aspekt von LISTEN deutlich, nämlich das Zurücktreten der Technologie zugunsten der ästhetischen Erfahrung: Man setzt sich den LISTEN-Kopfhörer auf, und schon bewegt man sich mühelos durch die Welt August Mackes in Ton und Bild.“

Als pädagogische Anwendung baut das MACKE LABOR auf der LISTEN-spezifischen Möglichkeit auf, Sprache in virtuellen Klangräumen zu inszenieren. So können auch verschiedene Textarten und auditive Ebenen miteinander kombiniert werden. Joachim Gossmann, Julia Hagenberg und Annelie Kürsten: „Die unterschiedlichen Sprachebenen sind durch eine jeweils andere Raumakustik markiert, die Zitate mit Klangcollagen unterlegt. Hierbei greifen akustische und räumliche Inszenierungen aufeinander: In der Kombination von Bildern, Klangereignissen und Ausstellungsarchitektur ist eine inhaltliche Topographie angelegt, die, einer Landkarte vergleichbar, ausgewählte Orte und Situationen in Mackes Leben umreißt. (...) Durch die physische Navigation, das Umhergehen und Herantreten an Bilder bewegt sich der Besucher durch einen Meta-Raum, durch eine Datenbank.“

Gerhard Eckel erläutert (in einem Interview mit Sabine Breitsameter im September 2003, SWR2):
„Das LISTEN-System besteht im Wesentlichen für die Benutzer aus einem Funkkopfhörer, also einem drahtlosen Kopfhörer, der darüber hinaus auch noch zwei Antennen besitzt, die den restlichen im Raum installierten Antennen erlauben, diese Person, die den Kopfhörer trägt, in dem Raum zu verorten. Also wissen wir immer genau, wo diese Person rumläuft. Dahinter verbergen sich dann mehrere Computersysteme. Das eine ist eben dieses System, das die Position berechnet. Das zweite ist das System, das ein Modell des realen Raumes beinhaltet. Und die dritte Komponente ist ein Programm, das die Verräumlichung der Klänge übernimmt. Diese Programme sind miteinander in einer bestimmten Art und Weise verbunden, so dass sie dieses neue Medium LISTEN ermöglichen.
(...)
Das LISTEN-Projekt erlaubt uns Klang, Körper und Raum in ein neues, komponierbares Verhältnis zu bringen. Das heißt, wir haben zum ersten Mal die Möglichkeit, die drei Aspekte der Wahrnehmung - die Eigenwahrnehmung, die Raumwahrnehmung, im visuellen Sinne oder auch im taktilen Sinne, und die akustische Raumwahrnehmung und Klangwahrnehmung - miteinander ganz eng in Beziehung zu setzen.
(...)
Einerseits können wir eine virtuelle Klangwelt produzieren für die jeweiligen Besucher-Ohren mit virtuellen Schallquellen, die uns an gewissen Orten im Raum erscheinen, mit verschiedenen Akustiken, die wir durchschreiten können. Und andererseits wissen wir auch, wo sich die Person befindet im Raum, relativ zu den anderen Objekten im Raum, die uns interessieren. Und das erlaubt uns, auf das Verhalten unserer Zuhörer zu reagieren. Das heißt, wenn die von der einen Seite kommen, können sie etwas anderes hören als wenn sie von der anderen Seite kommen. Also wir wissen, wo sie sich im Raum bewegen, wo sie schon mal waren, wie schnell sie sind, was sie schon gehört haben. Und auf alle diese Dinge können wir in der Komposition reagieren. Es ist eine sehr enge Beziehung möglich zwischen dem Verhalten im Raum und dem Klang.
(...)
Mit dem LISTEN-System lassen sich akustische Topographien erzeugen, die in Realräumen vollkommen unrealisierbar sind. Damit unterscheiden wir uns auch von anderen Raum-Klangarbeiten. Wir haben es mit einem virtuellen akustischen Raum zu tun. Und das ist eigentlich eine Art "Augmented Reality" - die "reale" Wirklichkeit wird mit der Datenwelt vermischt. Wir bezeichnen es im Englischen manchmal als "Audio-Augmented Reality": Es ist eine Verbindung der Wahrnehmung im Realraum mit virtuellen akustischen Soundscapes.“



Das MACKE LABOR ist ein Teilergebnis des von der EU geförderten interdisziplinären Forschungsprojektes LISTEN, das die Erweiterung alltäglicher Umgebungen durch interaktive Klanglandschaften untersucht.

Projektbeschreibung LISTEN (http://listen.imk.fraunhofer.de/d.html):
„Erweiterung alltäglicher Umgebungen durch interaktive Klanglandschaften.
Den Benutzern von LISTEN wird ein interaktiver Zugang zu personalisierten und ortsabhängigen Audioinformationsräumen zur Verfügung gestellt, während sie ganz natürlich ihre alltägliche Umgebung erkunden. Eine neue Form von multi-sensorischen Inhalten wird angeboten, um die sinnliche, emotionale und pädagogische Wirkung eines breiten Spektrums von Anwendungen, die von Kunstausstellungen zu Marketing- und Unterhaltungsveranstaltungen reichen, zu erhöhen. Dies wird erreicht, indem die physikalische Umgebung durch eine dynamische Klanglandschaft, die die Benutzer über einen deren Bewegung ortenden, drahtlosen Kopfhörer erfahren, erweitert wird. Immersive, um Audioquellen erweiterte Umgebungen werden durch die Verbindung von hochauflösender räumlicher Audiowiedergabe-Technologie und anspruchsvoller Benutzermodellierungsmethoden erzeugt. Diese erlauben es, die Inhalte dem individuellen Verhalten der Benutzer im Raum anzupassen. Im Laufe des Projektes werden mehrere Prototypen und ein VR-gestütztes Autorenwerkzeug produziert. Technologische Neuerungen werden unter Laborbedingungen verifiziert, während die Prototypen in öffentlichen Ausstellungen evaluiert werden.

ERWEITERUNG Der ungewohnte Museumsbesuch beginnt mit einem Kopfhörer, den die Besucher wie eine leichte Kopfbedeckung aufsetzten. Ohne weitere Gerätschaften bewegen sie sich frei im Museum - begleitet von unterschiedlichen Klangsituationen. Ein erster Halt vor einem Gemälde liefert Informationen zum Werk. Mit der nächsten Kopf- und Körperbewegung trifft man auf eine neue Klangquelle. Eine Kommentatorenstimme erzählt vom Künstler oder beschreibt die Schaffensperiode, aus der das Bild stammt. In den Raum sind zahlreiche Informationen in Form von Tondokumenten eingeschrieben.
Die Szene wechselt. Ein neuer Ausstellungsbereich mit Bildern und musikalischen Klangtexturen lockt. Man durchschreitet einen mit Jazzklängen gefüllten Raumausschnitt, der eine Kuppelform beschreibt, trifft auf eine vertikal in den Realraum eingezogene Schicht zurückhaltender Klaviersequenzen und findet sich etwas später in einem unsichtbaren Kubus herabrieselnder Geräusche. Das in den Ausstellungsraum eingeschriebene Raumvolumen ist nach einem ausgefeilten Klangkonzept künstlerisch gestaltet. Ihrer individuellen Motivation folgend navigieren die Besucher ihre Körper durch das Klangambiente. Auf dieser Klang- und Sehreise verschmelzen Klangtexturen mit der visuellen, taktilen, olfaktorischen Szene. Der Museumsbesuch wird zur intuitiven, sinnlichen, körperlichen Erfahrung.

IMMERSION Raumillusionäre Audiolandschaften umschliessen die Betrachter. Es ist, als ob man in eine andere Klangwelt eintaucht, die sich über lokalisierbare Schallquellen überzeugend konstituiert. Subtil, dezent, wirkt sie im Hintergrund und zerstreut die Zweifel an der artifiziellen Welt. Die Betrachter empfinden sich gleichzeitig als Teil dieser Umgebung und darin als frei handelnde Subjekte. Eingebunden in die dreidimensionale Klanglandschaft, die auf ihre Bewegungen reagiert, entsteht ein Gefühl von Präsenz, sinnlicher Gewissheit, die die Täuschung vergessen macht.

FLANIEREN Das körperliche Erlebnis im dreidimensionalen Klang- und Bildraum ist dem Flanieren vergleichbar. Keine zusätzlichen Geräte stören beim Spaziergang. Frei begegnet man den Klängen und akustischen Räumen, verweilt, erfährt mehr, geht weiter. Mit Audioinformationen versehene Ausschnitte produzieren Lust auf weiteres Vertiefen des Gehörten. Im individuellen Parcours orientiert man sich an Klangstationen, reagiert auf die Verlockungen der akustischen Umgebung. Die auf den gesamten Körper einwirkende Kunstwelt generiert eine höhere Sensibilität für kontemplative Reize, die in der Klang- und Bildlandschaft verankert sind. Das anregende Flanieren sensibilisiert, öffnet die Sinne, bereichert um den spielerischen Gewinn neuer Erkenntnisse.

INTERAKTION Die Betrachter werden zu Interakteuren, sobald sie sich im Raum bewegen und das Computersystem als Reaktion Klänge über Kopfhörer abspielt. Den Benutzern steht ein immenses Repertoire an gezielten Audio-Informationen zur Verfügung, die, von Kuratoren und Künstlern ausgewählt, in das System eingespeist wurden und nun individuell abrufbar sind. Im Unterschied zum traditionellen Audioguide hat die erweiterte "intelligente", interaktive Audioumgebung ein Gedächtnis, d.h. sie registriert die Wiederholung einer Aktion und reagiert umgehend mit einem neuen Audio-Angebot. Es gibt keine Wiederholungsschleifen mehr. Die Interaktion und das Besucherverhalten werden analysiert, als Reaktion daraus werden mehrere Vorschläge gemacht und durch die Interaktion mit dem System wird ein persönlicher Besuchsparcours erstellt. Das System erscheint als ein auf individuelle Bedürfnisse reagierendes Gegenüber - ein virtueller, persönlicher Museumsführer.

INHALTE Geräusche, gesprochene Texte und Musik sind die Elemente, aus denen die Klangwelten gebaut sind. Entlang einer Folge von unterschiedlichen Positionen und Richtungen fügt sich das eingesammelte Material zu einer individuellen Geschichte zusammen. In einem additiven Prozess verbinden sich unter Umständen auch gleichzeitig Informationen über Texte, Assoziationen über Geräusche und Emotionen durch musikalische Elemente zu einem komplexen, stimmigen Szenario. So entsteht eine persönliche, dichte, illustrative Audioumgebung. Sie erweitert bekannte Audiopräsentationsformate wie das Radiofeature, das Hörspiel, die Filmmusik, die Klangtexturen von Computerspielen in die begehbare Raumdimension.“

Technische Beschreibung

(vgl. Abb. MACKE LABOR_Installation)
1 - Über ein Labtop im Eingangsbereich kann das Museumspersonal das Environment für den Besucher neu starten.
2 - Acht Infrarot-Kameras erkennen den am Kopfhörer befestigten Aufsatz (Target) und leiten die Daten an den Ortungs-PC weiter. Die Position und Kopfausrichtung des Besuchers können so mit großer Genauigkeit bestimmt werden.
3 - Ein Ortungs-PC berechnet die momentane Position des Betrachters im Raum und schickt diese Daten an die LISTEN-Rechner.
4 / 5 - Pro Person sind zwei LISTEN Rechner angeschlossen, ein Linux- und ein Macintosh-Rechner. Der Linux-PC verarbeitet die Ortungsdaten mit Hilfe von virtuellen Sensoren, die signifikante Verhaltensweisen im Raum, beispielsweise das Betrachten eines Bildes oder das Verweilen in einem bestimmten Bereich, erkennen. Die Sensoren ermöglichen die Anpassung der Audio Präsentation an die Situation, in der sich der Betrachter in diesem Moment befindet. Der Linux-PC steuert die Kombination und den Ablauf der vorgefertigten Audio-Elemente, die er hört. Die Erzeugung der Klänge und der virtuellen Schallquellen, die den Besucher umgeben, erfolgt jeweils auf dem Macintosh Rechner, wird aber vom Linux-PC gesteuert.
6 / 7 - Die Sendestation ist an den Macintosh-Rechner angeschlossen und überträgt den Ton auf die Kopfhörer im Ausstellungsraum. Die Sendeantenne ist in der Zwischenwand montiert.


AKG Acoustics GmbH, Wien: Digital-Funkhörer mit Head Tracking System
AKG Pressemitteilung:
Das Resultat des EU-Forschungsprojektes Listen ermöglicht eingebettet in eine reale Umgebung, die Kreation virtueller Klangwelten, in denen durch interaktive Steuerung unterschiedlichste Signale so gehört werden, wie es der tatsächlichen Position des Zuhörers im Raum und dessen Kopfausrichtung entspricht. Um die akustische Kommunikation mit der Aussenwelt zu gewährleisten, wird ein Abbild des realen Raumes zur virtuellen Klangwelt hinzugefügt.

Voraussetzung für dieses einzigartige Hörerlebnis sind Kopfhörer in digitaler Drahtlostechnik, die zudem keinen typischen Kopfhörerklang und die damit verbundene störende Im-Kopf-Lokalisation aufweisen, sondern einen völlig natürlichen Höreindruck reproduzieren.

Die von AKG entwickelte IVA-Technologie (Individual Virtual Acoustics) ermöglicht via Kopfhörer die Simulation des natürlichen Hörens. Das Kopfhörer-inhärente Phänomen der Im-Kopf-Lokalisation wird vollständig eliminiert, die Klänge werden von vorne, hinten, seitlich, etc. gehört. Erstmals wurde diese Technologie für das Raumfahrtprojekt „Audimir“ umgesetzt, wo den Kosmonauten auch im Zustand der Schwerelosigkeit die naturgegebene Ortung von Raumklängen ermöglicht wurde.

Der LISTEN Kopfhörer:
Die AKG Neuentwicklung beinhaltet die weiter optimierte und mit dem IRCAM und dem Head Tracking System (IEMW, TU-Wien) abgestimmter IVA-Technologie. Der Hörer ist mit der neuesten AKG-Entwicklung auf dem Gebiet der Wandlertechnik ausgestattet (XXL-Wandler = Hörkapsel). Die Audiosignale an den Kopfhörer werden via Digital-Funk völlig rauschfrei und mittels Digital Antenna Diversity unterbrechungsfrei übertragen.

Der Betrachter taucht in eine virtuelle Klangwelt ein. Die absolute Bewegungsfreiheit ist durch den Einsatz der digitalen Funkhörer gewährleistet. Nähert sich der Besucher beispielsweise einem Exponat, könnte er dadurch die damit verbundenen akustischen Informationen und Simulation bewegter Signalquellen aktivieren: sein visuelles Erlebnis wird virtuell akustisch untermalt, er könnte durch Kopfbewegung, Annäherung zum bzw. Abwendung vom Exponat Intensität und Umfang der akustischen Information selbst steuern.

In einer weiteren Ausbaustufe wurde eine zusätzliche Variante erprobt:
Die an der Außenseite des Kopfhörers integrierten Mikrofone sorgen für die Abbildung des realen Raumes (Sprache anderer Ausstellungsbesucher, Umgebungsgeräusche). Die Mikrophonsignale werden im Kopfhörer den per Funk übertragenen Signalen beigemischt. Dies ermöglicht die Kommunikation mit anderen Betrachtern und somit ein gemeinsames Erleben der virtuellen Klangwelt. Diese spezielle Variante wird jedoch im Kunstmuseum Bonn derzeit nicht zum Einsatz kommen.

Bis zu 8 Personen können gleichzeitig, jedoch völlig individuell LISTEN erleben.

AKG-Projektleiter für Listen Dipl. Ing. Bernd Ruprechter: „Für AKG gab es im LISTEN Projekt mehrere Herausforderungen: Zum einen die Entwicklung eines hochwertigen Funkkopfhörers, dessen Merkmal nicht nur eine weiter verbesserte Akustik ist. Auch die Funkübertragung entspricht in all ihren Einzelteilen - wie zum Beispiel die Verwendung von Digital Antenna Diversity - dem Stand der Technik und schafft so ein drahtloses Pendant zu einem kabelgebundenen HiFi Hörer. Das zweite Ziel ist die Weiterentwicklung der vorhandenen IVA Technologie für räumliches Hören. Das LISTEN Umfeld bietet dafür den idealen Rahmen. Das Ergebnis ist ein absolut frei konfigurierbarer Funksender, der beliebige Algorithmen zur Positionierung von Schallwellen im Raum verarbeiten kann, gepaart mit dem derzeit hochwertigsten Funkkopfhörer.“



Bemerkung: Im MACKE LABOR wurde ein anderes Tracking System verwendet als das vom LISTEN-Projektpartner Technische Universität Wien, Institut für Industrielle Elektronik und Materialwissenschaften, entwickelte.

Statement

Kommentar / Stellungnahme
Ruth Diehl, Christoph Schreier, Dieter Ronte:
„Man sieht nur, was man hört? Nicht ohne Seitenblick auf das vielbemühte Goethe-Zitat `Man sieht nur, was man weiss´ hatte das Kunstmuseum Bonn neben der künstlerischen Anwendung der LISTEN-Technologie stets auch ihre pädagogische im Auge.“
(...)
„Das MACKE LABOR versteht sich als Beitrag zur Diskussion um neue Wege der Vermittlung und dokumentiert seine Andersartigkeit auch nach außen. Eine eigene Ausstellungsarchitektur grenzt das 'Versuchsfeld' optisch vom Sammlungsbereich des Museums ab. Dass ausgerechnet das Œuvre von August Macke zum Gegenstand der neuen LISTEN-Vermittlung wurde, hat seinen Grund. Birgt doch erst der andersartige, ungewohnte Blick die Chance, das allzu gesetzte Verständnis eines Werks der Klassischen Moderne zu hinterfragen. Man sieht nur, was man hört? Vielleicht sieht man besser, hat man im MACKE LABOR gehört. Das zumindest war unser Ziel.“

Joachim Goßmann, Julia Hagenberg, Annelie Kürsten: „(...) Das MACKE LABOR (...) ist aber natürlich nur eine von vielen Möglichkeiten, das LISTEN-Medium pädagogisch zu nutzen - ein `Labor´ eben. Hätten die Inhalte vielleicht doch wiederholbar sein sollen? Müsste man zwischen verschiedenen Informationsarten wählen können? Wie wäre es mit etwas Musik? (...)“

Gerhard Eckel: „Man kann sich auch vorstellen, dass man das LISTEN-System dazu verwendet, um in einem Schauraum in einem Möbelhaus zum Beispiel Küchen zu verkaufen. Das ist der Bereich, wo dann sozusagen die industrielle Anwendung liegen könnte, und das ist etwas, wogegen sich das LISTEN-Projekt nicht versperrt. Aber wir haben versucht, diese Aspekte vorerst aus dem Projekt selbst rauszuhalten.“

Veröffentlichungen

• Gerhard Eckel, Immersive Audio-Augmented Environments, Proceedings of the 8th Biennial Symposium on Arts and Technology at Connecticut College, New London, CT, USA, 2001
• Gerhard Eckel, Augmenting Everyday Environments with Interactive Soundscapes, Proceedings of the Equator workshop: Moving between the physical and the digital: exploring and developing new forms of mixed reality user experiences, I3 Spring Days, 24. April, Porto, Portugal, 2001
• Gerhard Eckel, The LISTEN Vision, Preconference Proceedings of ACM SIGGRAPH and Eurographics Campfire on Acoustic Rendering for Virtual Environments, S. 55-58, 26.-29. Mai 2001, SnowBird, Utah, USA, 2001
• Petra Unnützer, LISTEN im Kunstmuseum Bonn, KUNSTFORUM International, Vol. 155, Juni/Juli 2001, S. 469/70
• Gerhard Eckel, Steffi Beckhaus, ExViz: A Virtual Exhibition Design Environment, hrsg. Bob Fisher, Kenneth Dawson-Howe und Carol O'Sullivan, Proceedings of the International Symposium on Virtual and Augmented Architecture (VAA'01), Dublin, S. 171-182, Springer, 2001
• Steffi Beckhaus, Gerhard Eckel, Thomas Strothotte, Guided Exploration in Virtual Environments, Stereoscopic Displays and Virtual Reality Systems VIII, Vol. 3957, 2001
• Gerhard Eckel, Immersive Audio-Augmented Environments - The LISTEN Project, ed. B. Banissi, F. Khosrowshahi, M. Sarfraz and A. Ursyn, Proceedings of the 5th International Conference on Information Visualization (IV2001), IEEE Computer Society Press, Los Alamitos, CA, USA, 2001
• Joachim Goßmann, Markus Specht, Location Models for Augmented Environments, in: Location Modelling for Ubiquitous Computing, Workshop Proceedings, Ubicomp 2001, S. 94-99