Markus M. Quarta


ISS CUBE

Echtzeit Surround-Sound-Steuerung mit menschgerechtem Multi-Eingabe-Interface


Interactive Surround Sound [link 01]

Interactive Surround Sound

Kurzdarstellung

Kurzbeschreibung

Der "ISS CUBE" ist eine Installation, bei der die Benutzer auf einfachste, intuitive Weise Soundloops in einer Quadro-Sound Umgebung in Echtzeit mixen können.
Die Installation besteht aus einer 90 Kubikzentimeter großen Holzbox mit einer Glasoberfläche und ist von vier Lautsprechern umgeben.
Als Interface dienen fünf einfache Steine, wie wir sie z.B. von Back-Gammon Spielen kennen.
Die quadratische Tischoberfläche, auf dem die Steine bewegt werden, repräsentiert hierbei den Raum in dem die Lautsprecher stehen (siehe dazu die Abbildungen).
Jeder der Steine symbolisiert einen so genannten "sound-carrier", der jeden der 60 Soundloops in der Applikation "tragen" kann.
Da alles in Echtzeit geschieht, bekommen die Benutzer ein direktes Feedback, was die Bedienung äußerst einfach macht und somit auch für Kinder und ältere Menschen ohne jegliche technische Vorkenntnisse geeignet ist.
Durch das "multiple Tracking" können auch mehrere Benutzer gleichzeitig mit der Applikation interagieren.
Ich habe Videomaterial des "Cybersonica Festivals" beigefügt, um die Box im Einsatz zu demonstrieren. (Entschuldigen Sie bitte die Qualität, die ich aufgrund der Größe stark reduzieren musste.)
Der Film kann als kompletter Realmedia File 2min. oder in 4 Teilen runtergeladen werden.
Zusätzlich habe ich die Files, auch als Quicktime Media, unter www.emqu.de/iss/Media ins Netz gestellt.

KünstlerInnen / AutorInnen

  • Markus M. Quarta

Entstehung

Vereinigtes Königreich, 2003

Eingabe des Beitrags

Markus Quarta, 28.06.2003

Kategorie

  • Forschungsprojekt

Schlagworte

  • Themen:
    • Interface |
    • Mensch-Maschine-Interaktion HCI |
    • Musik |
    • Raum |
    • Audio |
    • Tracking |
    • Augmented Reality |
    • Artistic Software |
    • Interaktivität
  • Formate:
    • Installation |
    • interaktiv |
    • multi-user |
    • Audio
  • Technik:
    • Macromedia Director |
    • Video Tracking |
    • Motion Tracking

Ergänzungen zur Schlagwortliste

  • Surround Sound |
  • Multiple Input Device |
  • Multi User Interface

Inhalt

Inhaltliche Beschreibung

Der ISS CUBE ist ein erster Versuch, ein einfaches Interface zu schaffen, das multiple Inputs zur gleichen Zeit erlaubt. Die Applikation (Interactive Surround Sound), die mit dem Interface gesteuert wird, entstand in abgewandelter Form Anfang dieses Jahres.
Bei der Applikation für den ISS CUBE können die Benutzer Sound Loops aus vier verschiedenen Kategorien: Synths, Natur, Umgebung und Stimmen, zusammen mischen und im Soundraum positionieren. Die ganze Steuerung der Applikation geschieht dabei über fünf Steine, wie wir sie von Back Gammon Spielen kennen. Jeder dieser Steine repräsentiert dabei einen "Sound Träger", der jeden der 60 Sounds aus den verschiedenen Kategorien "tragen" kann. Durch Verschieben des einzelnen Steins in bestimmte Regionen auf dem Display kann man den Sound austauschen, seine Lautstärke verändern und seinen Sound stumm schalten.
Die quadratische Fläche des Hauptdisplays spiegelt dabei das Quadrat im Raum wieder, das durch das Positionieren der vier Lautsprecher entsteht.
Durch die Bewegung jedes einzelnen Steins auf diesem quadratischen Display positioniert man somit den Sound im Raum (bitte sehen Sie dazu die Abb.: "Applikations Beschreibung").

Technik

Technische Beschreibung

(Falls die Bilder nicht 100% angezeigt werden, Bilder entweder im Browser in einem neuen Fenster öffnen oder auf 100% hochzoomen.)
Die Installationsversion besteht aus einer 90 cm3 großen Box, in der eine Kamera zum Erkennen der Objekte, ein Projektor für das visuelle Feedback und ein Computer montiert sind.
Die Tischoberfläche der Box besteht aus sandbestrahltem Glas, um eine Projektions- und Tracking-Oberfläche zu bieten.
Auf der Glasoberfläche liegen fünf Steine, wie wir sie von Back Gammon Spielen kennen.
Um die Projektionsfläche zu vergrößern, ist zusätzlich ein Spiegel für den Projektor und ein Spiegel für die Kamera montiert worden.
Eine ASIO Soundkarte ist im Macintosh installiert, um die vier Lautsprecher anzusprechen.
Die Applikation läuft als Director Projektor.
Zur Zeit verwende ich zum Erkennen der einzelnen Steine "Colortracking". Jeder der einzelnen Steine hat eine unterschiedliche Farbe auf der Unterseite. Die Kamera analysiert anhand des "TrackThemColors" Xtras die Projektionsfläche. Dabei erkennt sie die fünf verschiedenen Farben der Steine und gibt die x,y Koordinaten aus. Die Applikation berechnet anhand der Daten die Position des einzelnen Sounds und gibt die Lautstärkepegel an die vier Lautsprecher über das ASIO Xtra aus. Zur gleichen Zeit werden die Positionen der Sprites, die die einzelnen Steine grafisch darstellen, aktualisiert und mit der grafischen Oberfläche auf das Glas projiziert.

Hardware / Software

Hardware:
Powermac G4
Video Projektor mit "Trapez"-Funktion
Webcam
ASIO kompatible Soundkarte
4 Lautsprecher
Box 90 x 90 x 90 cm
2 Spiegel
Sandgestrahltes Glas
5 Backgammon Steine
2 Ventilatoren zur Kühlung
Software:
Mac OS9
Macromedia Director 9 mit ASIO Xtra und TrackThemColors Xtra
ASIO driver
Emagic Logic Audio 4.8

  • › digital sparks 2003 [link 02]

» http://www.emqu.de [link 03]

  • › ISS Cube Beschreibung (digital sparks) [Microsoft® Word | 284 KB ] [link 04]
  • › Visualisierungen [JPEG | 61 KB ] [link 05]
  • › Installation auf dem Cybersonica Festival [JPEG | 39 KB ] [link 06]
  • › Applikations Beschreibung [61 KB ] [link 07]
  • › ISS Box (cybersonica Festival 2003) 2min / 8,3 MB [8 MB ] [link 08]
  • › ISS Cube (cybersonica Festival 2003) Teil1 /1,9 MB [2 MB ] [link 09]
  • › ISS Cube (cybersonica Festival 2003) Teil2 /2,1 MB [2 MB ] [link 10]
  • › ISS Cube (cybersonica Festival 2003) Teil3 /1,6 MB [2 MB ] [link 11]
  • › ISS Cube (cybersonica Festival 2003) Teil1 /2,5 MB [2 MB ] [link 12]
  • › fotos: ISS CUBE (Rave On Air, Ravensbourne College, Kent) [JPEG | 27 KB ] [link 13]
  • › Box Montage [JPEG | 69 KB ] [link 14]
  • › Applikations Beschreibung [61 KB ] [link 15]