Media Files
Technical Description
Das System besteht aus drei Rechnern, die im Netzwerk verbunden sind.
Zwei Apple G4 Rechner dienen zur Erfassung der Audio- und Videodaten. An beide wird jeweils eine Videokamera und ein Mikrofon angeschlossen. Ein PC und ein Beamer sind über das Netzwerk mit den anderen verbunden und visualisieren die erfassten Daten.
Die beiden kommunizierenden Personen bringen je fünf Reflektionspunkte auf Stirn, Schultern und Handgelenken an. Mittels Motiontracking werden die Positionen der Reflektionspunkte erfasst und in eine Vektorform verwandelt. Diese wird in den 3D-Raum extrudiert und stellt hier den Umriss der Person dar, also die Position der Arme und die Position und Neigung des Kopfes (Gesten und Körpersprache).
Das Gesprochene wird durch das Mikrofon erfasst und in die einzelnen HZ-Werte zerlegt. Sie dienen als Koordinaten für die Audio-Vektorform. In den 3D-Raum extrudiert und mit der Zeit in die Tiefe positioniert, bilden die einzelnen Formen die schlauchartige Audio-Form.
Die Software für dieses Projekt wurde mit Director 8.5 erstellt. Die 3D-Visualisierung erfolgt in Echtzeit auf der Basis von 3D-Lingo. Für die Audio-Verarbeitung dient das xtra asfft, für die Video-Erfassung das xtra trackthemcolors.
Hardware / Software
Hardware:
2 Apple Mac G4
1 PC ( mind 700mhz ), Grafikkarte geforce 2mx
2 Mikrofone
2 Kameras
Software:
Director 8.5
xtras: asfft und ttc pro