Fotostrecke: Das panoptische Studio
Das panoptische Studio Computer entziffern die Geheimnisse der Körpersprache
Die Körpersprache des Gegenübers ist oft schon für Menschen schwer zu lesen, nun sollen das sogar Computerprogramme schaffen. Forscher der Carnegie Mellon University (CMU) im amerikanischen Pittsburgh haben ein System entwickelt, mit dem nonverbale Kommunikation ausgewertet werden kann. Wie aufwendig das ist, zeigt sich an den Geräten, die dafür nötig sind.
Die Forscher haben eine Konstruktion gebaut, die auf den ersten Blick aussieht wie ein gigantischer Fußball. Darin verbirgt sich ein sogenanntes panoptisches Studio , in dessen Wänden 480 Kameras und zehn Kinect-II-Sensoren installiert sind. Die Geräte filmen eine Gruppe von mehreren, im Inneren versammelten Personen, während sie sich unterhalten oder anderweitig miteinander interagieren. Diese 480 Livestreams nehmen die Bewegungen jedes einzelnen Anwesenden auf.
Dafür orientieren sich die Kameras jeweils an bestimmten Punkten des Körpers, zum Beispiel Kopf, Kinn, Ellenbogen, Hände. Aus den Daten entsteht in Echtzeit ein dreidimensionales Modell der aktuellen Bewegungsabläufe.
Eine Grundlage für das CMU-Projekt besteht im Konzept von "social motion capture". Motion capture ist ein bei vielen Kinofilmen gängiges Verfahren. Dabei werden Bewegungen einer Person durch Messpunkte erfasst und dann auf eine virtuelle Figur übertragen. Die Technik wurde berühmt durch die "Herr der Ringe"-Trilogie: Die Bewegungen von Gollum wirken so lebensecht, weil dafür zuvor die Gesten eines Schauspielers aufgezeichnet wurden. Nach demselben Prinzip arbeitet das für die Xbox entwickelte Kinect-System.
Im panoptischen Studio werden synchron die Bewegungen mehrerer Personen gleichzeitig erfasst. Das von Forschungsleiter Hanbyul Joo und seinen Kollegen entwickelte System nimmt die Bewegungen jedes Anwesenden an bis zu 100.000 Messpunkten auf und verfolgt sie über Hunderte Einzelbilder. Die von einem speziell entwickelten Algorithmus errechneten Resultate werden in Grafiken dargestellt, die Bewegungen sind in unzählige Farbpunkte aufgelöst. Dadurch erscheinen die vermessenen Menschen in der Computergrafik wie Farbwolken.
Gesichtserkennung ist inzwischen ein weitverbreitetes Verfahren und wird von Überwachung bis zur Werbung für ganz unterschiedliche Zwecke eingesetzt. Einen Schritt weiter geht da schon eine Microsoft-Software, die aus Fotos von Gesichtern den Gemütszustand der Abgebildeten erkennen kann. Im panoptischen Studio des CMU-Teams wird mit der Verarbeitung komplexer Strukturen in Echtzeit allerdings noch weitaus mehr geleistet.
Auf die Frage nach möglichen Einsatzfeldern der Technik bleibt Joo ganz Wissenschaftler. Er hoffe, das System könne als Hilfsmittel dienen, um das Wechselspiel gegenseitiger Beeinflussungen unter Menschen besser zu verstehen. Allerdings ist es gut denkbar, dass die Technologie in nicht allzuferner Zeit auch kommerziellen Zwecken dient. So manches Hollywood-Studio dürfte interessiert sein.
Mehr lesen über
Verwandte Artikel
Das panoptische Studio: Von außen gleicht es einem großen Fußball.
Die Konstruktion ist vier Meter hoch, mehrere Menschen haben bequem darin Platz.
Blick ins Innere: Insgesamt 480 Kameras erfassen sämtliche Bewegungsdetails der Menschen innendrin.
Das Forschungsteam in Aktion:Alle Bewegungen werden von den Kameras erfasst und von einem Algorithmus weiterverarbeitet.
Die umgerechneten Ergebnisse machen die Daten als farbige, virtuelle Messpunkte anschaulich.
Mit dem System können mehrere Personen gleichzeitig vermessen werden.
Die Kameras orientieren sich jeweils an bestimmten Punkten des Körpers, zum Beispiel Kopf, Kinn, Ellenbogen, Hände.
