NAVI

Kinect leitet Blinde

17.03.2011 von pte pte
Studenten der Gruppe Human-Computer Interaction an der Universität Konstanz haben damit experimentiert, Microsofts Kinect-Sensor zur Orientierungshilfe für Blinde zu machen.

Ihr Projekt "NAVI" (Navigational Aids for the Visually Impaired) nutzt dazu die Sensordaten, um dem Nutzer mittels Vibrationsgürtel taktiles Feedback über seine Umgebung zu bieten. Zudem liefert das System Sprachanweisungen, wohin sich der User bewegen sollte.

Freilich sind ein Helm mit aufmontiertem Kinect-Sensor sowie ein Computer-Spezialrucksack zu sperrig für einen Alltagsgebrauch. "Es ist uns auch primär ums Konzept gegangen", meint Michael Zöllner, der das Projekt gemeinsam mit Stephan Huber umgesetzt hat, im Gespräch mit pressetext. Eine sinnvolle Miniaturisierung scheint aber zumindest denkbar.

Flexiblere Hilfe

Die Idee hinter NAVI ist, Sehbehinderten eine umfassendere und flexiblere Hilfestellung zu bieten, als das Taststock, Hunde oder GPS-Lösungen können. Denn der Stock ist zwar nützlich, doch bemerkt der Nutzer damit üblicherweise nur bodennahe Objekte in unmittelbarer Nähe. Ein guter Blindenführhund wiederum braucht eine aufwendige und kostenintensive Ausbildung, während GPS-Navigationshilfen nicht in Innenräumen funktionieren.

Um Nutzern ein umfassenderes Gefühl für ihre Umgebung zu bieten, nutzt das System die Daten des Kinect-Entfernungssensors. Dazu setzt ein Gürtel, in den drei Paar Vibrationsmotoren der Prototyping-Plattform Arduino verbaut sind, die Tiefeninformation für den Träger spürbar um. Für die Navigation kombiniert der Ansatz Augmented-Reality-Marker, die von der normalen Kamera erfasst werden, mit den Entfernungsdaten. Das erlaubt, dem Träger mittels Sprachsynthese zu sagen, ob er beispielsweise Abbiegen soll oder auf ein Hindernis zusteuert.

Die 20 coolsten Hacks für Microsofts Kinect
Angry Birds Kinect
Dieser User hat sein iPod Touch mit Kinect verbunden, um damit Angry Birds zu spielen. Das Ergebnis zeigt folgender Clip.
Left 4 Dead 2 mit Kinect spielen
Valves Left 4 Dead 2 lässt sich am PC mittels Kinect zocken. Dazu benötigen Sie neben Kinect und dem Spiel auch das Toolkit FAAST von mxR Labs.
Kinect 3D Viewer
Den Kinect 3D Viewer finden Apple-Anwender im noch neuen MacStore. Sie können Microsofts Kinect an die USB-Schnittstelle des Apple-Rechners anschließen und dann eine 3D-Visualisierung der von der Kinect-Kamera gefilmten Tiefendaten anzeigen lassen. Sieht spektakulär aus - und villeicht auch ein bissel erschreckend manchmal.
Roboter via Kinect steuern
Auch ein High-Tech-Roboter lässt sich mittlerweile über Kinect und der Roboter-Software V-Sido steuern. Achten Sie mal im folgenden Video darauf, wie elegant der Roboter die Bewegungen der Person umsetzt…
Street Fighter IV via Kinect
Mit einer eleganten Bewegung einen Feuerball auf den Gegner abschießen: Mittels Kinect wird das in Street Fighter IV endlich Realität. Bisher musste man im Kampfspiel die passenden Tasten drücken, um einen Feuerball abzufeuern. Dank Kinect erfolgt dies nun mittels einer passenden Bewegung vor der Kamera. Neben Kinect, PC und Street Fighter IV wird FAAST (Flexible Action and Articulated Skeleton Toolkit) benötigt.
Xbox 360-Controller mit Bewegungserkennung
Manche Xbox-360-Besitzer sind ja neidisch auf das Motion-Sensing des Sixaxis-Controller der Playstation 3. Mit Kinect und KinEmote beta werden nun auch Bewegungen des Xbox-360-Controllers erfasst und im Spiel umgesetzt. Im folgenden Youtube-Clip wird das im Spiel Medal of Honor demonstriert.
Piano auf dem Fußboden
Mittels OpenKinect werden virtuelle Tasten auf den Fußboden projeziert, die dann anschließend von den beiden Anwendern im folgenden Clip mit den Füßen gedrückt werden, um eine schöne Melodie zu spielen.
Kinected Candy Machine
Dieser User hat einen kleinen Süßigkeiten-Automat mit einem Kinect verbunden. Sobald er die Hand unter dem Ausgabeschlitz des Süßigkeitenautomats hält, lässt Kinect eine Süßigkeit fallen…
Open-Source-Roboter
Mittels Kinect soll jeder seinen kleinen Open-Source-Roboter bauen können, der maximal 400 US-Dollar kosten soll. Wie das Ganze funktionieren soll, demonstriert Garrat Gallagher in folgendem Clip.
Kinect hilft beim Gang auf der Toilette
Mit einer Handbewegung öffnet sich der Toiletten-Deckel auf einem WC. Auch hier spielt Kinect eine wichtige Rolle.
Kinect macht Sie zum Superhelden
Dieser Kinect-Hack macht jeden Anwender zu einem Superhelden, aus dessen Händen beispielsweise gefährliche Laser-Strahlen kommen. Vorausgesetzt wird aber ein leistungsstarker PC.
Kinect Superstar
Dieser Entwickler hat Kinect und XNA Game Studio genutzt, um eine Applikation zu entwicklen, mit der man über Kinect seinen Avatar auf dem Bildschirm tanzen lassen kann.
Kinect Spiegel
Der Münchner Student Tobias Blum hat eine Kinect-Applikation entwickelt, die er "magischen Spiegel" nennt. Aber sehen Sie selbst:
Acroyoga
Matt Bell hat eine Software entwickelt, die mehrere mit Kinect aufgenommene Video-Streams in einem 3D-Raum wiedergibt. Das Ergebnis präsentiert mit mehreren Freunden, die eine Acroyoga-Vorführung geben.
Lichtschwerter-Duell
Mit diesem Kinect-Hack wird der Traum aller Star-Wars-Fans Realität: Einem Lichtschwert-Duell steht damit nichts mehr im Wege…
Kinect für Erwachsene
Das sich Kinect auch für Software für Erwachsene einsetzen lässt, demonstriert dieser Entwickler, der übrigens auch für ein Unternehmen arbeitet, das derartige Software entwickelt.
Kinect & Starcraft 2
Dieser User spielt eine Partie Starcraft 2 mittels einem an einem PC angeschlossenen Kinect.
Kinect + HMD + WiiRemote VR-FPS
Dieser Japaner verbindet Kinect mit einer WiiMote und Head Tracking um einen Egoshooter zu zocken.
Black & White mit Kinect
Dieser Gamer demonstriert, wie sich der Spiele-Klassiker Black & White via Kinect und FAAST steuern lässt.
Kinect als Nintendo Controller
In dieser Demo wird die Nutzung von Kinect zur Steuerung von Nintendo-Spielen via Bewegungen vor der Kamera demonstriert.

Klobiges Konzept

Bei der Konzeptdemonstration kommen ein Helm mit aufmontierter Kinect-Kamera und eine Rucksack-Spezialkonstruktion zum Einsatz, um einen Laptop für die Datenverarbeitung zu transportieren. Das ist für ein praxistaugliches System eindeutig zu klobig. Die Studenten haben sich nicht näher damit befasst, wie NAVI kompakter gemacht werden kann. Prinzipiell hält Zöllner das aber für machbar. "Man könnte die Kinect-Kamera zerlegen und nur die tatsächlich nötigen Teile in Kleidung verbauen", erklärt er. Die genutzten Vibrationsmotoren sind für die Integration in E-Textilien gedacht. Was die Datenverarbeitung betrifft, verweist der Informatikstudent auf die immer größere Rechenleistung moderner Smartphones. (pte/sh)