Технология Kinect поможет слабовидящим ориентироваться в пространстве // 04 Декабря 2012

Исследователи из университета Констанца в Германии (Universität Konstanz) продемонстрировали еще один многообещающий способ применения технологии Kinect, которую компания Microsoft создала для бесконтактного управления своими игровыми приставками Xbox 360. Разработчики сумели построить систему, которая голосовыми подсказками указывает пользователю, куда нужно идти, или где находятся препятствия.

Технология Kinect породила массу разработок и совершенно невероятных сценариев применения. Главным ее свойством является возможность передавать команды в приставку без контакта с какими-либо физическими компонентами. Фактически, система Kinect просто «смотрит» на пользователя и транслирует движения пользователя в команды. В своем проекте NAVI (Navigational Aids for the Visually Impaired – помощь в навигации для людей с нарушениями зрениям) немецкие ученые изменили способ размещения самого модуля Kinect – теперь он расположен не на мониторе, откуда наблюдает за пользователем, а на голове пользователя.

Итак, авторы проекта NAVI разместили модуль Kinect на легком шлеме, который может надеть слабовидящий человек. Визуальные данные, поступающие с пары инфракрасных камер Kinect, передаются в нательный компьютер, а на их основании генерируются голосовые подсказки, которые передаются человеку через беспроводные наушники. В состав системы также входит обычная камера, которая обеспечивает своего рода трехмерное зрение с системой из трех камер. Некоторые объекты, в том числе двери, вызывают срабатывание определенных триггеров. Таким образом, система может предостеречь пользователя от входа специально обозначенную дверь, создавая «дополненную реальность».

Цель проекта NAVI заключается в том, чтобы предупредить слабовидящего человека о потенциальных препятствиях и задать направление движения на открытых пространствах. В то же время, система на базе Kinect, скорее может стать важным дополнением к собаке-поводырю, чем полноценной заменой таких собак или людей-сопровождающих.

Уже сейчас разработчики из проекта NAVI дополнили свою систему вибротактильным комплексом – этот комплекс размещается на поясе и дает пользователю дополнительную предупреждающую информацию. Таким образом, пользователь получает не только голосовые сигналы, которые зачитываются вслух с использованием программного интерфейса Microsoft Speech API, но и легкие уколы в области пояса, если на пути есть опасное препятствие. Соединение всех входящих потоков информации об окружающей обстановке реализовано с использованием компонентов Reactive Extensions for .NET.

По материалам сайтов GizMag и PhysORG.