Теги к изображениям можно создать силой мысли // 13 Декабря 2012

Исследователи Шеной (Shenoy) и Тан (Tan) из подразделения Microsoft Research представили любопытную технологию, которая позволяет расставить теги к изображениям, используя сигналы головного мозга без физического участия пользователя. Пользователю не нужно даже думать о содержании изображения – электроэнцефалограмма мозга в момент просмотра поможет определить, что видит человек на картинке.

Добавление текстовых тегов к изображениям – совсем нешуточная задача. Современные поисковые системы находят картинки с нужным объектом только в тех случаях, когда эти картинки снабжены соответствующим тегом. Чтобы пометить изображения, в разных поисковых системах так или иначе задействуется человек. Так, сервис Amazon Mechanical Turk платит сторонним пользователям за пометки, некоторые организации привлекают собственных сотрудников. Сервис Google Image Labeler использует несколько иную концепцию, основанную на игре ESP профессора Луиса фон Анна (Luis von Ahn) из университета Карнеги-Меллона: пользователи добровольно принимают участие в сетевой игре, но по ходу игры индексируют изображения.

Исследователи из Microsoft Research решили исключить активное участие человека – человек используется лишь как орган распознавания глаза и мозг человека автоматически идентифицируют объекты. Для опознания базовых атрибутов изображения, как выяснилось, человеку достаточно от 500 мс до 1 секунды. Во время просмотра изображений проводится сканирование мозга по принципу ЭЭГ – для этого на голову надевается специальная шапочка с электродами.

В рамках проведенных экспериментов удалось показать, что по типовым картинам ЭЭГ можно успешно проводить отличия между двумя классами изображений в наборе. Например, по рисунку ЭЭГ можно достаточно уверенно отличать картинки с живыми и неживыми объектами, с лицами людей и с животными, а также портреты людей от всех остальных изображений. Попытки разбиения показанного множества на три и больше групп пока отличаются низкой точностью.

С такими технологическими новинками недалеко до новых профессий. Только представьте себе – вы приходите на работу, надеваете шапочку для ЭЭГ и целый день просматриваете картинки, выполняя при этом роль индексатора, приставки к поисковому сервису.

Подробнее о технологии систематизации изображений и присвоения тегов с помощью электроэнцефалографии мозга во время просмотра картинок живым человеком можно прочитать в обзоре на сайте SciTe Daily.