Данная система проецируется на стены и другие поверхности и позволяет пользователям взаимодействовать со средой и друг с другом.

Система идентифицирует пальцы человеческой руки по простому прикосновению к любой поверхности. Она также различает положение рук и жесты, отличая отдельных пользователей по уникальным чертам.

«Представьте, что отныне у вас везде будет доступен гигантский айпад — дома, в офисе или на кухонном столе», заявил доцент Никлас Элмквист из университета Пурдю. „Вы сможете использовать любую поверхность, в том числе деревянные стены или мраморные колонны. Не придется устанавливать везде дорогостоящие жидкокристаллические дисплеи и тачскрины“.

Новая „расширенная мультиконтактная“ система позволяет более чем одному человеку использовать поверхность в одно и то же время, а также позволяет людям использовать обе руки, отличая правую и левую.

Исследование показало, что система способна на 98% точно определить положение рук, которое важно для выполнения команды или жеста. Технология обладает множеством возможных применений, отметил профессор Картик Рамани.

„В основном для взаимодействия с компьютером она может использоваться на любой внутренней поверхности“, сказал он. „Она окажется полезной и дома, и в офисе, и в учебной аудитории“.

Результаты разработки опубликованы в статье, которая будет представлена в ходе симпозиума Ассоциации вычислительной техники по программному обеспечению и технологиям пользовательского интерфейса, который на текущей неделе проходит в Кембридже, Массачусетс.

Система задействует камеру Microsoft Kinect, которая распознает трехмерное пространство.

„Мы проецируем компьютерный дисплей на любой поверхности, к примеру, на обычно столе, покрытом белой скатертью“, сказал Рамани. „Камера фиксирует положение наших рук, нажатие пальцев на поверхность, жесты, определяет, сколько всего людей работает“. Глубина чувствительности камеры Kinect дает возможность видеть, насколько далек каждый трехмерный пиксель.

„Мы сумели с помощью трехмерной модели руки научить камеру видеть отдельные пальцы кисти и то, как далеко они от поверхности“, сказал Элмквист. „Мы видим, какие пальцы касаются рабочего пространства. Чтобы вызвать меню, достаточно просто поместить над поверхностью руку“. Камера позволяет системе определять центр каждой руки, чтобы различать жесты, а также отличать левую руку от правой.

Ученые исследовали всевозможные применения, включая наброски с помощью ручки и изменение их вручную.

„Жесты мы можем различать от более чем одной руки сразу, и от более чем одного пользователя“, сказал Рамани.

Ученые провели два концептуальных исследования с участием 14 и 9 добровольцев. Результаты одного из них показали, что для эффективности одна рабочая точка должна быть не менее 18 мм.

„И хотя новые более совершенные камеры позволят повысить разрешение, мы установили необходимые ручные модели и принципы для системы“, сказал Рамани.

Второе исследование показало, что система эффективно определяет положение рук и использование определенной — правой ли левой — руки.

„Мы хотим установить максимальную точность определения касаний и жестов с разными конфигурациями, такими как прикосновение всеми десятью пальцами“, заявил Элмквист.

Выяснилось, что точность системы составляет 98%. В настоящее время ученые намерены запатентовать новую разработку.