Исследователская группа из Университете Цукубы (Япония) продемонстрировали экспериментальный комплекс, позволяющий манипулировать виртуальными блоками на экране на основе распознавания движений рук и пальцев в воздухе по видео.

Система использует камеру для отслеживания положения кисти руки и пальцев в пространстве и выдает данные о трехмерных формах (пальцев и рук). Для повышения точности распознавания жестов может применяться вспомогательная камера, расположенная перпендикулярно к основной.

Уникальность разработки заключается в том, что она не требует наличия каких-либо маркеров на пальцах и руках пользователя благодаря формированию обширной базы, содержащей информацию о возможных жестах.

В текущей версии система позволяет перемещать блоки в 3D-пространстве. Теоретически её можно использовать для удалённого управления роботом, который в этом случае будет повторять движения оператора.

В перспективе исследователи намерены разработать программно-аппаратный комплекс для жестового управления компьютером: пользователи получат возможность манипулировать объектами в трёхмерном окружении, открывать файлы, листать документы и пр.

Видео-ссылка ->