Американский инженер Ник Билд (Nick Bild) разработал очки, позволяющие управлять электроникой с помощью жестов. Устройство понимает, на что смотрит пользователь, и распознает жесты. Как рассказал создатель очков на GitHub, он может включить свет или музыку взмахом руки.
Основой изобретения стали обычные солнцезащитные очки. На одной из дужек закреплена камера для одноплатного компьютера Raspberry Pi – она подключается к плате NVIDIA Jetson Nano, которую инженер повесил на шею.
За распознавание жестов отвечают две нейровети: одна из них распознает устройство в кадре, а вторая – жесты руки. Далее очки посылают команды на устройство при помощи Wi-Fi.
На сегодня основным способом бесконтактного управления являются голосовые команды. Подобное изобретение может решить главную проблему систем «умного дома»: как определить, о каком именно устройстве говорит пользователь?
Код программы выложен на GitHub, чтобы любой желающий мог использовать ее в своих разработках. В частности, Ник рассчитывает на расширение обучающей выборки для нейросетей.
Добавить комментарий