ИИ видит движения рук в темноте и пыли: прорыв новгородских ученых

Российские инженеры научили роботов понимать жесты даже в грязных перчатках

Разработчики из Новгородского государственного университета создали программный комплекс, позволяющий управлять промышленными компьютерами и роботами с помощью жестов. Система использует обычную веб-камеру, распознает движения в защитных перчатках и не дает сбоев при плохом освещении, сообщают «Известия».

Старший преподаватель кафедры информационных технологий НовГУ Игорь Кулаков пояснил, что задача была заставить алгоритмы стабильно работать там, где «слепнут» обычные компьютеры: на фоне станков, в пыли и при мерцающем свете.

Для этого нейросеть переобучили на изображениях рук именно в спецодежде, настроив пороги так, чтобы машина отличала намеренные команды от случайных движений. Чтобы кликнуть левой клавишей, оператору достаточно свести большой палец с указательным, а для правой — со средним. Точность распознавания достигла 90–95%, а скорость отклика укладывается в 0,1 секунды.

Эксперты считают технологию перспективной для аварийно-спасательных работ, тоннелей и медицины, где хирург в стерильных перчатках не может трогать экран. Главный научный сотрудник Института проблем управления Роман Мещеряков отметил, что главный плюс системы — отказ от дорогих внешних контроллеров.