Краткое описание проекта

Голосовое управление сегодня находится на приемлемом уровне, а вот интерфейсы на основе компьютерного зрения испытывают определённые трудности с их применением в технике. Проблемой современного компьютерного зрения является отсутствие интеллектуальной системы, интегрирующий разнородную информацию о происходящей вокруг обстановки. Пользователь современных компьютерных систем сейчас не имеет возможности просто и удобно управлять ими, по причине разрозненности каналов, по которым производится управления. Пользователю не всегда бывает удобно, а в некоторых случаях невозможно, применять для управления компьютером или технической системой руки. Создание технологии разработки бесконтактных интегральных интеллектуальных интерфейсов (БИИИ) и разработка на ее основе кроссплатформенного программно-аппаратного комплекса, предназначенного для бесконтактного управления мехатронными системами, а также . Данный проект призван интегрировать разные каналы управления и на основе методов искусственного интеллекта для эффективного управления системой. Особенностью данного подхода к интерфейсу является распознавание ситуационной обстановки, в которой находится. Используя видеоинформацию с веб-камеры система считывает биометрические параметры лица человека, положение его головы и глаз. Текущая информация анализируется искусственным интеллектом. На основе анализа ситуации, в которой находится пользователь, система принимает решение. Например, система запомнила все предыдущие команды и позы пользователя, и понимает, что пользователь хочет поворотом головы перейти на новую страницу, а не включить очередной аудио файл, если чтение идёт под музыку, хотя для управления текстовым файлом и аудио проигрывателем используется один и тот же жест. В данном случае система приняла решение на основе ситуационного анализа, учитывая текущую и прошедшие ситуации. Применяя систему веб-камера - драйвер, программа строит 3D-модель головы и положения глаз. Благодаря интеллектуальной обработки 3D-модели, программная система может точно понять, куда направлен взгляд человека. Специальные фильтры отчищают от хаотических движений глаза и выделяют только управляющие движения. Благодаря этому можно управлять только глазами, при этом голова может свободно двигаться. Пока что в мире аналогов нет, для управления только глазами существующие аналоги требуют неподвижность головы.