Программист из Новосибирска создал программу, понимающую жесты

Новосибирский программист Алексей Приходько создал уникальную программу, не имеющую аналогов в мире. Благодаря этому изобретению, компьютер может считывать жесты глухих пользователей без специальных перчаток и браслетов, сообщает корреспондент tvbrics.com со ссылкой на nsknews.info.

Программист Алексей Приходько сам имеет проблемы, но это не помешало ему разработать прототип столь необходимой программы. Алексей сумел обучить систему переводить жесты на звуковой язык и управлять компьютером без мыши. Работает программист в Новосибирском государственном техническом университете (НГТУ НЭТИ). Отсутствие слуха не стало препятствием для учебы и работы: Алексей закончил аспирантуру, прошел стажировку в Германии, получил грант фонда Владимира Потанина и стал экспертом в IT-сфере.

Система, созданная Приходько, действует совершенно по аналогии с мозгом человека: распознает жест, переводит картинку в модели и обрабатывает, сопоставляя с данными в нейронной сети, после этого компьютер выводит на монитор перевод конкретного жеста.

«Если модель определяет, например, что пальцы раскрыты — буква В, если пальцы собраны — О. Согнулся локоть или нет. В зависимости от этого формируется некая математическая модель. Каждым числам из неё присваивается система координат, и на экране мы видим, какой это жест», - рассказал Алексей Приходько.

Но не только перевод жестов подвластен новой программе. Она позволяет управлять компьютером совершенно без прикосновения. Движения рук настроят громкость, увеличат яркость и передвинут курсор, совершенно не трогая компьютерную мышь.

Со слов Алексея Приходько, переводчики для глухих существуют, но, вне зависимости от фирмы-производителя, качество приложений оставляет желать лучшего. Основная проблема такой ситуации в том, что перевод значения жестов зависит не только от конфигурации рук, но и от немануального компонента (выражение лица, движение губ и другие знаки артикуляции). Вот как раз именно эту особенность жестового языка и грамматики взял под контроль новосибирский программист.

Новый, безмаркерный способ распознавания жестов, созданный Алексеем Приходько, позволит обойтись без дополнительных затрат - специальных перчаток и браслетов пользователю покупать не придется.

Сегодня российский программист ищет и ждет инвесторов, которые помогут пустить разработку в жизнь людей с нарушением слуха.