Глухонемой программист из Новосибирска научил компьютер понимать язык жестов

Глухонемой программист из Новосибирска научил компьютер понимать язык жестов. Алексей Приходько общается с техникой с помощью движений рук, а специальная программа переводит их в письменный русский язык. В основе разработки — сложная математическая модель, которая распознает язык глухонемых с помощью нейросети и камеры на мониторе. Точность перевода составляет около 80-ти процентов.

«Поскольку проблема сложная он пока отдельные аспекты решил по распознаванию компонентов отдельных жестов. То есть о жестовой речи распознавании пока речи не идет. Работа Приходько на мой взгляд самая продвинутая в России. Я очень надеюсь, что он успеет закончить ее и можно будет уже внедрять систему по распознаванию жестовой речи», — заявил профессор кафедры автоматизированных систем управления Новосибирского государственного технического университета Михаил Гриф.

Когда программа выучит алфавит, ее обучат словам, а затем и целым фразам. На разработку системы ушло около пяти лет. И сейчас Алексей Приходько трудится над созданием еще одной программы, которая позволит с помощью жестов управлять бытовой техникой.