Ученые НЭТИ завершают создание системы компьютерного распознавания русского жестового языка

  • 04/10/2021, 18:36
С помощью камер и нейронных сетей она узнает жесты глухих и переводит их в текст или голос. Подобных программ в мире еще не существует.

— Мы внесли в программу 1 006 жестов, если быть точными. Также разработали алгоритм для распознавания жестов, теперь можно выделять компоненты жеста, конфигурацию и ориентацию ладони, локализацию жеста, а также характер движения. В России подобной системы раньше не было, это первая в мире разработка, — рассказал профессор кафедры автоматизированных систем управления Новосибирского государственного технического университета Михаил Гриф.

По его словам, сейчас продолжается разработка программы распознавания дактилем (буквы из дактильного алфавита). Точность распознавания дактилем составляет 92%.

— Мы также вели работу над выделением эпентезы (межжестовое движение). Сейчас точность выделения жестов в видеопотоке составляет 85—90%. Пока эта работа ведется в формате эксперимента. Кроме того, мы занимаемся разработкой биологически подобных нейронных сетей, которые работают аналогично человеку, зрительно воспринимающему жестовый язык, — добавил Михаил Гриф.

Сейчас ученые вуза сосредоточены на разработке и внедрении работы компьютерного переводчика в обе стороны, чтобы его качество удовлетворяло требованиям глухих людей. Сначала планируется разработать переводчик для русского жестового языка, а в дальнейшем и для других жестовых языков мира.

Разработка переводчика позволит создать удобное приложение для коммуникации с глухими людьми, а также позволит им проще адаптироваться в обществе и рабочих коллективах.

В мире насчитывается около 130 жестовых языков. В каждом из языков около 3—5 тысяч жестов, которые производятся руками в сочетании с мимикой и положением тела. По данным Всероссийского общества глухих, численность носителей жестового языка в России превышает 300 тысяч человек. По данным Всемирной организации здравоохранения, более 466 миллионов человек в мире страдают от инвалидизирующей потери слуха.

Фото предоставлено Управлением информационной политики НГТУ

0
0

СООБЩИТЕ НОВОСТЬ

Уважаемые читатели, вы всегда можете поделиться своей проблемой, рассказать о ЧП, прислать фото и видео в редакцию.
Мы ждем ваши сообщения электронную почту: infopro54@yandex.ru

Иван Капчук: Лечение в Kinetiq возвращает людей к активной жизни

Иван Капчук: Лечение в Kinetiq возвращает людей к активной жизни

Сегодня никто не хочет сидеть на скамье запасных — ни спортсмены, ни бизнесмены, ни обычные люди

Подпишитесь на новости
Подпишитесь на рассылку самых актуальных новостей.


Выражаю согласие на обработку персональных данных, указанных при заполнении формы подписки на рассылку новостей в соответствии с Политикой конфиденциальности

Я согласен (согласна)

 
×

Поиск по автору:

×
Декабрь 2025
Пн Вт Ср Чт Пт Сб Вс
« Ноя    
1234567
891011121314
15161718192021
22232425262728
293031  
×






Выражаю согласие на обработку персональных данных, указанных при заполнении формы «Предложить новость» в соответствии с Политикой конфиденциальности

Я согласен (согласна)

×

Эксклюзивный материал

Материалы, отмеченные значком , являются эксклюзивными, то есть подготовлены на основе информации, полученной редакцией InfoPro54.ru. При цитировании, перепечатке ссылка на источник обязательна

×

Участие в конференции бесплатно






Формат участия:

Отправляя сообщение, я принимаю условия соглашения об использовании персональных данных и соглашаюсь с Правилами сайта

×

Участие в конференции бесплатно







Отправляя сообщение, я принимаю условия соглашения об использовании персональных данных и соглашаюсь с Правилами сайта

×
Наверх в Новости Новосибирска
Сайт использует файлы Cookie и сервисы сбора технических параметров сеансов посетителей. Пользуясь сайтом, вы выражаете согласие с политикой обработки персональных данных и применением данных технологий.
Принять