Ученые НЭТИ завершают создание системы компьютерного распознавания русского жестового языка

  • 04/10/2021, 18:36
Автор:
С помощью камер и нейронных сетей она узнает жесты глухих и переводит их в текст или голос. Подобных программ в мире еще не существует.

— Мы внесли в программу 1 006 жестов, если быть точными. Также разработали алгоритм для распознавания жестов, теперь можно выделять компоненты жеста, конфигурацию и ориентацию ладони, локализацию жеста, а также характер движения. В России подобной системы раньше не было, это первая в мире разработка, — рассказал профессор кафедры автоматизированных систем управления Новосибирского государственного технического университета Михаил Гриф.

По его словам, сейчас продолжается разработка программы распознавания дактилем (буквы из дактильного алфавита). Точность распознавания дактилем составляет 92%.

— Мы также вели работу над выделением эпентезы (межжестовое движение). Сейчас точность выделения жестов в видеопотоке составляет 85—90%. Пока эта работа ведется в формате эксперимента. Кроме того, мы занимаемся разработкой биологически подобных нейронных сетей, которые работают аналогично человеку, зрительно воспринимающему жестовый язык, — добавил Михаил Гриф.

Сейчас ученые вуза сосредоточены на разработке и внедрении работы компьютерного переводчика в обе стороны, чтобы его качество удовлетворяло требованиям глухих людей. Сначала планируется разработать переводчик для русского жестового языка, а в дальнейшем и для других жестовых языков мира.

Разработка переводчика позволит создать удобное приложение для коммуникации с глухими людьми, а также позволит им проще адаптироваться в обществе и рабочих коллективах.

В мире насчитывается около 130 жестовых языков. В каждом из языков около 3—5 тысяч жестов, которые производятся руками в сочетании с мимикой и положением тела. По данным Всероссийского общества глухих, численность носителей жестового языка в России превышает 300 тысяч человек. По данным Всемирной организации здравоохранения, более 466 миллионов человек в мире страдают от инвалидизирующей потери слуха.

Фото предоставлено Управлением информационной политики НГТУ

Комментировать

пока нет комментариев
продукты питания

В почтовые отделения ― за мясом и пельменями

В сельских почтовых отделениях ассортимент товаров, которые предлагают почтамты, расширяется за счет продуктов питания.
Читать статью >>
переработка мусора

Потенциальные резиденты изучают экотехнопарк

Компании, занимающиеся переработкой мусора, называют как плюсы его создания, так и риски, которые их сдерживают для принятия решений.
Читать статью >>
депутат в розыске

Розыск Хельги Пироговой идёт на межгосударственном уровне

Упоминание вооруженных сил РФ в контексте её скандального поста изучает лингвистическая экспертиза
Читать статью >>
уровень преступности

В Новосибирске зафиксирован рост уровня преступности со стороны иностранцев

Прибывшие из-за рубежа граждане нарушают закон чаще, чем в прошлом году.
Читать статью >>
Новости компаний

Комментарии читателей


Подписываясь на новости, я принимаю условия соглашения об использовании персональных данных и соглашаюсь с Правилами сайта
Я согласен (согласна)

×
×
Август 2022
Пн Вт Ср Чт Пт Сб Вс
« Июл    
1234567
891011121314
15161718192021
22232425262728
293031  
×





Отправляя сообщение, я принимаю условия соглашения об использовании персональных данных и соглашаюсь с Правилами сайта
Я согласен (согласна)

×

Эксклюзивный материал

Материалы, отмеченные значком , являются эксклюзивными, то есть подготовлены на основе информации, полученной редакцией InfoPro54.ru. При цитировании, перепечатке ссылка на источник обязательна

×

Участие в конференции бесплатно






Формат участия:

Отправляя сообщение, я принимаю условия соглашения об использовании персональных данных и соглашаюсь с Правилами сайта

×

Участие в конференции бесплатно






Отправляя сообщение, я принимаю условия соглашения об использовании персональных данных и соглашаюсь с Правилами сайта

×
Наверх в Новости Новосибирска