В НГУ разработали ИИ-переводчик русского жестового языка для реального времени

Приложение работает на компьютере в режиме реального времени и на мобильных устройствах

В Новосибирском государственном университете (НГУ) разработали приложение на основе искусственного интеллекта для перевода жестового языка в текст в режиме реального времени.

Источник изображения сгенерировано нейросетью DALL•Е 3

Приложение функционирует как на компьютерах, так и на мобильных устройствах. Разработчик Ярослав Чеканов самостоятельно изучил русский жестовый язык и собрал большой массив данных для обучения ИИ. Приложение считывает изображение с видеокамеры и переводит жесты в текст, который отображается на экране.

Основным преимуществом решения является высокая скорость и точность перевода по сравнению с аналогами. В будущем планируется добавить обратный перевод — из текста и голоса в жесты. По мнению автора, этот проект имеет важное социальное значение, расширяя возможности взаимодействия для людей с ограниченными возможностями.

Читать материалы по теме:

Восстановит моторику верхних конечностей: в Томске создали игровую платформу для реабилитации

ВТБ запустил чат-бот с анимированным сурдопереводчиком для клиентов с нарушением слуха

Четкий захват: ученые ПНИПУ сделали бионические протезы рук более точными

31 мая 16:02 Новости
Школьник спросил ИИ — и перестал думать: академик РАН оценил риск нейросетей Владислав Лекторский предупредил о слепом доверии учеников к ChatGPT
31 мая 14:58 Новости
Нейросети не заменят священника: в РПЦ назвали пределы цифровых технологий Владимир Легойда рассказал, где церковь готова использовать ИИ, а где видит границу
31 мая 12:20 Новости
Не списать, а подготовиться: эксперт рассказала, как ИИ может помочь на ЕГЭ Нейросеть можно использовать для подбора литературных доводов к сочинению
31 мая 05:48 Новости
Первый ИИ для чиновников внесли в реестр российского ПО: он пишет протоколы и оформляет поручения Новый ассистент помогает в принятии решений, формирует списки поручений и удаляет из отчётов ненормативные выражения
29 мая 12:14 Новости
На ЕГЭ умные камеры и нейросеть помогут выявлять списывающих школьников в Свердловской области Система автоматически фиксирует нарушения и подаёт сигнал наблюдателю
Источники:
ИА «ТАСС»
2024-09-11 14:13:13 Богдан Герцен Нейросети
Telegram Дзен

Сейчас на главной

Российский дрон «ИнноСпектор» бросил вызов зарубежным аналогам: шахты Казахстана получили 3D-карты на глубине до 900 метров
37 минут назад
Российский дрон «ИнноСпектор» бросил вызов зарубежным аналогам: шахты Казахстана получили 3D-карты на глубине до 900 метров

Разработка Университета Иннополис впервые провела масштабную инспекцию рудников за рубежом и показала преимущество по скорости обработки данных и мобильности

Новости Авиация
Надежда Астам
Все новости