Петербургские ученые научили нейросеть читать по губам через смартфон

Для улучшения распознавания речи в сложных условиях

Санкт-Петербургский Федеральный исследовательский центр РАН (СПб ФИЦ РАН) сообщил, что ученые учреждения обучили нейросеть читать по губам через смартфон. Это должно облегчить использование голосовых команд в очень шумных условиях.

 Фото: Pixabay/Anemone123
 Фото: Pixabay/Anemone123

«Мы разработали приложение для смартфона, которое распознает звучащую речь и считывает по губам слова пользователя, анализируя видеосигнал с камеры гаджета. Программа совмещает и анализирует информацию из двух источников для улучшения точности распознавания. Эксперименты показали, что такая гибридная система значительно эффективнее распознает команды человека в сложных и шумных условиях», – рассказал старший научный сотрудник лаборатории речевых и многомодальных интерфейсов СПб ФИЦ РАН Денис Иванько.

14 мин назад Новости
Первый запуск новой ракеты «Союз-5» показали онлайн: теперь уникальные кадры можно увидеть из дома «Кинопоиск» показал старт с Байконура со всеми этапами — от подготовки до пуска
02 мая 19:21 Новости
Гигантскую посылку на МКС распаковали прямо в космосе: видео Космонавт Кудь-Сверчков открыл люк «Прогресса МС-34» и показал, что доставили на орбиту
02 мая 15:45 Новости
Солнце «стонет», но мы этого не слышим: российские учёные раскрыли необычный феномен По «звукам» можно изучать, что происходит внутри звезды
02 мая 13:55 Новости
В России разработали первый в мире плазменный двигатель с магнитным соплом Изобретение инженеров МИФИ движется на пластике и пригодится для малых спутников
02 мая 13:37 Новости
США заявили о космическом оружии России с разделяемыми спутниками Генерал Стивен Уайтинг: разработка по схеме «Матрёшка» способна поражать спутники

Сейчас на главной

Увеличился в сотни раз: Ростех раскрыл данные о взрывном спросе на антидроновые системы
21 минуту назад

Собственные технологии компании позволяют управлять тридцатью системами защиты из одного центра

«Лёгкий заработок» на маркетплейсах оказался ловушкой: в МВД предупредили россиян о новой схеме мошенников
1 час назад

Злоумышленники обещают процент за простые задания, а потом требуют оформить рассрочку и забирают деньги

Россиян защитят от «СМС-бомбинга»: рассылки мошенников предложили останавливать автоматически
1 час назад

Операторы и цифровые платформы должны внедрять антифрод-фильтры для защиты людей от кибеатак, заявил сенатор Гибатдинов