Петербургские ученые научили нейросеть читать по губам через смартфон
Для улучшения распознавания речи в сложных условиях

Санкт-Петербургский Федеральный исследовательский центр РАН (СПб ФИЦ РАН) сообщил, что ученые учреждения обучили нейросеть читать по губам через смартфон. Это должно облегчить использование голосовых команд в очень шумных условиях.

Фото: Pixabay/Anemone123

«Мы разработали приложение для смартфона, которое распознает звучащую речь и считывает по губам слова пользователя, анализируя видеосигнал с камеры гаджета. Программа совмещает и анализирует информацию из двух источников для улучшения точности распознавания. Эксперименты показали, что такая гибридная система значительно эффективнее распознает команды человека в сложных и шумных условиях», – рассказал старший научный сотрудник лаборатории речевых и многомодальных интерфейсов СПб ФИЦ РАН Денис Иванько.

Telegram Дзен

2023-04-11 22:32:10 Наука

Источники

РИА "Новости" Фото

Сейчас на главной

2 часа назад

Раскрыты характеристики нового российского самолета Tango: выйдет в серийное производство не ранее 2027 года

Самолет сможет летать со скоростью до 245 км/ч на максимальную дальность до 1100 км

3 часа назад

«Калашников» впервые показал полет новейшего дрона-камикадзе «КУБ-10Э» на видео

Скорость беспилотника — до 100 км/ч

14 апр. 2025 г., 18:09:43

Вероятность магнитных бурь все выше: гигантские протуберанцы приближаются к Земле

Солнечное вещество «придет» к нашей планете в ночь с 15 на 16 апреля

14 апр. 2025 г., 17:58:35

Т-Банк запускает уникальную службу поддержки на русском жестовом языке

Банк стал первым в России с техподдержкой для глухих и слабослышащих клиентов

14 апр. 2025 г., 17:50:29

Куковать в лесу не придётся: «Вымпелком» и разработчик низкоорбитальных спутников «Бюро 1440» обеспечат связью абонентов Билайна даже в труднодоступных местах

У «Вымпелкома» появилась возможность стать вторым оператором из «большой четвёрки» с доступом к спутниковой связи

14 апр. 2025 г., 17:47:13

Ростех: аппарат для лечения опухолей «МедУза 008» пройдёт первые испытания во втором полугодии 2025 года

Разработка поможет в лечении раковых образований без хирургического вмешательства

14 апр. 2025 г., 17:33:21

Разработка новых лекарств в России усложняется: США заблокировали доступ к своей системе здравоохранения

Учёные России, Китая, Ирана, КНДР, Кубы и Венесуэлы не смогут пользоваться научными базами данных

14 апр. 2025 г., 17:31:48

Проект развивается: для строительства второй АЭС в Белоруссии рассматривают два места

Возможно создание допблока БелАЭС или новой станции в Могилевской области

14 апр. 2025 г., 17:27:20

Сбер запускает обновлённую нейросеть GigaChat 2.0 для всех пользователей

В новой версии GigaChat появились расширенные возможности для обработки данных и для взаимодействия с пользователями

14 апр. 2025 г., 15:58:41

Хаос под контролем: долговечность беспорядка в сложных системах была доказана учёными из России и Европы

Концепция псевдогиперболистичности помогла выяснить, является ли беспорядок настоящим хаосом или временным сбоем

14 апр. 2025 г., 15:42:20

АвтоВАЗ открыл новое производство: роботы готовы выпускать более 700 кузовов Lada Iskra в сутки

Площадь нового сварочного цеха — более 40 000 м²

14 апр. 2025 г., 14:39:06

«Соллерс» рассматривает Африку для производства автомобилей УАЗ

Компания планирует организовать сборочные производства в разных странах

Все новости