Петербургские ученые научили нейросеть читать по губам через смартфон

Для улучшения распознавания речи в сложных условиях

Санкт-Петербургский Федеральный исследовательский центр РАН (СПб ФИЦ РАН) сообщил, что ученые учреждения обучили нейросеть читать по губам через смартфон. Это должно облегчить использование голосовых команд в очень шумных условиях.

 Фото: Pixabay/Anemone123
 Фото: Pixabay/Anemone123

«Мы разработали приложение для смартфона, которое распознает звучащую речь и считывает по губам слова пользователя, анализируя видеосигнал с камеры гаджета. Программа совмещает и анализирует информацию из двух источников для улучшения точности распознавания. Эксперименты показали, что такая гибридная система значительно эффективнее распознает команды человека в сложных и шумных условиях», – рассказал старший научный сотрудник лаборатории речевых и многомодальных интерфейсов СПб ФИЦ РАН Денис Иванько.

12 апр 15:36 Новости
Почти как в космосе: российские физики сжали плазму в джеты и поймали разделение ионов Эксперимент на установке КИ-1 воспроизвёл струи чёрных дыр и магнитосферу Земли
12 апр 15:17 Новости
Глава NASA Айзекман намерен посетить следующий запуск «Союза» с Байконура Старт состоится не ранее июля 2026 года
12 апр 14:55 Новости
Росатом замахнулся на лунную АЭС в 10 раз мощнее: 10 кВт для науки, 100+ кВт для добычи металлов Установка выдержит вакуум, радиацию и две недели лунной ночи при −150°C
12 апр 14:24 Новости
Роспатент выбрал тройку лучших изобретений для космоса: от ловли мусора до всепогодного спутника-шпиона Ведомство насчитало свыше трёх тысяч зарегистрированных программ для орбиты
12 апр 12:49 Новости
Хочешь в космос — зайди на Госуслуги: Роскосмос открыл онлайн-набор в отряд космонавтов Заявки принимают до 30 июня

Сейчас на главной