Учёные из лаборатории искусственного интеллекта Сбербанка разработали инновационную систему, которая может точно распознавать эмоции людей даже в плохих условиях. Технология работает при плохом освещении, шуме и движении. Её можно использовать на смартфонах.
Система основана на анализе видео, аудио и текстовых данных. В разработке использовались облегченные нейросети, такие как EmotiEffNet и MobileFaceNet, которые были обучены на открытых наборах изображений с различными выражениями лиц. Нейросеть от Сбера позволяет обрабатывать информацию в реальном времени, не нагружая устройства.
Алгоритм фильтрует кадры и выбирает только те, где эмоции можно распознать с высокой точностью. Также применяется метод «позднего слияния», который объединяет данные из разных источников. Модель лучше адаптирована к новым задачам.
На международном конкурсе ABAW данная технология заняла первое место в распознавании выражений лиц , а также вошла в тройку лидеров в других категориях. Точность работы системы увеличилась на 1,5–15% по сравнению с традиционными методами.
Читайте ещё по теме:
Сбербанк запустил новую версию GigaChat
Сбер разработает нейросеть для импортозамещения производственного оборудования