Студенты Московского физико-технического института (МФТИ) разработали инновационный сервис Audio2MIDI, который использует искусственный интеллект для преобразования аудиозаписей фортепьянной музыки в нотные партитуры. Этот сервис решает проблему, с которой сталкиваются музыканты и композиторы, поскольку создание партитур вручную требует значительных усилий и времени. Современные ИИ-модели для музыки не всегда эффективны из-за ограниченного количества качественных данных в формате MIDI.
Audio2MIDI работает через Telegram. Для его использования достаточно запустить бота, выбрать необходимую задачу (например, распознать ноты из песни, разделить песню на голос и аккомпанемент или получить текст песни по ключевым словам). Главной особенностью является высокая точность преобразования даже сложных полифонических произведений. Сервис обещает значительное сокращение времени на создание партитур — теперь для игры на пианино достаточно несколько мгновений для получения нужной нотации.
Сервис может быть полезен музыкальным платформам и магазинам, предлагая API для генерации нотных данных и улучшения обучения моделей генеративной музыки. Он также может использоваться для проверки оригинальности музыкальных композиций, анализа треков на наличие плагиата, что актуально в случае авторских споров.
В будущем разработчики планируют расширить функционал, включая создание партитур для других инструментов и оркестровых партий.
В Okko появился новый раздел «Музыка»