OpenAI разрабатывает новый инструмент для генерации музыки на основе текста и аудио

Компания OpenAI работает над созданием инструмента, способного генерировать музыку по текстовым и аудиоподсказкам, сообщает The Information.

По данным источников, технология позволит добавлять музыку к существующим видео или, например, создавать гитарное сопровождение к вокальной дорожке. Пока не уточняется, будет ли инструмент самостоятельным продуктом или интегрированным в ChatGPT либо видеоплатформу Sora.

Один из собеседников издания отметил, что OpenAI сотрудничает со студентами школы искусств Джульярд для аннотирования музыкальных партитур, которые используются как обучающие данные.

Ранее компания уже экспериментировала с генеративными музыкальными моделями, однако они предшествовали запуску ChatGPT. В последнее время OpenAI сосредоточилась на разработке аудиомоделей для синтеза и распознавания речи.

Среди других компаний, работающих над генеративной музыкой, — Google и Suno.