Музыкальные исполнители смогут найти вдохновение для написания песен с помощью технологии, разработанной исследователями Университета Ватерлоо. Препринт исследования опубликован на arXiv.
LyricJam — система, которая с помощью искусственного интеллекта в реальном времени создает лирические тексты. Она была разработана Лабораторией обработки естественного языка Университета Ватерлоо. Система опирается на различные аспекты музыки, такие как последовательность аккордов, темп и инструменты. Так она помогает создавать тексты, отражающие настроение и эмоции, выражаемые живой музыкой.
Когда музыкант или группа играют инструментальную музыку, система получает необработанные аудиоклипы. Нейронная сеть обрабатывает их для создания новых лирических строк. Затем исполнители могут использовать эти строки для написания собственных текстов песен. Нейронная сеть изучает, какие лирические темы, слова и стилистические приемы связаны с различными аспектами музыки, которые содержатся в каждом аудиоклипе. Исследовательская группа провела исследование, пригласив музыкантов играть на инструментах во время использования системы. Разработчики отметили, что их система создает разные тексты для разных музыкальных жанров. Например, тексты, созданные для эмбиент-музыки, сильно отличаются от текстов для энергичной музыки.
«Цель системы не в том, чтобы написать песню для исполнителя. Вместо этого мы хотим помочь реализовать собственное творчество. Система генерирует поэтические строки с новыми метафорами и выражениями, ведя творцов в направлениях, которые они раньше не исследовали», — подводит итог Ольга Вечтомова из Университета Ватерлоо.
Система была запущена в июне 2021 года. Ей уже воспользовались более 1,5 тысячи пользователей.
Подписывайтесь на InScience.News в социальных сетях: ВКонтакте, Telegram, Facebook и Twitter.
Подписывайтесь на InScience.News в социальных сетях: ВКонтакте, Telegram, Одноклассники.
