ИИ-система Вечтомовой “рожает” тексты песен

Канадские ученые из Университета Ватерлоо во главе с Ольгой Вечтомовой разработали систему искусственного интеллекта (ИИ), которая генерирует тексты песен в стиле конкретных исполнителей. Алгоритм вдохновит поэтов-песенников на создание новых хитов.

Команда Вечтомовой научила машину улавливать лирический стиль артиста, включая выбор слов, тем и структуры предложений. ИИ-система использует такую модель нейросети, как вариационный автоэнкодер (VAE). Последняя может обучаться путем восстановления строк оригинала.

Чтобы воссоздать стилистику, нейросеть изучает и классифицирует MEL-спектрограммы аудиоклипов артиста. Иными словами, Вечтомова и ее коллеги загрузили в ИИ-систему звук, превращенный в диаграмму — частотно-временные характеристики песни. Этот многомерный вектор чисел они назвали “встраиванием артиста”. Такое машинное обучение позволяет виртуальному поэту создавать лирические линии и полноценные тексты песен в нужном стиле.

Как призналась Вечтомова, сгенерированные строки часто содержат слова оригинала, но передают новые мысли и поэтические образы. При этом нейросеть встраивает в тексты песен даже такие приемы, как метафоры и оксюмороны. Разработчики надеются, что ИИ-система даст поэтам-песенникам новые идеи, которые они смогут развить.

«Она предназначена не для того, чтобы заменить исполнителя, а для использования в качестве источника вдохновения в процессе написания песен», — пояснила Вечтомова.

Из сочинений виртуального поэта Вечтомова составила сборник стихотворений Echoes. Тексты созданы в стиле 7 ее любимых групп и исполнителей, включая Дэвида Боуи и Depeche Mode.

Ранее американские ученые Руохан Гао из Университета Техаса в Остине и Кристен Грауман из Facebook AI Research разработали нейросеть, которая создает 3D-звуки. Система искусственного интеллекта использует обычные видеоклипы.

Источники: techxplore.com, ov-research.uwaterloo.ca, dataart.com.ua. Подготовил Станислав Клопот

Расскажите об этом друзьям



Хотите узнать о будущем больше?

Узнайте где деньги будут завтра!

Как современные технологии изменят бизнес? От чего стоит отказываться уже сейчас? Какие бизнес-идеи будут востребованы через 5, 10 и 15 лет? Какие отрасли останутся выгодными и актуальными, а какие умрут?

Заглянуть в будущее