Blob Opera: искусственный интеллект поёт оперу

В рамках очередного эксперимента с машинным обучением подразделение Google Arts & Cultures разработало эмулятор оперного пения Blob Opera. На странице проекта четыре цветных шарика порадуют пользователей гармоничным исполнением оперы.

Blob Opera: искусственный интеллект поёт оперу

Blob Opera представляет собой квартет из фиолетового, голубого, зелёного и красного шариков, которые соответствуют четырём певческим голосам – басу, тенору, меццо-сопрано и сопрано. Растягивая их вверх или в низ, пользователь может выбирать высоту тона их голосов, а перетягивание шариков из стороны в сторону меняет издаваемый «исполнителями» гласный звук. Цветастые шарики также отлично гармонируют между собой, формируя слаженную мелодию из любых выбранных пользователем характеристик тона.

За каждым шариком из Blob Opera стоит реальный оперный исполнитель: бас Фредерик Тонг, тенор Кристиан Джоэл, меццо-сопрано Джоанна Гэмбл и сопрано Оливия Даутни. В общей сложности они записали 16 часов пения: в записи также участвовали сопрано Ингунн Гида Храфнкелсдоттир и баритон Джон Холланд-Эйвери. Впрочем, на странице проекта Blob Opera звучат не их реальные голоса. Часы пения профессиональных оперных исполнителей понадобились для тренировки алгоритма искусственного интеллекта. В итоге забавные цветастые шарики воспроизводят звуки, которые алгоритм считает оперным пением, основываясь на собственном многочасовом обучении. Кроме того, отдельный алгоритм отвечает за поведение шариков и гармонизацию голосов в режиме реального времени. Шарики дышат и внимательно следят за движениями мышки, а при гармонизации их зрачки сменяются танцующими спиралями.

Бас Фредерик Тонг, тенор Кристиан Джоэл, меццо-сопрано Джоанна Гэмбл и сопрано Оливия Даутни / Google Arts & Cultures

Проект Blob Opera разработал Дэвид Ли при поддержке команды подразделения Google Arts & Cultures. Ли считает, что этот эксперимент – не просто милая игрушка. Он являет собой удивительную демонстрацию того, как искусственный интеллект может создать нечто совершенно новое и неожиданное на базе уже существующих данных. Хотя для простоты реализации искусственного пения Ли решил ограничиться гласными звуками, даже без драматических текстов и трагического сюжета гармоничные голоса шариков передают ощущение реальных оперных композиций.

Blob Opera: искусственный интеллект поёт оперуВ качестве праздничного сюрприза разработчики научили Blob Opera исполнять несколько знаменитых рождественских гимнов. Рождественский дух доступен при нажатии на иконку с ёлочкой в правом нижнем углу экрана. Интерфейс проекта также позволяет поделиться праздничными песнями в исполнении облачённых в новогодние шапки шариков с родными и близкими. Кроме того, Вы можете записать композиции собственного сочинения и также отправить их другим пользователям.

Поделиться в соцсетях

Добавить комментарий