Mail.RuПочтаМой МирОдноклассникиИгрыЗнакомстваНовостиПоискВсе проекты
Строй, владей, эксплуатируй: Россия строит в Турции АЭС В Турции началось строительство первой в стране атомной электростанции. Это совместный проект Москвы и Анкары
2 декабря 2016, источник: N + 1

Нейросеть сочинила рождественскую песню по фотографии

Разработчики из университета Торонто создали нейросеть, которая умеет сочинять песню про предметы, показанные на фотографиях.

Источник: Reuters

В режиме реального времени она создает мелодию и подбирает к ней слова. Работу программы проверили, показав ей фотографию рождественской елки. Об этом сообщает The Guardian.

Авторы работы использовали созданную ими ранее рекуррентную нейросеть, которая изначально предназначалась для генерации поп-песен.

С помощью базы данных, состоящей из 100 часов музыки, исследователи предварительно обучили программу сочинять простые мелодии с темпом 120 bpm (ударов в минуту). Причем искусственный интеллект учитывал типичные для поп-музыки последовательности аккордов, а также добавлял в композицию ударные. Затем программа была обучена подбирать слова к своей мелодии.

Для того, чтобы создать словарь для нейросети, ученые использовали 51 час аудиозаписей текстов песен (без музыки) и композицию Just Dance.

Исследователи оставляли только те слова, которые встречались чаще четырех раз, поэтому словарный запас искусственного интеллекта оказался небольшим — всего 3390 слов. С их помощью он научился сочинять собственные поп-хиты и петь их со скоростью 1 удар на слово (1 beat per word).

Сейчас авторы работы обучили нейросеть понимать, как определенные слова могут быть связаны с изображенными на снимках предметами. Для этого они использовали фотографии с метками, подсказывающими искусственному интеллекту, что именно перед ним находится.

Как сообщает The Guardian, программа работает по тому же принципу, что и созданный ранее исследователями генератор текстов в стиле Тэйлор Свифт.

Он также анализирует фотографию и подбирает подходящие слова.

Исследователи проверили работу нейросети, введя в нее снимок наряженной к Рождеству елки. В итоге компьютер создал довольно странную песню, послушать которую можно здесь:

Во время загрузки произошла ошибка.

В будущем разработчики планируют научить нейросеть «играть» на большом количестве инструментов и создавать гораздо более сложные песни.


Недавно российские разработчики создали систему искусственного интеллекта, которая научилась сочинять стихи, и после использовали ее для записи альбома в стилистике группы «Гражданская оборона». А разработчики из лаборатории Google Brain в ходе обучения системы искусственного интеллекта пониманию человеческой речи научили ее создавать подобие подростковой поэзии.

Кроме того, в России была также создана нейросеть, которая пишет твиты, копируя стиль Рамзана Кадырова.

Кристина Уласович