Нейросеть пишет рождественские песенки по фотографии (ВИДЕО)

Авторы работы использовали созданную ими ранее рекуррентную нейросеть, которая изначально предназначалась для генерации поп-песен. С помощью базы данных, состоящей из 100 часов музыки, исследователи предварительно обучили программу сочинять простые мелодии с темпом 120 bpm (ударов в минуту). Причем искусственный интеллект учитывал типичные для поп-музыки последовательности аккордов, а также добавлял в композицию ударные. Затем программа была обучена подбирать слова к своей мелодии. Для того, чтобы создать словарь для нейросети, ученые использовали 51 час аудиозаписей текстов песен (без музыки) и композицию Just Dance. Исследователи оставляли только те слова, которые встречались чаще четырех раз, поэтому словарный запас искусственного интеллекта оказался небольшим — всего 3390 слов. С их помощью он научился сочинять собственные поп-хиты и петь их со скоростью 1 удар на слово (1 beat per word).

Сейчас авторы работы обучили нейросеть понимать, как определенные слова могут быть связаны с изображенными на снимках предметами. Для этого они использовали фотографии с метками, подсказывающими искусственному интеллекту, что именно перед ним находится. Как сообщает The Guardian, программа работает по тому же принципу, что и созданный ранее исследователями генератор текстов в стиле Тэйлор Свифт. Он также анализирует фотографию и подбирает подходящие слова.

Исследователи проверили работу нейросети, введя в нее снимок наряженной к Рождеству елки. В итоге компьютер создал довольно странную песню:

В будущем исследователи планируют научить нейросеть «играть» на большем количестве инструментов и создавать гораздо более сложные песни.

Теги:

ТОБІ СПОДОБАЄТЬСЯ

Новий Lexus UX таргетується на кожного по-своєму

Lexus і BBDO Ukraine створили таргетинг-кампанію про новинку в авторяду Lexus UX. Звичайно, можна було створити звичний шум навколо появи ...

Маша Єфросиніна і WOG відкривають «Дорогу добра»

З 15 липня мережа АЗК WOG пропонує купувати напої у фіолетових горнятках з єдинорогами. Саме так щороку розпочинається благодійна акція ...

Компанія Amazon вводить смарт-візки у своїх офлайн-магазинах

Amazon Dash Cart обладнані цілим рядом сенсорів, вагами та камерами, які дозволяють точно визначити, який саме товар покупець кладе у візок.

Компанія Apple створила кумедний мініфільм про віддалену роботу

Apple створила сиквел до ролика «The Underdogs», який показує чимало моментів, добре знайомих всім, кому останнім часом доводилося працювати дистанційно.

Тихі історії під гостиним дахом. Готель «Дніпро» як джерело натхнення

Творча лабораторія ТРОПА, яка є проєктом громадської організації «Молодіжне об’єднання «Джерело натхнення», допомагає молодим режисерам, музикантам, співакам та митцям знаходити ...

Нова кампанія для бренду морозива Monaco від креативного агентства banda

У бренду морозива Monaco є ціла купа незаїжджених смаків. Так виникла ідея — донести, що морозиво Monaco зі своїми неочікуваними ...