Этот робот использует глубокое обучение для написания и воспроизведения собственной музыки

Искусственный интеллект доказал, что невероятно успешно способен анализировать образы, теперь он становится музыкантом в форме четырехрукого маримба-робота.

Роботу по имени Шимон дали огромное количество музыкальных данных: более 5000 полных песен, два миллиона мотивов, риффов и коротких фрагментов музыки исследователей из Технологического института Джорджии. Затем его попросили сочинить и исполнить свою собственную музыку.

AI-робот находится в разработке уже несколько лет, но это первый раз, когда он сочинил собственную музыку. После того, как он получил данные, он смог использовать методы глубокого обучения, чтобы создать две 30-секундные части оригинальной музыки.

Исследователи Georgia Tech говорят, что эта пьеса звучит как нечто среднее между джазом и классической музыкой. "Мы бы назвали их деликатно успокаивающими". Помимо глубокого обучения, Шимон также использует компьютерное зрение через камеру на своей робо-голове, чтобы определить, какие ноты он должен играть.

«Робот анализирует большой набор данных музыки (включая поп, классику, джаз и т.д.), чтобы выявить шаблоны, которые появляются во всех песнях и жанрах в наборе данных», - сказал Гил Вайнберг, директор Центра музыкальных технологий Университета.

«Затем он использует то, что он узнал (что может включать мелодичные, гармонические и ритмические узоры), чтобы генерировать собственную оригинальную музыку на основе музыкального материала».

Прежде чем робот начнет сочинять свой отрывок, ему будет дана начальная точка для работы. Для первого музыкального произведения было дано восемь нот, для второго - 16. «Поскольку мы смотрим на такие единицы, как бары, риффы и мотивы, мы можем получить более структурное понимание музыкальных композиций, чем при предыдущих усилиях, которые были направлены на изучение вероятностных переходов от ноты к ноте",-говорит Вайнберг.

Это не первый случай, когда приложения для искусственного интеллекта используются для создания музыки. Daddy's Car, песня, основанная на стиле The Beatles, была составлена

AI и имела более 1,6 миллиона просмотров на YouTube. Еще в июне 2016 года группа AI Google Brain создала основную 90-секундную мелодию. Технический гигант также использовал машинное обучение, чтобы позволить пользователям выступить дуэтом с искусственным интеллектом.

Дальнейшее развитие в этом направлении может привести к созданию более длинных музыкальных произведений, созданных AI: Подумайте о симфонии или концептуальном альбоме. Глубокое изучение музыкального моделирования, которое использует большие музыкальные единицы (которые также потребуют больших наборов данных, чтобы учиться), приведет к роботизированной музыке, которая может создать свою длинную музыкальную историю.

Источник, фото