Когда Людвиг фон Бетховен умер в 1827 году, ему оставалось три года до завершения Девятой симфонии, которую многие провозгласили его величайшим произведением. Он начал работу над своей 10-й симфонией, но из-за ухудшения здоровья не смог добиться больших успехов: остались только музыкальные наброски.
С тех пор поклонники Бетховена и музыковеды ломают голову над тем, что могло бы быть. Его заметки дразнили какой-то великолепной наградой, хотя и казавшейся вечно недостижимой.
Теперь, благодаря работе группы историков музыки, музыковедов, композиторов и компьютерщиков, видение Бетховена воплотится в жизнь.
Я руководил частью проекта, связанной с искусственным интеллектом, возглавляя группу ученых в творческом стартапе по искусственному интеллекту Playform AI, который обучил машину как всей работе Бетховена, так и его творческому процессу.
Полная запись 10-й симфонии Бетховена должна быть выпущена 9 октября 2021 года, в тот же день, когда состоится мировая премьера в Бонне, Германия, - кульминация более чем двухлетнего усилие.
Прошлые попытки врезаться в стену
Примерно в 1817 году Королевское филармоническое общество в Лондоне поручило Бетховену написать его Девятую и Десятую симфонии. Написанные для оркестра симфонии часто содержат четыре части: первая исполняется в быстром темпе, вторая в более медленном, третья в среднем или быстром темпе и последняя в быстром темпе.
Бетховен завершил свою Девятую симфонию в 1824 году, которая завершается вечной «Одой к радости».
Но когда дело дошло до 10-й симфонии, Бетховен почти ничего не оставил после себя, кроме нескольких музыкальных нот и горстки идей, которые он набросал.
В прошлом предпринимались попытки реконструировать части 10-й симфонии Бетховена. Наиболее известно, что в 1988 году музыковед Барри Купер рискнул завершить первую и вторую части. Он сплел вместе 250 музыкальных тактов из набросков, чтобы создать то, что, по его мнению, было постановкой первой части, верной видению Бетховена.
Тем не менее, скудость набросков Бетховена не позволила знатокам симфонии выйти за пределы этой первой части.
Собираем команду
В начале 2019 года со мной связался доктор Маттиас Рёдер, директор Института Караяна, организации в Зальцбурге, Австрия, которая продвигает музыкальные технологии. Он объяснил, что собирает группу для исполнения 10-й симфонии Бетховена в честь 250-летия композитора. Зная о моей работе над искусством, созданным ИИ, он хотел знать, сможет ли ИИ заполнить пробелы, оставленные Бетховеном.
Вызов казался пугающим. Чтобы осуществить это, ИИ нужно будет сделать то, чего он никогда раньше не делал. Но я сказал, что попробую.
Затем Рёдер собрал команду, в которую вошел австрийский композитор Вальтер Верцова. Верзове, известному тем, что он написал фирменный джингл для бонга Intel, было поручено составить новый тип композиции, которая объединила бы то, что оставил Бетховен, с тем, что сгенерировал бы ИИ. Марк Готэм, специалист по вычислительной музыке, возглавил работу по расшифровке набросков Бетховена и обработке всей его работы, чтобы можно было должным образом обучить ИИ.
В команду также входил Роберт Левин, музыковед из Гарвардского университета, который также оказался потрясающим пианистом. Левин ранее закончил ряд незавершенных произведений Моцарта и Иоганна Себастьяна Баха 18-го века.
Проект обретает форму
В июне 2019 года группа собралась на двухдневный мастер-класс в музыкальной библиотеке Гарварда. В большой комнате с пианино, доской и стопкой альбомов Бетховена, охватывающих большинство его известных произведений, мы говорили о том, как фрагменты можно превратить в законченное музыкальное произведение и как ИИ может помочь решить эту головоломку, оставаясь при этом верным к процессу и видению Бетховена.
Музыкальные эксперты в комнате стремились узнать больше о музыке, которую ИИ создавал в прошлом. Я рассказал им, как ИИ успешно создавал музыку в стиле Баха. Однако это была лишь гармонизация введенной мелодии, звучавшей как Бах. Это и близко не соответствовало тому, что нам нужно было сделать: составить целую симфонию из нескольких фраз.
Тем временем, ученые в комнате, включая меня, хотели узнать, какие материалы были доступны, и как эксперты предполагали использовать их для завершения симфонии.
Задача в конце концов выкристаллизовалась. Нам нужно было бы использовать ноты и завершенные композиции из всего творчества Бетховена, а также имеющиеся наброски из 10-й симфонии, чтобы создать что-то, что мог бы написать сам Бетховен.
Это был огромный вызов. У нас не было машины, на которую можно было бы набросать эскизы, нажать на кнопку и заставить ее выплюнуть симфонию. Большинство ИИ, доступных в то время, не могли продолжать незавершенное музыкальное произведение дольше нескольких дополнительных секунд.
Нам нужно раздвинуть границы того, на что способен творческий ИИ, научив машину творческому процессу Бетховена - тому, как он брал несколько музыкальных тактов и кропотливо превращал их в волнующие симфонии, квартеты и сонаты.
Собирая воедино творческий процесс Бетховена
По мере развития проекта человеческая и машинная стороны сотрудничества развивались. Верзова, Готэм, Левин и Рёдер расшифровали и записали наброски из 10-й симфонии, пытаясь понять намерения Бетховена. Используя его законченные симфонии в качестве шаблона, они попытались собрать воедино головоломку о том, куда должны идти фрагменты эскизов - какое движение, какая часть движения.
Им приходилось принимать решения, например определять, указывает ли эскиз на отправную точку скерцо, которое является очень живой частью симфонии, обычно в третьей части. Или они могут решить, что музыкальная линия, вероятно, была основой фуги, которая представляет собой мелодию, созданную переплетением частей, которые все перекликаются с центральной темой.
На стороне проекта, связанной с искусственным интеллектом, - на моей стороне - возник ряд сложных задач.
Во-первых, и самое главное, нам нужно было выяснить, как взять короткую фразу или даже просто мотив и использовать его для создания более длинной и сложной музыкальной структуры, как это сделал бы Бетховен. Например, машине нужно было узнать, как Бетховен построил Пятую симфонию из основного мотива из четырех нот.
Далее, поскольку продолжение фразы также должно следовать определенной музыкальной форме, будь то скерцо, трио или фуга, ИИ необходимо изучить процесс Бетховена для развития этих форм.
Список дел рос: нам нужно было научить ИИ брать мелодию и гармонизировать ее. ИИ нужно было научиться соединять две части музыки вместе. И мы поняли, что ИИ должен быть в состоянии составить коду, то есть сегмент, который завершает часть музыкального произведения.
Наконец, когда у нас была полная композиция, ИИ должен был выяснить, как ее оркестровать, что включает в себя назначение разных инструментов для разных частей.
И он должен был выполнять эти задачи так, как это мог бы сделать Бетховен.
Прохождение первого большого испытания
В ноябре 2019 года команда снова встретилась лично - на этот раз в Бонне, в Доме-музее Бетховена, где родился и вырос композитор.
Эта встреча стала лакмусовой бумажкой для определения того, сможет ли ИИ завершить этот проект. Мы напечатали ноты, разработанные искусственным интеллектом и построенные на основе скетчей из 10-го концерта Бетховена. Пианист выступил в маленьком концертном зале музея перед группой журналистов, музыковедов и бетховенщиков.
Мы предложили зрителям определить, где заканчивались фразы Бетховена и где начиналась экстраполяция ИИ. Они не могли.
Несколько дней спустя один из этих сгенерированных ИИ партитур был сыгран струнным квартетом на пресс-конференции. Только те, кто близко знал наброски Бетховена для 10-й симфонии, могли определить, когда появились сгенерированные ИИ партии.
Успех этих тестов показал нам, что мы на правильном пути. Но это были всего лишь пару минут музыки. Предстояло еще много работы.
Готов к миру
Гений Бетховена вырисовывался на каждом шагу, побуждая нас работать лучше. По мере развития проекта развивался и ИИ. В течение следующих 18 месяцев мы создали и оркестровали две полные части продолжительностью более 20 минут каждая.
Мы ожидаем, что эта работа будет встречена некоторыми отпорами - теми, кто скажет, что искусство должно быть закрыто для ИИ, и что ИИ не имеет права пытаться воспроизвести творческий процесс человека. Тем не менее, когда дело доходит до искусства, я вижу ИИ не как замену, а как инструмент, открывающий художникам двери для самовыражения по-новому.
Этот проект был бы невозможен без опыта историков и музыкантов. Для достижения этой цели потребовалось огромное количество работы и, да, творческого мышления.
В какой-то момент один из музыкальных экспертов в команде сказал, что ИИ напомнил ему энергичного студента-музыканта, который занимается каждый день, учится и становится все лучше и лучше.
Теперь этот студент, приняв эстафетную палочку от Бетховена, готов подарить миру 10-ю Симфонию.
Ахмед Эльгаммаль - профессор кафедры компьютерных наук в Университете Рутгерса и директор Лаборатории искусства и искусственного интеллекта в Ратгерском университете.