Впервые на Форуме объединенных культур в Санкт-Петербурге состоялась премьера мультимедийного произведения, созданного на основе славянских, тюркских, финно-угорских и сгенерированных нейросетью мелодий! Его инициировали и представила Гильдия межэтнической журналистики. Мероприятие прошло в рамках блока «Искусственный интеллект — угроза или благо для культуры», который курирует Президентский фонд культурных инициатив.

Как ИИ воспринимает и перерабатывает фольклор народов России и способен ли он творить музыку наравне с человеком – результат такого сотворчества оказался более чем обнадеживающим.

В креативном эксперименте участвовали:

- финалисты поддержанного Президентским фондом культурных инициатив этномузыкального проекта «Звук Евразии» – музыкант мультиинструменталист Марат Татурас, исполнительница Удмуртского фотка Наталья Дзыга и группа русской фолктроники VetkaFolk;

- команды разработчиков из Сбера, занятые обучением генеративных нейросетей.

«Опасаться вмешательства ИИ в журналистское или музыкальное творчество пока еще рано. Нейросеть — это эффективный помощник и все зависит, на каком материале он будет обучен.  Раньше было выражение «его воспитала улица», так вот важно, чтобы ИИ был «воспитан» на лучших образцах отечественного фольклора и современной этнической музыки, тогда он будет нести в цифровое пространство уникальный культурный код народов многонациональной России, – считает Маргарита Лянге, член Общественной палаты РФ и автор проекта «Звук Евразии».

Модель SymFormer от Сбера сгенерировала переходы музыки одного народа в другой: из славянских мелодий в тюркские, из тюркских в финно-угорские. Музыкальные треки, созданные на основе сгенерированного нейросетью контента звучали в качестве связующего звена между партиями артистов, представляющих три самые многочисленные группы народов России.

«К нам часто обращаются с самыми неожиданными запросами, и мы откликаемся – для нас важно подсвечивать доступность и простоту использования решений Сбера в области генеративного ИИ. Но результат, который мы получили от этого творческого партнерства с Гильдией межэтнической журналистики, превзошел все наши ожидания – нам удалось очень красиво реализовать сотворчество человека и машины, соединить наш глубинный культурный код и самые передовые технологии, — заявила Ксения Кузнецова, руководитель направления коммуникации Sber AI.

В композиции использованы ноты, которые нейросеть сгенерировала для гуслей и вокала, а в отдельных частях необычного неофолкпроизведения она даже выступила в качестве солиста в сопровождении других фолкисполнителей.

«Искусственный интеллект обучают распознавать настроение, темп, жанр мелодий, а затем по настройкам создавать новые треки. И об этом мы много говорили в первый день проведения Международного культурного форума. Нынешние модели нейросетей для генерации музыки, конечно, пока не достигли уровня мастерства, например, Моцарта или Баха. Однако, они вовсю изучают аудиокомпозиции известных музыкантов, а также этническую, национальную музыку, и составляют на их основе свои уникальные треки. Таким образом, ИИ способен генерировать для вас музыку, которая может быть полезна при создании видеороликов или для улучшения собственных треков. Презентация, гостями которой мы стали, наглядно показывает, как человеческий талант и искусственный интеллект могут органично сосуществовать. Причем касается это не только музыкальной составляющей, но и всего, что связано с художественными элементами, орнаментами, узорами. Этноповестке, мне кажется, искусственный интеллект еще только предстоит обстоятельно обучать, ведь никто лучше человека не знаком с национальным многообразием нашей страны и планеты в целом», — отметил генеральный директор Президентского фонда культурных инициатив Роман Карманов. 

Нейросеть Сбера Kandinsky попросили пофантазировать на тему искусства и быта разных культур. В получившихся анимациях, пейзажи, интерьеры и предметы быта разных культур оживают и перетекают в традиционные орнаменты. В результате получились яркие переходы видео–образов, усилившие гипнотическую силу всего произведения.

Напомним, что IX Санкт-Петербургский международный культурный форум проходит с 16 по 18 ноября после трехлетнего перерыва. Культурный форум, который организуют правительство РФ, Министерство культуры РФ и правительство Санкт-Петербурга, признан событием мирового уровня. В нем ежегодно участвуют тысячи экспертов в области культуры со всего мира.