ИИ и Музыка

Вышла обновлённая версия генератора Minimax Music - 3.0. Они поправили искажения на инструментах и вокале, которые ранее становились заметными во второй половине трека. Появилась возможность задавать точечные изменения для разных частей песни: моменты вступления и затухания конкретных инструментов, смену эмоций. Добавили нейросеть Qwen, которая используется для создания детализированных инструкций даже из простых промптов. Незначительно подтянули качество инструментала и вокала, звучат более реалистичными. Сообщается, что аранжировки сделали более интересными (я на тестах существенной разницы не заметил). С русским языком всё по прежнему плохо. Пробовать можно бесплатно (и пока даже безлимитно) на https://www.minimax.io/audio/music Или послушайте сгенерированные в новой нейросети треки. Нейросеть опенсорсная, её можно установить и генерировать треки на своём оборудовании.

Обновилась Suno Studio, из новинок: - добавили автоматизацию параметров (изменение параметров по времени) - добавили различных плагинов: reverb, compressor, distortion, gate и другие. - можно писать MIDI и озвучивать их встроенным в Suno инструментом На странице Youtube собраны обучающие видео, чтобы ознакомиться в деталях с новыми функциями.

#humor

С середины сентября Spotify начнёт размечать свой каталог музыки на ИИ-персоны и живых артистов. При этом ИИ-персонами будут размечаться именно виртуальные (несуществующие) персонажи вроде Gorillaz, Glukoza, Hatsune Miku и т.п., способ создания музыки не будет учитываться. Указать, что у вас ИИ-персона можно самостоятельно через кабинет артиста. Под принудительную разметку рискуют попасть те, кто использует фотореалистичные изображения артистов. Исполнители с меткой не будут попадать в рекомендации и плейлисты от Spotify. Тем, кто не хочет получить метку имеет смысл заменить или удалить фото виртуального артиста, в т.ч. не использовать фотореалистичные изображения вашего виртуального артиста на обложках релизов.

Suno с 3-го сентября ограничивает количество скачиваний треков - 20 скачиваний на Pro тарифе, 60 на Premier. Т.е. вы сможете генерировать 500 треков (на Pro), но скачать (и использовать в коммерческих целях) только 20. Остальные 480 вам останутся недоступными, легально вы их сможете послушать только в Suno и поделиться только через Suno. Стоимость трека на тарифе Pro получается поднялась в 25 раз, до 40 центов за трек. На Premier, что странно, на скачивание есть лимит, а если трек открыть в Studio, то лимит пропадает, через Studio уже можно скачивать без ограничений. Также Suno проанонсировала скорый выход новых (легальных) моделей (да, во множественном числе). Ждём. А вы что будете делать? 20 скачек вам достаточно? Будете апгрейдиться на Premier?

Suno планирует в ближайшее время выкатить функционал записывания водяных знаков на сгенерированных треках. Система, насколько понятно из описания, будет состоять из двух элементов: водяной знак прописывается неслышимую часть трека (что в целом, при желании можно удалить) и слепок аудио-файла будет храниться на стороне Suno (система аналогичная Content ID). Плюсов такого функционала я не нашел. А вот те минусы, которые сходу пришли на ум: - тем, кто генерит треки на бесплатном тарифе больше не сможет выкладывать треки на стриминги (ну или роялти за них будет получать Suno, а не вы) - принудительная авторазметка трека как ИИ, сейчас она добровольная (это приводит пока только к тому, что Tidal снимает монетизацию и Deezer удаляет из рекомендаций, но что будет дальше?) - потенциально Suno в связи с тем, что проиграла дело GEMA (Sony и UMG на подходе), может поменять лицензионное соглашение на уже выпущенные треки (в т.ч. возможно снятие с площадок, перераспределение роялти и т.п.)

Кион Музыка (бывшая МТС Музыка) у себя на площадке постаралась удалить ИИ-треки из своего чарта, который раньше рассчитывался по количеству слушателей. Теперь заявляется, что чарт будет искусственным образом модерироваться и туда не будут пускать ИИ-исполнителей. При этом посмотреть реальный чарт (который отображает все популярные треки на платформе) пропала. Сервис не использует собственную разметку, а использует существующую автоматическую разметку от создателя дополнения Slopless. Заявлено, что точность такой разметки составляет 83%. PS: При этом в новом чарте трек "Шадэ" всё ещё на первом месте.

Запустился российский стриминг-сервис для нейро-музыкантов - AI Play. Можно закачивать свою музыку, согласившись с лицензионным соглашением и заполня простую форму модерации. Сервис обещает платить авторам треков роялти от платной подписки, из расчёта 70% от чистого дохода сервиса. Для слушателей есть аналог "Моей волны", подборок треков под настроения и жанры, есть чарт популярных на платформе треков. Не хватает только дизлайка на исполнителе и треках. Есть мобильное приложение (пока только для Android).

Компания Suno проиграла в немецком суде агентству по управлению авторскими правами GEMA. Доказано, что нейросеть обучалась на лицензионных материалах правообладателей без соответствующего разрешения (в Германии нет такого понятия как "fair use"). Компанию обязали выплатить компенсацию правообладателям (точная сумма будет ещё согласовываться) и запретить использование нейросети, которая использует нелицензионный материал из каталога GEMA (или заключать дополнительно письменное соглашение о лицензировании).

Закончился июль - самое время вспомнить все топовые нейро-треки прошедшего месяца и послушать наш плейлист: 💜 Слушать в ВК Музыке 🗯 Слушать в Яндекс Музыке PS: Также стартовал сбор в плейлист августа.

Обновился видеогенератор Seedance, вышла версия 2.5. Из обновлений: - одним промптом можно генерировать видео длительностью до 30 секунд и можно экстендить до 3-х минут - разрешение генерации до 4к - до 50 референсов (фото, видео, аудио) - добавили редактирование фрагментов видео - ну и в целом качество подросло (консистентность, логичность движений, детализация и т.п.). Минусы тоже есть: стоимость на генерацию на 50% дороже предыдущей модели (примерно $0.7 за секунду видео в 1080p). Попробовать можно на этой странице, примеры генераций можно глянуть в Twitter.

Обновилась музыкальная нейросеть от Google - Flow Music, добавили модель Lyria 3.5 (прошлая 3 Pro тоже доступна для генерации). Из изменений: - инструменты стали звучать менее пластиково, особенно гитарки порадовали, стали звучать лучше (реалистичнее, приятнее на слух); - сильно улучшили стерео панорамирование инструментов, на слух можно легко отделить один инструмент от другого; - вокал стал заметно более эмоциональным, разнообразнее; - сильно улучшилась ситуация с произношением и ударениями в русском языке (раньше приходилось сильно попариться, чтобы все ударения были на месте); - улучшили разнообразие аранжировок (до Suno пока далековато, но уже вполне юзабельно). Примеры генераций можно послушать в плейлисте на сайте. PS: с ударениями на русском улучшилась ситуация не сильно.

Появился зарубежный сайт, который собирает информацию про ИИ-музыку - Soulless Music. Сайт делает рейтинг исполнителей, даёт прочекать музыку на ИИ, собирает мнения реальных музыкантов, статьи и исследования, подкасты и т.п. В базе сервиса пока 206 нейро-музыкантов, интересно, что они указывают и вероятность насколько тот или иной артист является ИИ. Также они подсчитывают потенциальный доход артистов. Оказывается самый топовый исполнитель получает $1.5 миллиона в год только со Spotify.

Появился бесплатный сервис для быстрого мастеринга Suno треков - PureWavs. Добавляет небольшую эквализацию, атаку, сатурацию и подрезает шумы. Есть готовые пресеты под жанры rock, dance, lo-fi. Вокал в треках после обработки звучит чище и более реалистично, удаляется тот самый "песок".

Сбер обновил свой музыкальный генератор и поменял его название. Теперь это не SymFormer, а Сингл. Также теперь под запретом коммерческое использование генераций, хотя по новому закону сервис теперь обучает нейронку на каталоге Звука абсолютно легально. На удивление новый генератор имеет вполне неплохое качество генераций. Особенно инструментала, вокал же, кажется, примерно на уровне Suno 3.5 или чуть похуже, что тоже вполне себе норм. Никаких функций кроме самой генерации нет, да и в случае отсутствия коммерческого использования в общем-то они и не нужны. В сервисе представлены две модели (F и X), пока не разобрался чем различаются. Примеры генераций можно послушать на главной Сингла или уже после регистрации на странице Библиотеки. Для подписчиков СберПрайма пользование сервисом можно бесплатно без ограничений.

На основе статей и инструкций с канала "ИИ и Музыка" была выпущена настоящая книга! "ИИ генерация музыки". Приобрести можно в электронном виде (280 руб.) и в печатном (1572 руб.) Собрал всё в кучу, систематизировал, дописал и оформил наш подписчик и автор Барсук-Бэнд - Игорь Барсуков. Если будут дополнения или правки по содержанию - напишите ему. Всегда хотели делать музыку? Современные ИИ технологии позволяют сделать песню своими руками, и для этого нужны не музыкальные инструменты, а только интернет. Данное руководство описывает три способа сделать песню: пять минут чтения, пара нажатий кнопок и вы получите трек на нужную вам тематику, причём бесплатно. Ещё час на чтение, и сможете сделать песню буквально так, как вы её видите. А если прочитаете всю книгу, то сможете довести трек до совершенства хита, и даже выпустить на стриминги.

Появился локальный чекер (запускается на вашем компьютере), который выявляет ИИ-генерации треков - AI Track Inspector. Suno определяет достаточно точно. Из плюсов - показывает на таймлайне где именно особенно заметна генерация (плохо, что без возможности прослушать фрагмент). Автор чекера - TG-канал SoundLife, есть также версия для MacOS.