Автор Тема: Создание музыки с использованием нейросетей  (Прочитано 1350 раз)

0 Пользователей и 1 Гость просматривают эту тему.

Оффлайн Сергей Горбачевский

  • Administrator
  • Знаменитый писатель
  • *****
  • Сообщений: 84594
  • Пол: Мужской
  • Есть вопросы? Пишите в личку
    • Награды


Оффлайн Сергей Горбачевский

  • Administrator
  • Знаменитый писатель
  • *****
  • Сообщений: 84594
  • Пол: Мужской
  • Есть вопросы? Пишите в личку
    • Награды
Re: Создание музыки с использованием нейросетей
« Ответ #91 : 22, Декабря 2024, Воскресенье, 14:07:56 pm »


Оффлайн Сергей Горбачевский

  • Administrator
  • Знаменитый писатель
  • *****
  • Сообщений: 84594
  • Пол: Мужской
  • Есть вопросы? Пишите в личку
    • Награды
Re: Создание музыки с использованием нейросетей
« Ответ #92 : 11, Января 2025, Суббота, 09:27:07 am »
Не все в курсе, что первых "исполнителей" выпустил не Suno, а Smule и было это в далёком 2012 году. Туда уже тоже прикрутили ИИ, но конкуренции "живым" исполнителям смульщики не составили, насколько я знаю. Это течение живо и плодовито и сейчас. Они представляют конкуренцию сунистам в борьбе за слушателей.

Smule была основана в 2008 году в Пало-Альто (Калифорния) двумя выпускниками Стэнфордского университета — Джеффом Смитом (Jeff Smith), инженером-программистом, и доктором геофизики Пранавом Мистри (Pranav Mistry). Их цель заключалась в создании приложений, которые соединяют музыку и социальные взаимодействия.

Первыми продуктами Smule были довольно странные музыкальные приложения, такие как Ocarina (цифровая окарина, где пользователи могли играть, используя дыхание) и I Am T-Pain (приложение для автоматического изменения голоса).

Настоящий успех пришёл только с приложением Smule Sing!, выпущенным в 2012 году, которое стало хитом благодаря уникальному формату караоке с элементами соцсети. Оно быстро приобрело популярность за счёт возможности петь с друзьями и артистами.

В последующие годы Smule обновила платформу, добавив видео-караоке и расширив возможности записи. В 2015 году компания провела ребрендинг, убрав из названия слово Sing! и оставив просто Smule. Сегодня Smule объединяет миллионы пользователей по всему миру, создавая крупнейшее сообщество любителей караоке.

В Smule также добавили искусственный интеллект. Вот ключевые примеры использования ИИ в Smule:

1. Обработка и улучшение голоса

- Автотюн и коррекция высоты тона: ИИ анализирует вокал пользователя и автоматически подстраивает его под правильные ноты, улучшая звучание и создавая эффект профессиональной записи.

- Реверберация и другие эффекты: Используя алгоритмы машинного обучения, Smule предлагает адаптивные звуковые эффекты, которые подстраиваются под стиль и тембр голоса.

2. Вокальный анализ и синхронизация

- Синхронизация аудио и видео: ИИ помогает автоматически синхронизировать голос с музыкальной дорожкой и видеозаписью, создавая профессионально выглядящие видео без ручного редактирования.

- Сопровождение дуэтов и групповых выступлений: При пении с другими пользователями или с предзаписанными артистами ИИ обрабатывает данные о темпе и вокале, чтобы минимизировать задержку и создать гармоничное исполнение.

3. Рекомендательные системы

- Персонализация контента: На основе предпочтений пользователей ИИ предлагает новые песни, партнеров для дуэтов и интересные выступления. Рекомендации формируются с учётом предпочтений в жанрах и популярности контента.

4. Виртуальные дуэты с артистами

- Смарт-добавление эффектов к предварительно записанным трекам: Smule использует технологии ИИ для создания реалистичных виртуальных дуэтов с известными певцами. ИИ анализирует вокальные линии и автоматически регулирует эффекты для плавного слияния голосов.

5. Улучшение видео и фильтры

- Реалистичные визуальные эффекты: ИИ применяет фильтры и визуальные эффекты, которые адаптируются к движениям пользователя и ритму песни.

Эти технологии делают Smule не просто караоке-приложением, а полноценной платформой для создания и редактирования музыкальных видеозаписей с минимальными усилиями со стороны пользователя.

С момента основания Smule привлекла значительные инвестиции. В 2017 году компания получила $54 млн в раунде финансирования, возглавляемом китайской компанией Tencent, а также от существующих инвесторов, таких как Adams Street Partners, Bessemer Ventures, Floodgate, Franklin Templeton и Shasta Ventures.

Около 90% прибыли компании поступает от подписок на приложение. Пользователи могут выбрать между бесплатным аккаунтом с ограниченным функционалом и VIP-подпиской, предоставляющей полный доступ к песням и дополнительным эффектам для голоса.

Оффлайн Сергей Горбачевский

  • Administrator
  • Знаменитый писатель
  • *****
  • Сообщений: 84594
  • Пол: Мужской
  • Есть вопросы? Пишите в личку
    • Награды

Оффлайн Сергей Горбачевский

  • Administrator
  • Знаменитый писатель
  • *****
  • Сообщений: 84594
  • Пол: Мужской
  • Есть вопросы? Пишите в личку
    • Награды
Re: Создание музыки с использованием нейросетей
« Ответ #94 : 29, Января 2025, Среда, 18:58:35 pm »
Deezer: 10 000 песен, генерируемых искусственным интеллектом каждый день

Ежедневно на Deezer публикуется около 10 000 песен, созданных искусственным интеллектом , признается платформа . Это около десяти процентов новых треков, которые появляются там каждый день. Deezer теперь предлагает инструмент , который можно использовать для идентификации музыки, созданной искусственным интеллектом. Это призвано обеспечить большую прозрачность в музыкальной индустрии. В прошлом Deezer был менее ясен в этой теме, чем его конкурент по потоковому вещанию Spotify. Он объявил , что менее одного процента выплаченных гонораров было связано с подозрением на мошенничество в области музыки с использованием ИИ.

«Генераторный ИИ может положительно повлиять на создание и потребление музыки, но его использование должно осуществляться с ответственностью и осторожностью», — объясняет Алексис Лантернье , генеральный директор Deezer, в пресс-релизе. Инструмент распознавания будет расширен, чтобы контент, созданный ИИ, можно было распознавать даже без обучающих данных. Deezer планирует превратить его в «лучший инструмент обнаружения искусственного интеллекта на рынке».

«Поскольку искусственный интеллект все больше разрушает музыкальную экосистему, а растущее количество ИИ-контента наводняет потоковые платформы, такие как Deezer, мы гордимся тем, что разработали инновационный инструмент, который повышает прозрачность как для создателей, так и для поклонников», — объясняет Алексис далее. Они также рассматривают возможность маркировки музыки, созданной искусственным интеллектом, как таковой.

Оффлайн Сергей Горбачевский

  • Administrator
  • Знаменитый писатель
  • *****
  • Сообщений: 84594
  • Пол: Мужской
  • Есть вопросы? Пишите в личку
    • Награды
Re: Создание музыки с использованием нейросетей
« Ответ #95 : 30, Января 2025, Четверг, 18:35:02 pm »
Бюро авторских прав США утверждает, что контент, созданный искусственным интеллектом, может быть защищен авторским правом, если человек вносит в него свой вклад или редактирует его. Просмотр ссылок доступен только зарегистрированным пользователям

Оффлайн Сергей Горбачевский

  • Administrator
  • Знаменитый писатель
  • *****
  • Сообщений: 84594
  • Пол: Мужской
  • Есть вопросы? Пишите в личку
    • Награды
Re: Создание музыки с использованием нейросетей
« Ответ #96 : 31, Января 2025, Пятница, 17:40:05 pm »
Появился ещё один музыкальный ИИ-сервис - Просмотр ссылок доступен только зарегистрированным пользователям , ссылочка на Просмотр ссылок доступен только зарегистрированным пользователям

Введение в риффузию

Riffusion — это новый инструмент, пробуждающий творца в каждом из нас.

Мы обучаем генеративные музыкальные модели и помещаем их в продукты, которые может использовать каждый. На Riffusion вы можете генерировать полноценные песни студийного качества, просто задавая нашим моделям идею, фразу или мелодию.

Подобно физическим инструментам, которые мы знаем и любим, мы стремимся создать инструмент, который позволяет любому человеку создавать музыку, а также позволяет достичь глубоких уровней мастерства, экспериментов и артистизма, которые заставляют нас возвращаться к этому снова и снова день за днем. Использование Riffusion — это больше, чем просто создание песни с помощью ИИ, это путешествие длиною в жизнь, которое является творческим актом.

То, что начиналось как проект страсти два года назад, теперь превратилось в платформу, которая позволяет каждому создавать музыку, которую он себе представляет. Наша небольшая, но сильная команда состоит из художников, исследователей и инженеров, которые верят в силу технологий, расширяющих границы человеческого творчества. Мы не могли бы быть более взволнованы, если бы вы присоединились к нам в этом путешествии и развивали свое собственное творчество с помощью Riffusion.

Оффлайн Сергей Горбачевский

  • Administrator
  • Знаменитый писатель
  • *****
  • Сообщений: 84594
  • Пол: Мужской
  • Есть вопросы? Пишите в личку
    • Награды
Re: Создание музыки с использованием нейросетей
« Ответ #97 : 02, Февраля 2025, Воскресенье, 08:09:32 am »
Потестил рефузион, неплохо генерит вокал и инструменты, но есть проблемы именно с русскими текстами, что делает этот ИИ пока бесполезным.

Оффлайн Сергей Горбачевский

  • Administrator
  • Знаменитый писатель
  • *****
  • Сообщений: 84594
  • Пол: Мужской
  • Есть вопросы? Пишите в личку
    • Награды
Re: Создание музыки с использованием нейросетей
« Ответ #98 : 03, Февраля 2025, Понедельник, 18:34:19 pm »
Появился музыкальный инструмент с открытым исходным кодом на основе искусственного интеллекта - YuE, который  является бесплатной альтернативой коммерческим сервисам, таким как Suno и Udio.

По словам разработчика Ruibin Yuan, система может создавать песни продолжительностью до пяти минут на разных языках и в разных музыкальных стилях. Под капотом YuE использует две отдельные модели AI — одна обрабатывает речь и генерацию музыки, а другая управляет дополнительными элементами песни. Пользователи могут настраивать свои творения, выбирая музыкальный стиль, настроение и тип голоса, а система может воспроизводить различные техники пения. Проект теперь Просмотр ссылок доступен только зарегистрированным пользователям на HuggingFace , а несколько примеров demo Просмотр ссылок доступен только зарегистрированным пользователям на GitHub . Юань говорит, что исследовательская работа, подробно описывающая технические аспекты YuE, в настоящее время находится в разработке.

Для развёртывания нужно иметь соответствующее железо - NVIDIA.

Оффлайн Сергей Горбачевский

  • Administrator
  • Знаменитый писатель
  • *****
  • Сообщений: 84594
  • Пол: Мужской
  • Есть вопросы? Пишите в личку
    • Награды
Re: Создание музыки с использованием нейросетей
« Ответ #99 : 11, Февраля 2025, Вторник, 10:22:16 am »
Благодаря нейросетям музыка становится такой же демократизированной, как фотография после смартфона. Индустрия либо приспособится, либо станет неактуальной.

Я помню как умирала фотопечать после довольно жирного десятилетия...