Сообщество - Создание музыки

Создание музыки

32 поста 70 подписчиков

Популярные теги в сообществе:

174

Преврати собственный голос в любой инструмент или сэмпл!

Всем привет, сегодня я расскажу вам про нейросеть Musicfy, а точнее про режим Instrumentals, это будет первая часть серии статей про эту нейросеть, погнали!

Преврати собственный голос в любой инструмент или сэмпл! Гайд, Музыка, Инструкция, Электронная музыка, Искусственный интеллект, Нейронные сети, Stable Diffusion, Видео, Длиннопост

Главная страница

На сайте есть много вкладок для создания сэмплов и переработки голоса:

- Artist Vocals - переделать тембр голоса под женский или мужской, изменить тон

- Parody Vocals - что-то наподобие нейросети uberduck, только здесь вы можете превратиться во множество персонажей с помощью собственного голоса, а не текстового запроса

- MusicAI - аналог нейросетки AudioCraft, про которую я рассказывал в прошлых постах, позволяет генерировать музыку по текстовому запросу

-Instrumentals

Преврати собственный голос в любой инструмент или сэмпл! Гайд, Музыка, Инструкция, Электронная музыка, Искусственный интеллект, Нейронные сети, Stable Diffusion, Видео, Длиннопост

Скриншот сайта

На последней вкладке мы и остановимся с вами подробнее.

Скажу сразу, для получения хороших результатов рекомендуется иметь как минимум базовые навыки пения/битбоксинга.

На самом деле всё примитивно понятно:

- Окно Source - вставляем/перетаскиваем наш заранее подготовленный или записанный сэмпл(ниже я поделюсь цепочкой обработок для тех, кто записывает дома. Это поможет сделать запись чище). Лимит - 15 MB

- Start Recording - записать вокальный кусок прямо на сайте(не рекомендую)

- YouTube Link - вставить ссылку на исходник из Ютуба

Перейдём ко вкладкам в правой части:

- Select an Instrument - выбираем инструмент, который хотим получить(в платной подписке можно обучать собственные модели, но рассмотрим варианты, доступные для всех)

- Remove Instrumental - кнопка для тех, кто хочет использовать неочищенный кусок с инструменталом/битом. Изолирует голос

- Quality - качество результата, соответственно

- Remix - старт генерации

Преврати собственный голос в любой инструмент или сэмпл! Гайд, Музыка, Инструкция, Электронная музыка, Искусственный интеллект, Нейронные сети, Stable Diffusion, Видео, Длиннопост

Выбор модели

А теперь покажу что получилось у меня, использовал я небезызвестный вокальный сэмпл, предварительно изолировав голос в AI Splitter и сделав довольно простую цепочку обработок:

Цепь обработок:

Преврати собственный голос в любой инструмент или сэмпл! Гайд, Музыка, Инструкция, Электронная музыка, Искусственный интеллект, Нейронные сети, Stable Diffusion, Видео, Длиннопост

Избавляемся от остатков шума, подробнее про этот плагин я рассказывал в одном из прошлых постов

Преврати собственный голос в любой инструмент или сэмпл! Гайд, Музыка, Инструкция, Электронная музыка, Искусственный интеллект, Нейронные сети, Stable Diffusion, Видео, Длиннопост

Waves Clarity, ещё разок убираем шумы

Преврати собственный голос в любой инструмент или сэмпл! Гайд, Музыка, Инструкция, Электронная музыка, Искусственный интеллект, Нейронные сети, Stable Diffusion, Видео, Длиннопост

Убираем ненужный низ и гул с помощью FabFilter Pro-Q3

Преврати собственный голос в любой инструмент или сэмпл! Гайд, Музыка, Инструкция, Электронная музыка, Искусственный интеллект, Нейронные сети, Stable Diffusion, Видео, Длиннопост

Многополосная компрессия с помощью Xfer OTT

Преврати собственный голос в любой инструмент или сэмпл! Гайд, Музыка, Инструкция, Электронная музыка, Искусственный интеллект, Нейронные сети, Stable Diffusion, Видео, Длиннопост

FabFilter Pro-C2 - ещё немного ужимаем вокал

Преврати собственный голос в любой инструмент или сэмпл! Гайд, Музыка, Инструкция, Электронная музыка, Искусственный интеллект, Нейронные сети, Stable Diffusion, Видео, Длиннопост

FabFilter Pro-DS - убираем резонансы на шипящих

Преврати собственный голос в любой инструмент или сэмпл! Гайд, Музыка, Инструкция, Электронная музыка, Искусственный интеллект, Нейронные сети, Stable Diffusion, Видео, Длиннопост

Вишенка на торте: Fresh Air для нежного воздуха

P.S. Все плагины можете прогуглить и скачать по первой ссылке с торрентов, только тсс))

Закидываем сэмпл, хочу получить из этого саксофон, выбираю модель и вуаля:

Как итог получаем очень качественный сэмпл на основе голоса, из которого можно сделать инструментал, трек или саунд-дизайн для вашего проекта.

Очень крутой инструмент!

Ставьте плюсы, в следующих постах покажу и расскажу как работают другие вкладки.

Интересна тема генерации музыки с помощью нейросетей? Добро пожаловать в Нейро-Звук🔉

Понравилось? Тогда милости прошу в мой телеграм канал, буду ждать тебя там!🔥

Показать полностью 10 2
12

Как превратить известную мелодию в трек с помощью нейросети!

Как превратить известную мелодию в трек с помощью нейросети! Искусственный интеллект, Нейронные сети, Stable Diffusion, Арты нейросетей, Арт, Видео, Длиннопост

Создавать мы будем в AudioCraft. Как её поставить и как ей пользоваться я рассказал в предыдущем посте.

Всего три шага:
1. Закидываем мелодию во вкладку AudioGen

2. Пишем текстовый запрос

3. Ждём и слушаем результат!

Вот что получилось у меня создать из одной очень известной многим мелодии и пары рингтонов, промпты написал ниже:

Prompt: House music, dance beat, catchy bass, guitar lead solo

Prompt: retrowave, synthwave, dance beat, groovy bass, piano synth

Prompt: House music, dance beat, catchy bass, guitar lead solo

Интересна тема генерации музыки с помощью нейросетей? Добро пожаловать в Нейро-Звук🔉

Понравилось? Тогда милости прошу в мой телеграм канал, буду ждать тебя там!🔥

Показать полностью 3
569

Новый бесплатный AI плагин для удаления шума

Новый бесплатный AI плагин для удаления шума Искусственный интеллект, Звук, Нейронные сети, Монтаж, Видеомонтаж, Видео, Гайд, Плагин, Обработка звука, Технологии, Электронная музыка, Инновации, Длиннопост

Встречайте новый VST плагин для избавления от шума и реверберации - GOYO от Supertone AI. Существует много плагинов для удаления шума и восстановления аудио, но я загрузил его из любопытства. В результате мне он понравился гораздо больше, чем я ожидал, и я хотел поделиться им с вами тоже: это легкий, быстродействующий инструмент для удаления шума и реверберации в режиме реального времени для видеомонтажа, музыкального производства, записи голоса и т.д.

Скачать его вы можете по ссылке: https://goyo.app/

Ниже продемонстрированы примеры работы плагина:

Он удаляет нежелательный шум, шипение, гул, разговоры, трафик (реки!), ветер, удары микрофона, строительные работы, комнатную реверберацию и эхо из записей с удивительным качеством. Это, вероятно, мой любимый способ удаления шума из записей, который делает ваш голос более четким.

В плагине всего три крутилки, справится даже чайник:

Ambience - уровень шума в dB

Voice - уровень голоса в dB

Voice Reverb - уровень реверберации(эха) в dB

Я очень доволен его работой, довольно полезный и универсальный инструмент для монтажа

Интересна тема генерации музыки с помощью нейросетей? Добро пожаловать в Нейро-Звук🔉

Понравилось? Тогда милости прошу в мой телеграм канал, буду ждать тебя там!🔥

Показать полностью 2
4

Futureverse представляет JEN-1: новую революционную нейросеть для преобразования текста в музыку в реальном времени!

Futureverse представляет JEN-1: новую революционную нейросеть для преобразования текста в музыку в реальном времени! Искусственный интеллект, Нейронные сети, Саунд-дизайн, Инновации, Технологии

Вы можете ввести текст, а JEN-1 превратит его в музыку, которую вы сможете услышать сразу же. Это открывает новые возможности для создания музыки и может быть полезно для музыкантов, продюсеров и даже любителей музыки. JEN-1 - это только начало, и мы можем ожидать еще больше инноваций в области искусственного интеллекта в будущем.

Послушать примеры и сравнить с другими моделями вы можете здесь:

https://www.futureverse.com/research/jen/demos/jen1
Интересна тема генерации музыки с помощью нейросетей? Добро пожаловать в источник - Нейро-Звук🔉

Показать полностью
70

Новая нейросеть для саунд-дизайна

Друзья, как и обещал - обзор на Portable-версию нейросети AudioCraft Plus!

Новая нейросеть для саунд-дизайна Искусственный интеллект, Нейронные сети, Гайд, Музыка, Программа, Технологии, Инновации, Электронная музыка, Изобретения, Gamedev, Саунд-дизайн, Саундтрек, Битмейкинг, Аудио, Видео, Длиннопост

В прошлом посте мы разобрались, для каких задач подходит AudioCraft, сгенерировали пару примеров и показали промпты. Давайте же к обзору! Предупрежу, для полноценной работы программы требуется видеокарта NVIDIA.

Для тех, кто не в курсе, эта нейросеть позволяет создавать музыкальные композиции, сэмплы и даже отдельные звуки по текстовому запросу, основываясь на заданных параметрах и стилях.

Новая нейросеть для саунд-дизайна Искусственный интеллект, Нейронные сети, Гайд, Музыка, Программа, Технологии, Инновации, Электронная музыка, Изобретения, Gamedev, Саунд-дизайн, Саундтрек, Битмейкинг, Аудио, Видео, Длиннопост

В основе лежит версия AudioCraft 2.0. В отличие от оригинала, данная версия позволяет генерировать треки длинной более 30 секунд, и имеет более детальный контроль над процессом генерации.

В AudioCraft есть две основные вкладки, соответственно два способа генерации: по текстовому запросу и на основе вашего сэмпла(мелодии)

Новая нейросеть для саунд-дизайна Искусственный интеллект, Нейронные сети, Гайд, Музыка, Программа, Технологии, Инновации, Электронная музыка, Изобретения, Gamedev, Саунд-дизайн, Саундтрек, Битмейкинг, Аудио, Видео, Длиннопост

В поле Global Prompt будет находится ваш текстовый запрос, вот несколько примеров:

Prompt: 80s electronic track with melodic synthesizers, catchy beat and groovy bass

Prompt: smooth jazz, with a saxophone solo, piano chords, snare full drums

Prompt: 182 bpm, pop punk, vintage guitars, fender telecaster, pop chord progression, dark, sad melody

Замечу, что запрос нужно писать на английском языке!

Есть так же и другие составляющие:

BPM, Key, Scale - темп и тональность трека

Prompts - количество запросов

Input text - отдельный запрос для отдельно взятого отрезка

Repeat - количество повторов

Calculate Timings - рассчитать продолжительность одного отрезка

Overlap - длительность в секундах для перекрытия одного отрезка другим.

В настройках(Settings) во вкладке Model можно выбрать модель, которую вы хотите использовать. Если у вас больше 8 Гб видеопамяти, то выбирайте large, так как она даст лучшее звучание. Если у вас 6-8 - то выбирайте medium. Ну а если меньше 6 - то small.

Скачать AudioCraft Portable

В следующем посте разберём генерацию на основе ваших сэмплов, до новых встреч!

Интересна тема генерации музыки с помощью нейросетей? Добро пожаловать в Нейро-Звук🔉

Понравилось? Тогда милости прошу в мой телеграм канал, буду ждать тебя там!🔥

Показать полностью 3 3
596

Теперь сгенерировать новый звук проще, чем искать подходящий!

Теперь сгенерировать новый звук проще, чем искать подходящий! Гайд, Нейронные сети, Искусственный интеллект, Саунд-дизайн, Саундтрек, Музыка, Битмейкинг, Технологии, Инновации, Gamedev, Видео, Длиннопост

В AudioCraft во вкладке AudioGen можно сгенерировать звук для вашей игры. Более того, эта нейросеть подходит почти для любых целей, будто монтаж видео, реклама или саунд-дизайн. Ниже я расскажу, как его установить!

Вот простой текстовый запрос для генерации свиста: man whisling melody

Может быть вам нужно мяуканье кошек, тогда запрос будет выглядеть так: cats play and meow

Нужны поющие птички для вашей мобильной игры? Пожалуйста: rainforest birds chirping

Этот инструмент подходит для решения огромного количества задач, связанных с саунд дизайном ваших игр и сцен, что упрощает процесс создания продукта.

Ловите инструкцию по установке нейросетки AudioCraft:
Чтобы установить AudioCraft, выполните следующее:

- Рекомендуется установить PyTorch перед установкой

- Не запускайте это, если у вас уже установлен PyTorch.

pip install 'torch>=2.0'

-Затем перейдите к одному из следующих вариантов

pip install -U audiocraft - стабильный релиз

pip install -U git+https://git@github.com/GrandaddyShmax/audiocraft_plus#egg=audiocraft - актуальная версия

pip install -e . - или, если вы клонировали репозиторий локально (обязательно, если хотите тренировать).

Также рекомендуется установить ffmpeg, либо через систему, либо через Anaconda:

sudo apt-get install ffmpeg

Или если вы используете Anaconda или Miniconda

conda install 'ffmpeg<5' -c conda-forge

Ставьте плюсик и сделаю пост с видео-установкой AudioCraft!

Интересна тема генерации музыки с помощью нейросетей? Добро пожаловать в Нейро-Звук🔉

Показать полностью 1 3
17

Трек в стиле Dance with the Dead с использованием нейросети!

Всем привет, я Вандер и я в пишу музыку уже 5 лет. Сейчас покажу поэтапно процесс создания такой композиции.

1. Генерируем основной сэмпл в AudioCraft

Группа Dance with the Dead ассоциируется у меня с ретровейвом, стилистикой 80-х, поэтому делаем аналогичный текстовый запрос:

Prompt: An 80s driving pop song with heavy drums and synth pads in the background

Трек в стиле Dance with the Dead с использованием нейросети! Нейронные сети, Искусственный интеллект, Музыка, Retrowave, Synthwave, Dance With The Dead, Электронная музыка, Ретро, Рок, Гайд, Видео, Вертикальное видео, Длиннопост

2. Используя Mikrotakt извлекаем из сэмпла пэды, бас и драм-партию

Этот сервис помогает вытащить конкретный кусок из любого трека и разделить его на основные составляющие. В нашем сэмпле бас получился очень жидким и его почти не слышно, поэтому мы возьмём оттуда всё остальное

Трек в стиле Dance with the Dead с использованием нейросети! Нейронные сети, Искусственный интеллект, Музыка, Retrowave, Synthwave, Dance With The Dead, Электронная музыка, Ретро, Рок, Гайд, Видео, Вертикальное видео, Длиннопост

4. Добавляем более красочный аналоговый бас, гитары и пэды

Для этого я использую крутой сэмпл пак от Vengeance - Synthwave Essentials, откуда беру петли гитары и ваншоты баса и пэдов. Добавляю ритмическую гитару, используя плагин Ample Guitar Hellrazer.

Трек в стиле Dance with the Dead с использованием нейросети! Нейронные сети, Искусственный интеллект, Музыка, Retrowave, Synthwave, Dance With The Dead, Электронная музыка, Ретро, Рок, Гайд, Видео, Вертикальное видео, Длиннопост

5. Вешаем компрессор на драм-партию и на мастер канал

Уплотняем наши барабаны, чтобы они хорошо вписались в микс. Я использую The Glue и Virtual Tape Machines.

Трек в стиле Dance with the Dead с использованием нейросети! Нейронные сети, Искусственный интеллект, Музыка, Retrowave, Synthwave, Dance With The Dead, Электронная музыка, Ретро, Рок, Гайд, Видео, Вертикальное видео, Длиннопост

6. Слушаем и кайфуем!

Понравилось? Тогда милости прошу в мой телеграм канал, буду ждать тебя там!🔥

Интересна тема генерации музыки с помощью нейросетей, добро пожаловать в Нейро-Звук🔉

Показать полностью 4
Отличная работа, все прочитано!