Дата с Васей

2023-05-05 15:06:48 Если есть вопросы по обучению/синтезу голоса или хотите поделиться своей моделькой - пишите @vasily_ryazanov Открыть/Комментировать

2023-05-04 21:33:08 А еще готов код для обучения модели

Colab ноутбук: https://colab.research.google.com/drive/1h-8gB01_uy9GR5grXYDh2gCxmOYaJF0K
Алгоритм:
1. Готовим датасет (например собираем образцы голоса в 1 длинный wav файл)
2. Загружаем его на гугл диск.
3. Запускаем колаб ноутбук (есть некоторые инструкции по названию и пути для датасета)
4. Код предобработает файлы и запустит модель на обучение. Будет периодически сохранять чекпоинты (промежуточные версии модели)

И более подробная инструкция на бусти Открыть/Комментировать

2023-05-04 18:22:55 Обновленный colab-ноутбук для синтеза голоса

https://colab.research.google.com/drive/1OtK7dm16N3zmUCfGXRMhp7RDvmnGYk3g?usp=sharing#scrollTo=b-4eVF_7T_YF

Обновления:
1. Использование свежего форка (so-vits-svc-fork)
2. Можно подключить модель со своего гугл диска или как прежде закинуть ссылку на архив
3. Работает гораздо быстрее и стабильнее (особенно часть с установкой библиотек)

(вот-вот будет ноутбук для обучения своей модели) Открыть/Комментировать

2023-04-30 20:24:34 А теперь про то, как сделать кавер песни:

1. Находим песню которая нам нравится (например на ютубе и скачиваем -> mp3)
2. Заходим на https://x-minus.pro/ai - этот сайт бесплатно отделит вокал от музыки и вы сможете все это скачать
3. Далее запускам замену голоса в so-vits-svc (писал выше на пару сообщений, или на бусти)
4. Обработанный голос будет той же длительности что и исходный, будет повторять мелодию. Его накладываем поверх на инструментальную часть музыки. Если есть premiere/audition/другой аудиософт, то желательно почистить шумы/reverb и будет топ Открыть/Комментировать

2023-04-29 15:58:29 На huggingface нашел репозиторий куда выложили кучу других языковых моделей.
В основном английские, но есть окси

https://huggingface.co/QuickWick/Music-AI-Voices/tree/main Открыть/Комментировать

2023-04-29 14:15:19 Пофиксил немного ноутбук, теперь не возникает ошибки pyworld/numpy

https://colab.research.google.com/drive/109HCgwHFbkemU82n4CSZoC79ZNHDIV22?usp=sharing Открыть/Комментировать

2023-04-29 01:07:19 Чуть более подробно про замену голоса расписал в своем бусти
https://boosty.to/vasily.ai

(а еще там часто появляются другие гайды) Открыть/Комментировать

2023-04-24 22:23:35 Вот сделал морген feat. eminem - lose yourself Открыть/Комментировать

2023-04-24 22:16:42 Крутая нейронка, чтобы менять голос.

Называется so-vits-svc (гитхаб, закрылся, но есть форки)

Работает так: берете звук голоса, который нужно поменять (wav/mp3). Далее открываете колаб, запускаете все ячейки. В конце нужно выбрать модель, скидываю ниже для голоса моргенштерна (в ноутбуке также около 10 английских селебрети). Вообще можно обучить любой голос, но это требует немного времени.

Завтра будут подробные туториалы.

Модель Моргена (вставлять в код): https://mega.nz/file/xqRiCLxa#YBRdvxoqh9lIvNW8kjWhh8zMKvq3EnYwiHjidG2DOkQ (автор @lnhly)
Колаб ноутбук: https://colab.research.google.com/drive/109HCgwHFbkemU82n4CSZoC79ZNHDIV22?usp=sharing Открыть/Комментировать

2023-04-24 13:22:36 Твое лицо, когда сбер представил своего чатбота и назвал его ГигаЧат Открыть/Комментировать