Нейросети и Блендер

2022-08-20 11:40:43 Открыта Beta Dream Studio — Стебель Диффузии в каждый дом!

Они нажали красную кнопку… DreamStudio — доступен каждому! 200 генераций при регистрации!

Проект будет развиваться в нечто большее: выбор сети, контролируемые параметры, инпеинтинг (возможжность изменять части изображений), галлерея. Со временем будут проявлять новые фичи!

https://beta.dreamstudio.ai

p.s.: на сайте проекта лежит неплохая инструкция по созданию запросов — prompt guide

Мишин Лернинг Нейроэстетика Открыть/Комментировать

2022-08-18 12:51:08 Тут разворачивается настоящий детектив, недавно буквально из тени вышел сервис Kaedim, предлагают 2D в 3D по одной картинке и что внутри AI алгоритм, при этом какой именно нигде не сказано. Судя по прайсу за генерации, самый дешевый в 239$, были шутки, что индусы вручную делают.
А сегодня в их дискорде много раскопали инфы, у них нет ML спецов хоть каких-либо известных, вся команда практически 3D генералисты. Плюс набирают в команду 3D художников, которые за 15 минут могут накидать модель.
В общем под шквалом вопросов они закрыли дискорд сервер, убрали часть прайса и чуть увеличили цену с 239 $ до 539 $ за месяц по самому минимальному тарифу.

Профы в 3D заметили, что многие детали похожи на быстрые скетчи, нежели на алгоритмы в AI реконструкции 3D. Да и особых артефактов нет.

Наблюдая в дискорде за всем процессом увидел ещё момент, после закрытия комментов в Discord, обычные пользователи нашли лазейки и создали ветку, где быстро организовали крутой ресерч по imageTO3D, какие есть сейчас решения, забавно. Сохранил их всех и поделюсь в отдельном посте. Открыть/Комментировать

2022-08-16 20:02:03 Совмещая Гиперлапс и ИИ арт

Malick.fr создал гиперлапс видео, таймлапс с движением и фиксации при движении объекта
А Manu.vision отвечал за ИИ арты, используя inpainting в Dalle 2 и Midjourney для фонов.

Для создания видео использовалось 1200 генерации для 1400 фоток, а вся работа было проделана за сутки.

Представьте 1200 артов за сутки, где каждый арт имеет ценность.

Пока где-то отменяют ИИ арты, в других местах творцы ускоряют свой процесс работы.

Видео получилось шикарным! Открыть/Комментировать

2022-08-16 01:01:21 Новости про Stable Diffusion

Попал на открытые часы и узнал много нового и интересного:

- В команде появилось много UI/UX дизайнеров, значит вскоре будет сайт и новые фичи

- Будет возможен файнтюнинг модели, именно поэтому в команде теперь KaliYuga известная по файнтюну Disco Diffusion моделями Watercolor и PixelArt, будут обучающие материалы.

- Любители AI музыки теперь могут радоваться. Буквально через месяц планируется модель для музыки.

- Дискорд бот сейчас урезали, теперь нельзя генерировать раздельно картинки больше одной, нельзя ставить больше 50 шагов и многое другое. А это значит, скоро доступ будет открыт еще большему числу пользователей.

- Тем временем на команду Stability и даже обычных AI ресерчеров налетела толпа злых художников, отменили твиттер аккаунт Stable Diffusion, досталось и далеким от Stable.

Запрос в SD для артов - a flower in shape of flying alien mountains, by pieter bruegel the elder, by wangechi mutu, instax, shot on 70 mm, vintage, 8 k resolution, volumetric light, rtx light, octane render -H 704 -W 1024 -C 13.0 Открыть/Комментировать

2022-08-14 18:20:11 Колаб, который лучше вас разберет картинку на запрос.

В примере оригинальное изображение и затем промпт, который выдал колаб поместил в SD.

Получаем промпт:
"a painting of a castle with a waterfall in front of it, a detailed matte painting by Tyler Edlin, featured on cgsociety, arts and crafts movement, artstation hq, unreal engine 5, unreal engine"

Теперь референс фото станет намного легче разбирать.

Больше нейронок для артов тут Открыть/Комментировать

2022-08-12 16:02:00 Создаем рекламу через Dalle 2 и Ebsynth

Если у вас нет больших бюджетов на рекламу - этот вариант отличный.

Andy Orsow рассказал и показал, как с помощью Dalle 2 и Ebsynth создал интересный моушн ролик для рекламы Brain.fm

- Создание озвучки и видеоряда по которому будет накладываться персонаж
- Создание персонажа в Dalle 2
- Далее маска для супер синхронизации в Ebsynth
- Затем создание окружения заднего в Dalle 2, для лучшей работы использовался трюк с inpainting дорисовкой.

Готово! Очень крутой рекламный ролик создан! Открыть/Комментировать

2022-08-11 19:49:17 Смотрите что CompVis творит с Text Video Editing

Как я уже показывал, Stability Diffusion готовит Inpainting версию своей модели.

Теперь Patrick Esser поделился интересным прогрессом. Посмотрите, я реально залип..

Мишин Лернинг Открыть/Комментировать

2022-08-10 19:55:36 Stable Diffusion - это новый шаг в text2image.

Для дизайнеров и художников - это волшебная палочка, например, я смешал акварельный стиль и сухое валяние при создании артов. Сделал изометрический дизайн конференции, создал веселых Пикачу, персонажей во вселенной Миядзаки. и просто поигрался с заброшенной машиной меняя вектор изображения.

Акварель и сухое валяние - это две сложнейшие техники, которые редко используются из-за времени создания работ в таком стиле. В дискорд боте я получил 4 разных генерации за 181 секунду.

В отличие от Dalle 2 Stable предполагает, что на основе его весов и датасета многие построят свои сервисы, как мы видели вот здесь уже.

Или дополнить Disco Diffusion и будет совершенно нового уровня анимации и генерации поверх видео. Открыть/Комментировать

2022-08-10 19:22:45 Вышел StableDiffusion — Разбираем подробно что нас ждет дальше и что это такое!

Начнем с новостей:

StableDiffusion вышел в Stage I: ресерчеры смогут получить доступ к модели уже сегодня! Для этого веса нужно будет запросить. Но не стоит расстраиваться.

Публичный релиз состоится в ближайшее время, как только будут завершены последние этапы подготовки модели к "публичной жизни". А еще сегодня ожидается последняя волна инвайтов на закрытое бета тестирование в котором уже приняли участие 10,000 юзеров, генерируя около 1,7M изображений за сутки.

Что такое StableDiffusion?

StableDiffusion — это самая удачная смесь в Text2Image, а именно гибрид Latent Diffusion и Imagen:

> Latent Diffusion (LDM) позволяет в производить диффузию на в пространстве пикселей, а в латенщине. Вместо разрешения 64х64 — выходит сразу 512, благодаря Encoder-Decoder подходу. Если короче: деталей больше, а вычислений меньше.

> От LDM StableDiffusion отличает тот факт, что интформация от текста течет с frozen LM (а именно CLIP), как в случае с T5 в Imagen.

> Оказалось что CLIP вектора куда лучше шарят изображения и они выходят прям очень-очень крутыми (все же клип учился на изображениях и LM косвенно тоже)! И хотя понимание отношений (кто слева, кто справа, и тд) объектов чуть лучше и T5, но качество картинки у CLIP лучше на порядок!

Модель сделали ребята из StabilityAI и CompVis, обучая SD на супере компьютере Ezra-1 AI UltraCluster, состоящим из 4,000 A100, используя для трена 2B пар изображения-текст из датасета LAION 5B, файнтюня модель на LAION-Aesthetics (сабсете)

Blog Post
Code StableDiffusion
Веса Модели (model card)

Мишин Лернинг Н е й р о э с т е т и к а Открыть/Комментировать