Мишин Лернинг 🇺🇦

2022-08-31 20:02:07 OpenAI внедрили в DALL·E 2 "Outpainting"

Только что пришло письмо от OpenAI, где говорится, что из-за опенсорса stable diffusion они решили внедрить Outpainting, про который я подробно писал весной, в интерфейс DALL-E 2.

Outpainting позволяет генерировать изображения любого размера. Но в отличие от гибкого разрешения в диффузионных UNet'ах с вниманием, Outpainting предполагает пошаговую генерацию со всеми своими плюсам и минусами.

+ Поэтапная, контролируемая генерация деталей и объектов
- Локальное рецептивное поле

Outpainting — это продолжение генерации изображения за его первоначальными границами. Outpainting добавляет визуальные элементы, развивая генерацию в новых направлениях, основываясь на вашем текстовом описании.

Это позволяет начать ваше полотно в одном стиле, а закончить в другом, уточнять элементы и менять их!

Outpainting — это Inpainting без привязки исходному разрешению..

blog post
DALL-E 2 Editor Открыть/Комментировать

2022-08-31 16:43:04 ERNIE-VILG: UNIFIED GENERATIVE PRE-TRAINING FOR BIDIRECTIONAL VISION-LANGUAGE GENERATION

Может ли одна сеть решать две задачи:
— Text2Image & Image2Text —

Ответ да, конечно может. И самое начало 2022 года это подтвердило. В одно и тоже время, независимо, появились три подобные архитектуры.

Cкажу, что тренировать их end2end не стоит, если есть желание выбить SOTA в двух задачах одновременно. А вот использовать end2end претрейн — хорошая идея! Подход идеален для файнтюнов для множества задач!

Кстати сегодня стало доступно демо, так что можете сгенерировать своего "астронавта на коне на марсе с эйфелевой башней", не забудьте только перевести в гугле ваш запрос на китайский: 宇航员在火星上骑马，从后面可以看到埃菲尔铁塔。宇航员骑马

p.s.: понимание текста на голову выше чем у стебля диффузионного

paper
online demo Открыть/Комментировать

2022-08-30 00:30:34 Выкатили пару платных фичу в наш Curated AI art generator

Я не удержался и сделал глуповатый анонс фичи «RE-MIX» в стиле будто мы пафосный дом моды нейронок.

Если коротко, то может работать в двух режимах:

Перепридумать текущую картинку на входе, поместив ее в какую-то категорию генератора – для этого можно загрузить картинку, но не вводить текст

Изменить картинку в соответствии с текстом и категорией которую вы выбрали

А еще появился «HD mode», фича которая добавляет много секси деталей в арт который генерируется (пример). 

В общем, играться тут:
https://neural.love/ai-art-generator

P.S. Бесплатные фичи все так же остались как и были

P.P.S. Усы мои, да Открыть/Комментировать

2022-08-24 18:42:00 Вітаю з Днем Незалежності України! Открыть/Комментировать

2022-08-22 22:30:11 OpenAI только что опустили цены на свои модели: Невидимая рука рынка или вполне осязаемая рука Эмада из Stability.AI?

Сижу, не шалю, никого не трогаю, починяю код, дебажу и вдруг прилетает письмо от OpenAI: "Мы рады сообщить, что снижаем цену за токен для наших стандартных моделей GPT-3 моделей для инференса"

— GPT-3 Davinci 175B c $0.06 до $0.02 за 1000 токенов
— GPT-3 Curie 13B c $0.006 до $0.002 за 1000 токенов

Типа в 3 раза дешевле стали старшие GPT-3 модели.. ПроДалли 2 конечно ни единго слова. Захожу значит на сайт, посмотреть цену токенов Дали, а там: "Сорян, пока токены купить нельзя, магазин закрыт, ушла на 15 мин, приходите позже"

Ну и как это понимать?

Мишин Лернинг Открыть/Комментировать

2022-08-22 21:05:48 Нейросеть "Стебель Диффузии" доступна каждому

tl;dr Это первая опенсорснутая (и пока что лучшая) Text2Image нейросеть текщего поколения.

Что такое StableDiffusion? StableDiffusion — это диффузионный Text2Image (как и DALL-E 2) и очень удачный гибрид Latent Diffusion и Imagen.

Stable Diffusion производит диффузию не в пространстве пикселей, а в латенщине. Вместо разрешения 64х64 — выходит сразу 512, благодаря Encoder-Decoder подходу: деталей больше, а вычислений меньше. Информация от текста течет с frozen LM (а именно CLIP), как в случае с T5 в Imagen. SD это модуляр, состоящий из 3х модулей:
1. Frozen CLIP Text Tower (как LM)
2. U-Net (из Diffusion Models Beat GANs)
3. Decoder из 64х64х4 в 512х512х3

Веса и модель (в том числе новый чекпоинт!)

Оптимизированный нотбук / колаб со всеми плюшками (зарегайся на HuggingFace и получи токен, ссылка выше)

Diffusers от HuggingFace (библиотека самого графа Диффузора)

Блог пост Stability.AI про релиз весов

Мишин Лернинг Открыть/Комментировать

2022-08-22 20:06:25 До релиза весов остался один час... Стебель рядом

"illustrations of rococo flourish fashion, girl long hair blowing in the wind, god rays, pearly and iridescent and translucent, pastel rainbow refraction and reflection, flowers and butterflies and dragonflies, by artgerm, by nixeu, by ruan jia, by conrad roset, trippy modern deco rococo, waves from hairs, bubblegum color, artstation"

Мишин Лернинг Нейроэстетика Открыть/Комментировать

2022-08-21 00:46:30 Перший Український Чат CG/Motion/3D Дизайнерів

Запрошую до чату CG Motion UA

Рекомендация от Нейроэстетики — только по-любви! Открыть/Комментировать

2022-08-20 11:20:26 Открыта Beta Dream Studio — Стебель Диффузии в каждый дом!

Они нажали красную кнопку… DreamStudio — доступен каждому! 200 генераций при регистрации!

Проект будет развиваться в нечто большее: выбор сети, контролируемые параметры, инпеинтинг (возможжность изменять части изображений), галерея. Со временем будут проявлять новые фичи!

https://beta.dreamstudio.ai

p.s.: на сайте проекта лежит неплохая инструкция по созданию запросов — prompt guide

Мишин Лернинг Нейроэстетика Открыть/Комментировать

2022-08-18 20:45:52 Открыть/Комментировать