Pull to refresh

Шерудим под капотом Stable Diffusion

Image processing *Machine learning *Artificial Intelligence Natural Language Processing *
Tutorial

Вероятно вы уже слышали про успехи нейросетей в генерации картинок по текстовому описанию.

Я решил разобраться, и заодно сделать небольшой туториал, по архитектуре модели Stable Diffusion. Сегодня мы не будем глубоко погружаться в математику и процесс тренировки. Вместо этого сфокусируемся на применении и устройстве основных компонент: UNet, VAE, CLIP.

Читать далее
Total votes 81: ↑81 and ↓0 +81
Views 15K
Comments 11

Смогут ли нейросети заменить художников, копирайтеров и журналистов?

Python *Copyright Artificial Intelligence Natural Language Processing *

Всем привет! При создании Telegram-бота TurboText_bot и нейросетей для сервиса TurboText в тех-поддержку неоднократно приходили упрёки, что мы пытаемся отнять хлеб у людей. С публикацией недавней статьи на Хабре таких сообщений стало больше. Поэтому, как один из разработчиков "нейросетей-убийц" этих профессий, решил высказать своё мнение.

Почему вообще люди боятся, что их заменят?

Этот страх возник ещё в 1950-х, когда началось сильное индустриальное развитие. С появлением интернета и доступности алгоритмов машинного обучения этот страх начал только расти. Нейросети стали решать, кому давать кредит в банке, скидку в магазине, что должно быть в ленте новостей и рекомендациях к просмотру фильмов. Они по фотографии ваших лёгких могут предсказать наличие опухоли и Covid-19. На сегодняшний день каждый житель городов-миллионников сталкивается с более чем 1000 нейросетями за месяц, но люди по-прежнему боятся технологий. Почему?

Читать далее
Total votes 17: ↑10 and ↓7 +3
Views 6.9K
Comments 81

Релиз Invoke AI 2.0 — интерфейса и инструментария для Stable Diffusion (win/linux/mac)

Python *Image processing *Machine learning *Artificial Intelligence
Sandbox

Привет всем! Сегодня состоялся релиз InvokeAI 2.0: A Stable Diffusion Toolkit, проекта, цель которого — предоставить энтузиастам и профессионалам набор надежных инструментов для создания и редактирования изображений с помощью нейросети. InvokeAI требует всего ~3,5 Гб видеопамяти для создания изображений 512x768 пикселей (и еще меньше для 512х512), и совместим с Windows/Linux/Mac с M1 и M2.

Вау, как круто!
Total votes 24: ↑24 and ↓0 +24
Views 6.3K
Comments 12

Как нарисовать барашка или прикладное нейрохудожество

Working with video *Game development *Image processing *Computer Animation *
Recovery mode
Sandbox

Потихоньку начнём разговор для понимания приёмов и возможностей нейросетевых инструментов. Они с нами навсегда, неплохо бы разобраться в самом начале.
Для примера выберем, конечно же, девчонок.

Prompth: full frontal, stunning blonde, (perfect face), suggestive, bright smile, gorgeous hair, squat,

Negative prompt: paint, anime, cartoon, art,drawing,3d render, digital painting, body out of frame, ((deformed)), (cross–eyed), (closed eyes), blurry, (bad anatomy), ugly, disfigured, ((poorly drawn face)), (mutation), (mutated), (extra limbs), (bad body)

Перед началом генерирования у вас есть много разных настроек и возможностей . Например запрос может быть и отрицательным - negative prompt, фактически запрет, очень мощный инструмент, в котором описывается чего бы вы не хотели видеть в результате. Как правило туда включают все заклинания призванные исключить появление в результирующем изображении шестипалых рук и множества других мутаций, которые только отнимают ценное время. Рисовать правильные пальцы - это вообще больное место нейросетей, поэтому их часто и не видно в сгенерированных изображениях. Впрочем, продолжим.

На картинке ниже результат работы нейросети от компании StableDiffusion, а именно запрос к парсеру img2img — инструменту, который служит для доработки уже имеющегося изображения. В качестве исходника, был взят мем из сети Интернет. Текст запроса:

Читать далее
Total votes 22: ↑19 and ↓3 +16
Views 5.6K
Comments 3

AiPainter — цифровой AI-художник

Python *.NET *C# *Graphic design *Artificial Intelligence

Доброго времени суток, уважаемые коллеги по цеху! Хочу рассказать о своём последнем проекте, написанном по фану - обёртке для трёх нейросетевых проектов: нашумевшей StableDiffusion (используется её форк InvokeAI) и более старых - lama-cleaner и rembg.

Вроде интересно, почитаю подробности
Total votes 17: ↑17 and ↓0 +17
Views 4.3K
Comments 11

Релиз InvokeAI 2.1: теперь с inpainting и Cross Attention

Python *Image processing *Machine learning *Artificial Intelligence

Команда InvokeAI рада поделиться нашим последним релизом с набором новых функций, улучшений графического интерфейса и возможностей командной строки.

Что нового?
Total votes 8: ↑8 and ↓0 +8
Views 1.9K
Comments 6

Генеративные нейросети и этика: появилась модель, копирующая стиль конкретного художника

Cloud4Y corporate blog Machine learning *Legislation in IT Design Artificial Intelligence

Совсем недавно известная художница и иллюстратор Холли Менгерт получила нейросеть своего имени (не давая на то согласия). Модель умеет генерировать иллюстрации, точно копирующие стиль художницы. Автор считает, что всё ок, но как насчёт человеческой стороны вопроса?

Читать далее
Total votes 35: ↑32 and ↓3 +29
Views 5.6K
Comments 45

Нейросети убьют 2d художников

Game development *Image processing *Machine learning *Artificial Intelligence The future is here

Никого они, конечно, не убьют, но рынок труда в ближайшие пять лет поменяют точно. Произойдёт это постепенно, плавно и заметно будет только на значительной дистанции, в моменте глядя вперед или оглядываясь назад, мы не увидим каких-то значительных сдвигов как и при любом эволюционном процессе.

Читать далее
Total votes 14: ↑11 and ↓3 +8
Views 5.7K
Comments 108

Илон Маск кисти Ван Гога, или специализированные модели Stable Diffusion

Image processing *Machine learning *Artificial Intelligence The future is here

Благодаря сообществу, stable diffusion развивается стремительнее, чем можно было предположить. Как я писал в предыдущей статье, вскоре мы должны получить много специализированных моделей под конкретные задачи. 

Уже сейчас помимо основной модели весов у stable diffusion есть модели для получения артов в строго определенном стиле. 

В этой статье я покажу как это работает на практике и дам небольшую инструкцию для начинающих по добавлению специализированных моделей.

Читать далее
Total votes 14: ↑13 and ↓1 +12
Views 2.1K
Comments 1

Я обучил нейросеть на своих рисунках и отдаю модель бесплатно (и научу вас делать это)

Python *Image processing *Machine learning *Graphic design *Artificial Intelligence
Tutorial

Модель подходит для создания бесшовных узоров, абстрактных рисунков и стилизованных под акварель образов. Как использовать модель и как обучить нейросеть на своих картинках?

Хочу всё знать!
Total votes 38: ↑34 and ↓4 +30
Views 14K
Comments 26

I trained a neural network on my drawings and give the model for free (and teach you to create your own)

Python *Image processing *Machine learning *Graphic design *Artificial Intelligence
Tutorial

Great for seamless patterns, abstract drawings, and watercolor-styled images. How to use it and train a neural network on your own pictures?

Download the model here: https://huggingface.co/netsvetaev/netsvetaev-free

I wanna know!
Total votes 6: ↑6 and ↓0 +6
Views 971
Comments 0

Fast-dreambooth. Имба для тонкой настройки StableDiffusion

Machine learning *
Tutorial

DreamBooth очень простой способ дообучить StableDiffusion на вашем наборе изображений. В этой статье я расскажу как за 3 часа добавить в нейроную сеть ваши объекты стили или персонажей

Читать далее
Total votes 10: ↑10 and ↓0 +10
Views 2.6K
Comments 4

Релиз InvokeAI 2.2: универсальный холст, удобные установщики, автозагрузка моделей и DPM++

Python *Image processing *Machine learning *Graphic design *Artificial Intelligence

Привет! InvokeAI 2.2 теперь доступен для всех. В этом обновлении добавлены UI Outpainting, Embedding Management и другие функции. Ознакомьтесь с выделенными обновлениями ниже, а также с полным описанием всех функций, включенных в релиз.

Что нового?
Total votes 22: ↑22 and ↓0 +22
Views 3.8K
Comments 18

Нейросеть рисует за меня?

Game development *Image processing *Machine learning *Artificial Intelligence
Tutorial

В свободное время я генерирую тысячи красивых (и не очень) картинок. Иногда я пробую сделать что-то, что будет иметь практическую ценность. Основным преимуществом рисующих нейросетей сейчас я вижу время. Можно сделать портрет почти готового качества за несколько минут; стилизовать любое изображение или набросать композицию. Как же это использовать?

Читать далее
Total votes 20: ↑18 and ↓2 +16
Views 5.4K
Comments 30