Как перерисовать любой рисунок с помощью StableDiffusion / StableDiffusion :: гайд :: туториал :: нейронные сети

Как перерисовать любой рисунок с помощью StableDiffusion

нейронные сети,гайд,туториал,StableDiffusion,песочница

Нужно:

Установленный и настроенный свежий Automatic1111 web-guiУстановленное расширение ControlNet, и все нужные модели к немуУмение хоть сколько-нибудь с этим работать

Всё происходит во вкладке txt2img

Сначала берём исходное изображение, кладём его в 2 вкладки ControlNet'a и включаем их. Вот как-то так:

ControlNet vi. 1.224 ControlNet Unit О
Single Image
13 Image
ControlNet Unit 1 ControlNet Unit 2 Batch,нейронные сети,гайд,туториал,StableDiffusion,песочница

Первую вкладку (Unit 0) настраиваем следующим образом:

Control Type
All Canny Depth Normal OpenPose MLSD
Lineart SoftEdge Scribble Seg Shuffle Tile
Inpaint IP2P O Reference T2IA
Preprocessor
reference_only
Control Weight 1
Starting Control
0;3 Ending Control
Step
1

Style Fidelity (only for "Balanced" mode)
0,5
Control Mode
Balanced

А вот так вторую (Unit 1):

Control Type
All Canny Depth Normal OpenPose MLSD
Lineart SoftEdge Scribble Seg Shuffle Tile
O Inpaint IP2P Reference T2IA
Preprocessor Model
inpaint_only+lama controlnetllModelsJnpaint [I ▼
Control Weight
Starting Control Step
Ending Control Step
1
Control Mode
O Balanced My prompt

Два инстанса нужны, потому что первый отвечает за передачу стиля, а второй обеспечивает генерацию поверх существующего изображения с учётом контекста.

Осталось нарисовать маску:

Параметры генерации, промпты:

Sampling method DPM++2M Karras
Restore faces Tiling
Hires, fix
Width
Sampling steps
32
600 Batch count 2
~) n 608 • Batch size 2
6
o
<$> Extra,нейронные сети,гайд,туториал,StableDiffusion,песочница

В промпте, то что хотим сгенерировать в зоне маски

Позитивный - (white flowers:1.1), (best quality, masterpiece:1.2)

Негативный как обычно - EasyNegative, (worst quality, low quality, normal quality:1.4), (painting of bad artist:1.2)

Нажимаем Generate и получаем:

Пара моментов:

Старайтесь генерировать поближе (насколько возможно) к оригинальному разрешение. Hires. fix лучше не использовать - он ломает тонкие детали.

Нужен подходящий чекпойнт в зависимости от стиля оригинального рисунка. Под реалистичные рисунки реалистичные модели, под стилизованные - стилизованные.

Подробнее

ControlNet vi. 1.224 ControlNet Unit О Single Image 13 Image ControlNet Unit 1 ControlNet Unit 2 Batch
Control Type All Canny Depth Normal OpenPose MLSD Lineart SoftEdge Scribble Seg Shuffle Tile Inpaint IP2P O Reference T2IA Preprocessor reference_only Control Weight 1 Starting Control 0;3 Ending Control Step 1 Style Fidelity (only for "Balanced" mode) 0,5 Control Mode Balanced My prompt is more important O ControlNet is more important
Control Type All Canny Depth Normal OpenPose MLSD Lineart SoftEdge Scribble Seg Shuffle Tile O Inpaint IP2P Reference T2IA Preprocessor Model inpaint_only+lama controlnetllModelsJnpaint [I ▼ Control Weight Starting Control Step Ending Control Step 1 Control Mode O Balanced My prompt is more important ControlNet is more important

Sampling method DPM++2M Karras Restore faces Tiling Hires, fix Width Sampling steps 32 600 Batch count 2 ~) n 608 • Batch size 2 6 o <$> Extra

нейронные сети,гайд,туториал,StableDiffusion,песочница

Еще на тему

нейронные сети(25490)

StableDiffusion(3662)

песочница(701718)

Развернуть

Комментарии 1625.07.202316:41ссылка30.2

Вот 2 моих гайда:
https://dtf.ru/s/595875-neyro-iskusstvo/1956288-kak-ubrat-tekst-s-oblozhki-mangi-za-10-minut
https://dtf.ru/howto/1982890-kak-dorisovyvat-lyubye-kartinki-s-pomoshchyu-sd

kubik.rubiks 25.07.202316:42 ответить ссылка -0.3

Да вы все ахуели мне что тебе еще больше параноить по нейронкам ?

motorokvelotiks 25.07.202317:11 ответить ссылка 2.2

А чего параноить?

Mr. Wednesday 25.07.202317:16 ответить ссылка ↑ -2.3

баяны теперь можно обновлять

SWaad 25.07.202317:17 ответить ссылка ↑ 8.6

Так, ладно. А этот гайд поможет перерисовывать анимедевочек без трусиков?

warrcan 25.07.202317:28 ответить ссылка 2.2

присоединяюсь к вопросу про раздевание 2д девочек

wild_healer 25.07.202317:38 ответить ссылка ↑ 2.1

Можно. Скорее всего придется задействовать дополнительно модель более узкой направленности чтобы получилось красиво, но раздевать девочек ещё никогда не было так просто.

Zamfertiy 25.07.202320:26 ответить ссылка ↑ 0.2

Без штанов точно можно оставить.

$ш 1 JâiÜ и»^1Д ip^t/ \. 1 !/• ■ B » b H i t iV JF r.Tv- ■ • J'1' .•>/ - 'Z , .• X ' ¿.У </ wVt'-£ip^4!HKrv ду-*Тг-* ~. . ! ÿiïfif x i •-£ Г »•. .. Л ’' г» 0 ... «ГПх 4 • J-$

kubik.rubiks 25.07.202318:05 ответить ссылка ↑ 2.2

слава прогрессу!

wild_healer 25.07.202320:28 ответить ссылка ↑ 0.7

40 гривень штаны!

G-peeper 25.07.202321:02 ответить ссылка ↑ 3.3

Всё, пиздец, сейчас ремастеры артов пойдут

Ulrixion 25.07.202320:46 ответить ссылка 1.5

Плохо что ли? Хорошо!

ыырг 26.07.202309:34 ответить ссылка ↑ 0.1

Уже давно, ты просто не замечаешь.

Tormen 26.07.202312:37 ответить ссылка ↑ 0.0

Как теперь web-ui накатывать в google сollab? Раньше можно было добавить --share и вылазила ссылка в конце установки. Теперь 3 ссылки и все нерабочие.

Lichtenshtein 29.07.202308:22 ответить ссылка 0.0

Никогда не пользовался коллабом. Помочь не смогу (

kubik.rubiks 01.08.202319:42 ответить ссылка ↑ 0.0

Жаль. Не пользовался 2-3 месяца, скопилось много картинок, которые хотелось перерисовать. А там уже баны какие-то пошли:

https://github.com/camenduru/stable-diffusion-webui-colab#readme

Как я понял, слишком многие оставляли виртуалки работать вхолостую.

Lichtenshtein 02.08.202300:16 ответить ссылка ↑ 0.0

Только зарегистрированные и активированные пользователи могут добавлять комментарии.

Похожие темы