Поэкспереминтировал с novelai, SD доообученная под аниме с добавлением таких фишек, как гиперсети. / NovelAI :: нейромазня :: Stable diffusion :: нейросети :: art (арт)

Stable diffusion нейросети нейромазня NovelAI art 

Поэкспереминтировал с novelai, SD доообученная под аниме с добавлением таких фишек, как гиперсети. Почитать можете к примеру тут. Вообщем она, когерентнее, чем другие дообученные аниме аналоги и с анатомией все лучше, но в плане стиля немного однообразна. Дообучали ее без имен художников, поэтому стилем через имена управлять трудно, но я попробовал имена тех кто оригинальное SD неплохо знает. По итогу некоторые вещи даже похожи, а какие-то нет, но как минимум можно подобрать себе что-то по вкусу. Плюс оценил влияние гиперсетей. С черными изображениями нужен другой сэмплер.Эйлер иногда так глючит.

None
aini
anime
anime_2
Adrian Smith	Alan Lee	Albert Lynch	Alex Grey
			w	m
	Иг4 ^ yj			
я				
		1
J		fi
ji	il	h	w	/I f	1	В	Э9® ^ Æ^JL^ _ _ .. «
	К./	b	1	*W / л	5 f i '		* l ! mi 1 Í
	л	"1					
Ну i	L						
anime_3,Stable diffusion,нейросети,нейромазня,NovelAI,art,арт

Anna Dittmann
Anne Stokes
Artgerm
Arthur Hacker
None
aini
anime
anime_2
anime_3
f 1 / vV> 'W ^ ^ í - ' J \ Wi MrYlM \			
I UUj^Hà ~ Ær: */W|y I	Ki r .V* '1 & f / • —§ \lLktl		
			J
Arthur Rackham Audrey Kawasaki
A-1 Pictures
Bastien
Lecouffe-Deharme
Bella Kotaki,Stable

None
aini
anime
anime_2
Berthe Morisot
Bob Byerley
Bob Peak
anime_3
Carne Griffiths Catrín Welz-Stein Charlie Bowater	CLAMP
		
	1	
IM	v 4	[. f '»\ AL«J,Stable diffusion,нейросети,нейромазня,NovelAI,art,арт

None
aini
anime
anime_2
anime_3
Clive Barker
Craig Davison	Dean Cornwell	Dorina Costras
Drew Struzan
Edward Burne-Jones
Edward Robert Hughes
Eric Wallis	Esteban Maroto	Flora Borsi
Franz Xaver Winterhalter
r				V,	
	f1			! \ (i	
1 L	Tl	7 1
M		[\ \\ 1 > ml
V		
		
Gainax	Gaston

None
aini
anime
anime_2
Gustav Klimt
Hayao Miyazaki
Hirohiko Araki
Hitoshi Ariga
Howard Chaykin
Howard Pyle
Hsiao-Ron Cheng
Igor Morski
Ilya Kuvshinov
Ilya Repin
Isao Takahata
Guo Pei
Gustave Moreau
:V
anime_3,Stable diffusion,нейросети,нейромазня,NovelAI,art,арт

James Tissot
Joao Ruas
John Musker
None
aini
anime
anime_2
Jan Van Eyck Jason Edmiston Jean-Baptiste Monge Jean-Marc Nattier Jeremy Lipking Jessie Willcox Smith
John Byrne
John William Waterhouse
Josephine Wall Jovana Rikalo Jules Bastien-Lepage Junji Ito
		
V	\	yLffl Ж
		
			 Ш

None
aini
anime
anime_2
anime_3
Kate Greenaway Katsuhiro Otomo
Ken Kelly
Ken Sugimori
Kentaro Miura
Krenz Cushart
Kyoto Animation Leonardo da Vinci
у '	1 11 	r
	
	
	
	i/nm) 1 lift
1 —и -- ЩК	
Luis Royo	Malcolm Liepke Mamoru Hosoda Mamoru Oshil Marco Mazzoni Margaret Keane	Mark

None
aini
anime
anime_2
Masashi Kishimoto Michael Cheval Michael Whelan	Miho Hirano	Moebius	Naoko Takeuchi
anime_3
Odd Nerdrum	P.A. Works	Paolo Roversi Patrice Murciano Paul Outerbridge	Pete Docter Peter Mohrbacher,Stable diffusion,нейросети,нейромазня,NovelAI,art,арт

None
aini
anime
anime_2
anime_3
Pixar	Production I.G	Quentin Blake Rafael Albuquerque Ralph Bakshi	Ray Caesar Raymond Swanland
i WJi A
Rene Magritte Richard Corben	Rob Liefeld	RonWalotsky	RossDraws RumikoTakahashi	Russ Mills	Salvador Dali
	L 1
| i 1	
r	/M
¡H	i\,Stable

SHAFT
Sharaku
Shepard Fairey
Shoji Kawamori Shotaro Ishinomori Sophie Anderson
Studio DEEN
None
aini
anime
anime_2
anime_3
\ ' /■	
m \	
	uf , Ä
! ' 'ir f A	
m ^ >■ A	
kJ*	
■TV I	npbm
mlv 1 1	1 fr 1
Theo van Rysselberghe
Tatsunoko
Productions
Studio Ghibli
Studio Pierrot
Sui

None
aini
anime
anime_2
anime_3
Todd McFarlane Toei Animation Tom Bagshaw	Trina Robbins	Tsutomu Nihei	Ufotable	Umberto Boccioni	Utamaro	VictoNgai	Vincent van Gogh
l ( n V F m			
			
à àH			
Vittorio Matteo Coreos
Walt Simonson
... ,	„ ,	William-Adolphe
Walter Crane	Wayne Barlowe


Подробнее
None aini anime anime_2 Adrian Smith Alan Lee Albert Lynch Alex Grey w m Иг4 ^ yj я 1 J fi ji il h w /I f 1 В Э9® ^ Æ^JL^ _ _ .. « К./ b 1 *W / л 5 f i ' * l ! mi 1 Í л "1 Ну i L anime_3
Anna Dittmann Anne Stokes Artgerm Arthur Hacker None aini anime anime_2 anime_3 f 1 / vV> 'W ^ ^ í - ' J \ Wi MrYlM \ I UUj^Hà ~ Ær: */W|y I Ki r .V* '1 & f / • —§ \lLktl J Arthur Rackham Audrey Kawasaki A-1 Pictures Bastien Lecouffe-Deharme Bella Kotaki
None aini anime anime_2 Berthe Morisot Bob Byerley Bob Peak anime_3 Carne Griffiths Catrín Welz-Stein Charlie Bowater CLAMP 1 IM v 4 [. f '»\ AL«J
None aini anime anime_2 anime_3 Clive Barker Craig Davison Dean Cornwell Dorina Costras Drew Struzan Edward Burne-Jones Edward Robert Hughes Eric Wallis Esteban Maroto Flora Borsi Franz Xaver Winterhalter r V, f1 ! \ (i 1 L Tl 7 1 M [\ \\ 1 > ml V Gainax Gaston Bussiere
None aini anime anime_2 Gustav Klimt Hayao Miyazaki Hirohiko Araki Hitoshi Ariga Howard Chaykin Howard Pyle Hsiao-Ron Cheng Igor Morski Ilya Kuvshinov Ilya Repin Isao Takahata Guo Pei Gustave Moreau :V anime_3
James Tissot Joao Ruas John Musker None aini anime anime_2 Jan Van Eyck Jason Edmiston Jean-Baptiste Monge Jean-Marc Nattier Jeremy Lipking Jessie Willcox Smith John Byrne John William Waterhouse Josephine Wall Jovana Rikalo Jules Bastien-Lepage Junji Ito V \ yLffl Ж Ш anime_3
None aini anime anime_2 anime_3 Kate Greenaway Katsuhiro Otomo Ken Kelly Ken Sugimori Kentaro Miura Krenz Cushart Kyoto Animation Leonardo da Vinci у ' 1 11 r i/nm) 1 lift 1 —и -- ЩК Luis Royo Malcolm Liepke Mamoru Hosoda Mamoru Oshil Marco Mazzoni Margaret Keane Mark Ryden Masaakl Yuasa Masamune Shirow ML I ^ ]
None aini anime anime_2 Masashi Kishimoto Michael Cheval Michael Whelan Miho Hirano Moebius Naoko Takeuchi anime_3 Odd Nerdrum P.A. Works Paolo Roversi Patrice Murciano Paul Outerbridge Pete Docter Peter Mohrbacher
None aini anime anime_2 anime_3 Pixar Production I.G Quentin Blake Rafael Albuquerque Ralph Bakshi Ray Caesar Raymond Swanland i WJi A Rene Magritte Richard Corben Rob Liefeld RonWalotsky RossDraws RumikoTakahashi Russ Mills Salvador Dali L 1 | i 1 r /M ¡H i\
SHAFT Sharaku Shepard Fairey Shoji Kawamori Shotaro Ishinomori Sophie Anderson Studio DEEN None aini anime anime_2 anime_3 \ ' /■ m \ uf , Ä ! ' 'ir f A m ^ >■ A kJ* ■TV I npbm mlv 1 1 1 fr 1 Theo van Rysselberghe Tatsunoko Productions Studio Ghibli Studio Pierrot Sui Ishida Tim Burton Tite Kubo
None aini anime anime_2 anime_3 Todd McFarlane Toei Animation Tom Bagshaw Trina Robbins Tsutomu Nihei Ufotable Umberto Boccioni Utamaro VictoNgai Vincent van Gogh l ( n V F m à àH Vittorio Matteo Coreos Walt Simonson ... , „ , William-Adolphe Walter Crane Wayne Barlowe Bouguereau WLOP Yayoi Kusama Yoji Shinkawa Yoshitaka Amano Yoshiyuki Sadamoto Yuumei Zdislav Beksinski
Stable diffusion,нейросети,нейромазня,NovelAI,art,арт
Еще на тему
Развернуть
Ну и если что, генерил с такими параметрами
Prompt: cute girl, upper body, art by имя художника

Negative prompt: lowres, bad anatomy, bad hands, text, error, missing fingers, extra digit, fewer digits, cropped, worst quality, low quality, normal quality, jpeg artifacts,signature, watermark, username, blurry, artist name

Sampling Steps: 28

Sampling Method: Euler

Resolution: 512x768

CFG Scale: 12

Seed: 80495232
Inkor Inkor 15.10.202216:07 ответить ссылка 2.2
> но в плане стиля немного однообразна
как собственно и стиль аниме
Ну так-то стилей аниме вагон и маленькая тележка. Всех градаций всратости и крутости, на любой вкус.
Админ тебе кнопку "Заблокировать" подарил. Нет, не хочу блокировать, хочу плакаться
Пхахаха наивный.
Ты так не нервничай. Вероятнее всего, конкуренция человека с ИИ, подтолкнет современный мир изобразительного искусства к чему-то большему.
Не стоит бояться инструмента.
Пока ИИ не обретет разум и не пошлет нахер собственную эксплуатацию, все это просто инструмент и без фантазии, он будет ничем не лучше тех миллионов рисованных баб и безвкусных картиночек на просторах интернетов.
Первые двигатели тоже были хуже лошадей, но двигатели можно было соврешенствовать гораздо радикальнее, чем животных. Мы только в начале пути.
Я начинающий писатель. Книга без обложки - никому не нужный калл, но рисовать не умею, да и инструмента нет. До недавнего времени у меня был выбор между платой хоть какому-то рисоваке, либо пиздилке/покупке картинок с интернета, что не есть хорошо.
Кароч, нейросети решили мою проблему. Да, криво. Да, слабо. Но именно в том направлении, что мне нужно, а главное бесплатно и без обложения авторским правом.

Вот и думай
Ты смотри пейсатель, нейросети генераторы текста тоже совершенствуются. К твоей нейрообложке скоро будет прилагаться нейротекст. А ты пойдешь лесом, туда-же куда сейчас пошел твой рисовака обложек.
Только у них нет целеполагания, с высокой вероятностью данные произведения если и будут, то будут на уровне Донцовой.
Звучишь как те, кто боится смещения художников нейросетями. Молоток не виноват, что может ударить по пальцам. Если нейросети настолько просто создать историю, то грош ей цена
> Звучишь как те, кто боится смещения художников нейросетями.

Ты сам только что сказал что пойдешь не к художнику за обложкой, а к нейросетке. Противоречия не замечаешь? Разумеется тех хуесосов что лепят банан на холст и объявляют это искусством нейросети не коснутся, но за них как бы никто и не переживает.
>> есть люди которые охуенно рисуют

И сколько их процентов от говнорисовак, которых даже нейронка уделает?
Боже, ты даже не представляешь как ты помогаешь людям этой галереей, я добавил буквально трех художников (со схожей стилистикой) и картинки сразу засверкали качеством, все же без стиля оказывается очень трудно сделать что то нужное. art by кстати писать не обязательно (лишние слова все же путают нейронку).
Ну я ничего сильно сложного не делал, просто взял за основу список с SD художниками, набрал авторов за которых мой глаз зацепился, а дальше просто воспользовался X/Y plot из репы AUTOMATIC1111.
https://stablediffusion.fr/artists
Просто ценно то, что ты это сделал, и можно просто смотреть на твои картинки и выбирать быстро стилистики, которые ближе подходят к промпту
Друже, что за x/y plot?
И еще вопрос, а нейросетка знает каких-то конкретных художников? Или можно попросить повторить любой стиль?
Нейросеть знает конкретных художников. Ссылка на известных ей художников с примерами их рисунков https://stablediffusion.fr/artists
Спасибо, обязательно попробую.
Оригинальная Stable diffusion знает, вот примеры
https://stablediffusion.fr/artists
Novel ai дотренировывали на базе SD используя арты и теги с danboru, но без имен художников (это пока очень деликатная тема с авторским правом и прочим). Поэтому стилем как я и сказал управлять трудно, но можно, как в моем посте. Плюс можно не через художников, а через произведения пытаться управлять, типа арт в стиле one piece
My Hero Academia One Piece Fairy Tail Neon Genesis Evangelion Puella Magi Madoka Magica Demon Slayer K-On! Sailor Moon
Вот это очень полезная штука, спасибо. Мне как раз не все варианты рисовки вкатывают.
Функция скрипт в AUTOMATIC1111, которая позволяет автоматически делать такие матрицы, как у меня в посте.
То есть если я сделаю плот xy, то получу сразу коллаж или он будет генерить изображения по заданному количеству и шлепать их в коллаж?
Там такие настройки, нужно только что бы в промпте было одно из слов в списке Prompt S/R, типа:
cute girl, upper body, art by Pixar
X/Y plot
Xtype	X values
Prompt S/ v	Pixar, Production I.G, Quentin Blake, Rafael Albuquerque, Ralph Bakshi, Ray Caesar, Raymond Swanland, Rene Magritte, /WW\' /WWWWW *\ v\; 7WWWV* 'WWV’7 'WWVWWNhA^' AAAAa/ AAAAAA/' VAAA. lAAAAAAi' vWwWW /VWWWW’7 VWW -W^VWNi' Richard Corben, Rob Liefeld, Ron
Inkor Inkor 16.10.202217:03 ответить ссылка 0.1
Только вот установил. Но почему то всего лишь раз смог открыть URL в браузере. Какие нибудь перебои с работой бывают, может перегруз запросов или что то такое?
Смотря что консоль пишет. Если UI от Automatic1111 - нужен Гит, нужен Питон, нужно прописать параметры в зависимости от видюхи
Да вроде всё норм
venv "E:\AI\stable-diffusion-webui-master\venv\Scripts\Python.exe"
Python 3.10.8 (tags/v3.10.8:aaaf517, Oct 11 2022, 16:50:30) [MSC v.1933 64 bit (AMD64)]
Commit hash:
Installing requirements for Web UI
Launching Web UI with arguments:
LatentDiffusion: Running in eps-prediction mode
DiffusionWrapper has 859.52 M params.
making attention of type 'vanilla' with 512 in_channels
Working with z of shape (1, 4, 32, 32) = 4096 dimensions.
making attention of type 'vanilla' with 512 in_channels
Loading weights [925997e9] from E:\AI\stable-diffusion-webui-master\models\Stable-diffusion\novelai.ckpt
Loading VAE weights from: E:\AI\stable-diffusion-webui-master\models\Stable-diffusion\novelai.vae.pt
Applying cross attention optimization.
Model loaded.
Loaded a total of 0 textual inversion embeddings.
Running on local URL: http://127.0.0.1:7861
Ну тогда все в порядке, разве что у меня порт 7860
А я понял, нужно запускать консоль перед браузером. Спасибо за фидбек.
Да щас прям. Просто страницу обнови, когда консоль догрузится, и будет работать
ждём, когда нейронка научится рисовать аниме сериалы и японию можно отменять
Япония уже не может конкурировать с Кореей и Китаем.
Интересно, а можно обычные фотки в аниме картинки преобразовывать?
Фигня вопрос. Хоть своими руками какую-то хрень намалевать и превратить в шедевр
Да. Для этого есть режим img2img ) Главное denoising strength там не ставить больше 0.5 ибо будет генерировать уже что-то отдаленно похожее на оригинал. Вообще img2img с прямыми руками в режиме inpainting (когда маской указываешь, какие части изображения надо перерисовать) превращается в нейрофотошоп. Надо фотке какой-то тян прибавить большей пикантности, раздеть, добавить каких-либо деталей на твой вкус - всё это возможно
То есть чисто теоретически можно с помощью img2img исправить незначительные детали уже сгенерированного арта?
Да. Можно, так и делают. Хотя насчет кривых рук я хз: сам не пытался править пока. Но добавить, исправить что-то можно. Главное поавильный запрос подать, правильно выделить, еще можно в тои месте в пеинте или фотошопе накидать своих каракуль, чтобы перерисовка смогла точней справиться. Например чтобы раздеть кого, надо телесным цветом повыделять нужные места к примеру. А так да, теоретические возможности огромные
А еще весело наблюдать looping - это когда результат обработки заново отправляется на обработку и так продолжается сколько задал. Можно наблюдать интересные метаморфозы )
Можешь привести еще пару примеров, например как фиксить кривые части тела?
Выделить их маской, в промпте указать нужную часть тела, в негативном промпте прописать что-то вроде " lowres, bad anatomy, bad hands, text, error, missing fingers, extra digit, fewer digits, cropped, worst quality, low quality, normal quality, jpeg artifacts, signature, watermark, username, blurry" или поискать еще другие примеры негативных промптов. Кроме того прийдеться поиграться с denoising strength - этот параметр отвечает за то, насколько надо размыть нужное место перед перерисовкой. При denoising strength 0.7 там вообще уже может сгенерироваться что-то такое, что в итоговую картину не впишется и в худших случаях будет выглядеть как кривой колаж. Также есть параметр размытия маски, который, как я понял, отвечает за то насколько по краях маска будет иметь плавный переход с остальным изображением и с ним тоже можно поиграться. Было б у меня больше свободного времени, то б может быть запилил бы отдельный пост, как превратить stable diffusion в фотошоп, но увы работа + окончание магистратуры пока не дают на это времени. По сути в основном я сейчас играюсь с txt2img, так как найти интересный промпт на реддите и поставить батчингом в фоновом режиме генерировать кучу изображений не занимает много времени, зато после работы можно и расслабится изучая полученный результат )
Вот оно, будущее, наконец то можно будет раздеть кого-нибудь. Миф про красные очки становится реальностью.
Ну до этого уже был как-бы deepNude, но он очень фигово работал. Но stable-diffusion в режиме img2img дал нам теперь власть, которая и не снилась нашим предкам ) Ждем кстати теперь новой волны возмущений и критики этой технологии от моралофагов в мире, как это было с deepNude пару лет назад
Только зарегистрированные и активированные пользователи могут добавлять комментарии.
Похожие темы

Похожие посты
0 dreambooth-gui
□
X
Pick Image Config Trainer Train