нейронные сети Stable diffusion длиннопост 

Stable Diffusion 3 теперь доступна для скачивания и запуска локально

нейронные сети,Stable diffusion,длиннопост

Генерация по промту: Epic anime artwork of a wizard atop a mountain at night casting a cosmic spell into the dark sky that says "Stable Diffusion 3" made out of colorful energy

Теперь модель можно скачать и запустить локально (пока только Medium-версию). Разработчики пишут, что новая модель лучше понимает текст промта, более реалистичная в плане рук и лиц. А так же лучше запоминает детали на даже на небольших дата сетах. Одна из интересных фитч - генерация надписей.

Еще пишут что она "идеально подходит для работы на стандартных потребительских графических процессорах без снижения производительности". Но тут бы я поспорил, легко переварить 10Gb не каждая видеокарта сможет. На моей машине работает медленнее по сравнению с SDXL.

Скачать саму модель можно с civitai или huggingface. Запустить на данный момент только в comfyui.

Немного погонял локально, промты действительно понимает хорошо. Но модель "недообучена" - качество оставляет желать лучшего. Предыдущие версии тоже от этого страдали, но люди из комьюнити допиливали до вполне не плохих результатов.

Несколько примеров на модели SD3 Medium Incl Clips T5XXLFP8

Сложный промт с положением объектов на картинке указанием цветов (у прошлых моделей возникали проблемы):

Three bottles on a table in a kitchen. Bottles that look like cola. Left bottle is full of blue liquid with the number 1 on it. Middle bottle is full of white liquid with the number 2 on it. Right bottle is full of red liquid with the number 3 on it.

нейронные сети,Stable diffusion,длиннопост

Видно, что модель четко следует промту. Круто!

Попробуем с людьми: 

Forest in the background. Dark theme, sunset, look at at viewer, captured in the late afternoon sunlight. Photo of three 21 year old woman. Left woman is blonde with the number 1 on blue T-shirt. Middle woman is redhead with the number 2 on white T-shirt. Right woman is brown hair with the number 3 on red T-shirt. Wearing shorts

			' 'Л			<*щ:	tC Y\ ^ МЦ , ,%f- > /			
			«			»®V .}?^■ ' . V » ‘ Y «Л			• , г ‘У»7 f\ J¡«V >^|<1Л*П'*01Я^1^^^^Ея1. ájí&jrf *	
						?&"-Z1QH			¡г а*. "• a^2|^B|Uг> * * ¿jp v	
						.уФ*ы г*Ьп|^НРЦН^&. . "J				ль*,нейронные сети,Stable diffusion,длиннопост

Тут пришлось сначала описать лес на фоне, потому что иначе он выглядел как будто прифотошопленным. В остальном модель четко соблюдает номера, цвет футболок и волос. Раньше, без танцев с бубном, четко прописать нескольких разных типажей на одной картинке было почти не реально - детали сливались и получались клоны. А в новой версии достаточно просто описания. 

А что по надписям на картинке? Попробуем:

Neon sign with the text "Ты пидор"

нейронные сети,Stable diffusion,длиннопост

Видимо, русскую кодировку не завезли, но видно что модель старается, попробуем иначе:

Neon sign with the text "You are awesome!"

нейронные сети,Stable diffusion,длиннопост

Попробуем сгенерить котика:

A black cat walking along a street paved with stone.Close-up of a cat's face.

нейронные сети,Stable diffusion,длиннопост

Опять неплохо, хотя пришлось реролить несколько раз, что бы получить более-менее нормальный результат. Модель знает основы анатомии кота, но иногда больше похоже на детский рисунок.

Как на счет аниме?

Illustration anime, cartoon. 1woman, blue eyes, brown hair, dynamic angle, centered, full body photo. Street in the background

нейронные сети,Stable diffusion,длиннопост

Опять пришлось реролить несколько раз. Заметил, что если указывать больше деталей, картинка получается лучше.

Попробуем городской пейзаж:

Urban photography: houses, trees, cars, and peoples. the road goes from the bottom left to the right

PM л
«с*
l4^:v:v^
>.:;->r^

t^jgr	jP,		jBgf	ж ■ W5p
дОДЙ'^с^ «.			ЩМч	
	к VT'^Г ‘ 1 т :’•кйк№т1^^и	» \ 1 «!* *. j|, ЛД	^ ; >,нейронные сети,Stable diffusion,длиннопост

Осторожно: если долго рассматривать картинку, можно подумать что у тебя инсульт...

Что мы имеем на данный момент? Пока реализм хромает... Не всегда с первого раза выходит что нужно. Лично я ожидал большего. Все те же проблемы с руками и склонностью к "плоскости" перспективы и объектов. 

Но есть ощущение, что модель действительно лучше понимает что от нее хотят. Будем надеется, что дообучение будет по силам сообществу, и мы увидим NSFW версию от авторов Juggernaut или Pony Diffusion.

ЗЫ: надеюсь теги эротики и аниме не нужны.

Развернуть

нейросетевые барышни арт барышня art нагенерил сам нейронные сети Anime фэндомы нейромазня Робот 

нейросетевые барышни,арт барышня,арт девушка, art барышня, art girl,art,арт,нагенерил сам,нейронные сети,Anime,Аниме,фэндомы,нейромазня,Робот
Развернуть

нейромазня нейронные сети нейросетевые барышни арт барышня art нагенерил сам Stable diffusion 

V л ■I , f » " to ■ f I 4Ä V > ß ;* • • Г r » Vi T» vi, t •л/-: • t 1 Ж1 \ ' t I 4 И t k I ,«l I ••f... f • * У % . 4 / 7 * « / " ' V: \X' . Vlíl í>,нейромазня,нейронные сети,нейросетевые барышни,арт барышня,арт девушка, art барышня,
Развернуть

geek it-юмор песочница 

geek,Прикольные гаджеты. Научный, инженерный и айтишный юмор,it-юмор,песочница

Развернуть

девушка сиськи Эротика песочница эротики вода гифки с соусом 

Соус
https://vk.com/sunart?z=video226928_456239225%2F844e91c1c3e4ab1adc%2Fpl_wall_226928
Развернуть

обои для рабочего стола девушка рыжая няша песочница 

обои для рабочего стола,девушка,рыжая,няша,Фото и рисунки милых девушек привлекательной наружности - настоящие няши,песочница
Развернуть

реактор комментарии Мемы I Know That Feel Bro sad frog песочница 

Развернуть

красивые картинки обои обои для рабочего стола море небо закат девушка 

красивые картинки,обои,большой размер по клику,обои для рабочего стола,море,небо,закат,девушка


Развернуть

смешные надписи смешные картинки спать песочница 

Спать -
ЗТО ПРАКТИЧЕСКИ ТАК ЖЕ 9ЕЛИК0ЛЕПНО, КАК ЕСТЬ. ТОЛЬКО ЕЩЕ И БЕСПЛАТНО.,смешные надписи,смешные картинки,фото приколы,спать,песочница

Развернуть

Патрик Стар Губка Боб Мультфильмы ночь телефон песочница 

Когда посреди ночи тебе кто-то написал и ты решил проверить свой телефон,Патрик Стар,Patrick Star,Губка Боб,SpongeBob SquarePants,Мультфильмы,Мультсериалы, Cartoons,ночь,телефон,песочница
Развернуть