StableDiffusion

Stable Diffusion 3 теперь доступна для скачивания и запуска локально

Генерация по промту: Epic anime artwork of a wizard atop a mountain at night casting a cosmic spell into the dark sky that says "Stable Diffusion 3" made out of colorful energy

Теперь модель можно скачать и запустить локально (пока только Medium-версию). Разработчики пишут, что новая модель лучше понимает текст промта, более реалистичная в плане рук и лиц. А так же лучше запоминает детали на даже на небольших дата сетах. Одна из интересных фитч - генерация надписей.

Еще пишут что она "идеально подходит для работы на стандартных потребительских графических процессорах без снижения производительности". Но тут бы я поспорил, легко переварить 10Gb не каждая видеокарта сможет. На моей машине работает медленнее по сравнению с SDXL.

Скачать саму модель можно с civitai или huggingface. Запустить на данный момент только в comfyui.

Немного погонял локально, промты действительно понимает хорошо. Но модель "недообучена" - качество оставляет желать лучшего. Предыдущие версии тоже от этого страдали, но люди из комьюнити допиливали до вполне не плохих результатов.

Сложный промт с положением объектов на картинке указанием цветов (у прошлых моделей возникали проблемы):

Three bottles on a table in a kitchen. Bottles that look like cola. Left bottle is full of blue liquid with the number 1 on it. Middle bottle is full of white liquid with the number 2 on it. Right bottle is full of red liquid with the number 3 on it.

Видно, что модель четко следует промту. Круто!

Попробуем с людьми: 

Forest in the background. Dark theme, sunset, look at at viewer, captured in the late afternoon sunlight. Photo of three 21 year old woman. Left woman is blonde with the number 1 on blue T-shirt. Middle woman is redhead with the number 2 on white T-shirt. Right woman is brown hair with the number 3 on red T-shirt. Wearing shorts

Тут пришлось сначала описать лес на фоне, потому что иначе он выглядел как будто прифотошопленным. В остальном модель четко соблюдает номера, цвет футболок и волос. Раньше, без танцев с бубном, четко прописать нескольких разных типажей на одной картинке было почти не реально - детали сливались и получались клоны. А в новой версии достаточно просто описания. 

А что по надписям на картинке? Попробуем:

Neon sign with the text "Ты пидор"

Видимо, русскую кодировку не завезли, но видно что модель старается, попробуем иначе:

Neon sign with the text "You are awesome!"

Попробуем сгенерить котика:

A black cat walking along a street paved with stone.Close-up of a cat's face.

Опять неплохо, хотя пришлось реролить несколько раз, что бы получить более-менее нормальный результат. Модель знает основы анатомии кота, но иногда больше похоже на детский рисунок.

Как на счет аниме?

Illustration anime, cartoon. 1woman, blue eyes, brown hair, dynamic angle, centered, full body photo. Street in the background

Опять пришлось реролить несколько раз. Заметил, что если указывать больше деталей, картинка получается лучше.

Попробуем городской пейзаж:

Urban photography: houses, trees, cars, and peoples. the road goes from the bottom left to the right

Осторожно: если долго рассматривать картинку, можно подумать что у тебя инсульт...

Что мы имеем на данный момент? Пока реализм хромает... Не всегда с первого раза выходит что нужно. Лично я ожидал большего. Все те же проблемы с руками и склонностью к "плоскости" перспективы и объектов. 

Но есть ощущение, что модель действительно лучше понимает что от нее хотят. Будем надеется, что дообучение будет по силам сообществу, и мы увидим NSFW версию от авторов Juggernaut или Pony Diffusion.

ЗЫ: надеюсь теги эротики и аниме не нужны.

Puro

Кинули мне на тест несколько картинок сделать в одной стилистике. Что-то увлекся, решил уже по фану что-нибудь сгенерить. Офисного...

Highwire

А где теги?

Лесная канцелярия

Goth Marian

Моя попытка в тренировку LoRA №2

В общем, я был приятно удивлен, что мой предыдущий пост зашел уважаемым содомитам, посему решил сделать еще один. Не знаю, дело в интересе к нейросетям или к Оглафу, но сейчас можно будет как раз проверить.Итак, позвольте представить вашему вниманию LoRA обученную на работах венецианского живописца эпохи Возрождения - Тициано Вачеллио.

 https://civitai.com/models/478707/titian-vecellio-style?modelVersionId=532368

Как и в прошлый раз, я не смог достичь уровня самоудовлетворения, но не пропадать же добру. LoRA тренировалась на модели Pony, а эта модель не очень подходит тому, что не является r34, картинками, но мне было интересно попробовать. В принципе, вышло лучше, чем я ожидал, но хуже чем могло быть.

Всем привет. Решил я тут запилить в нейронках скрипт, который будет рисованного 2d персонажа максимально похоже отрисовывать в реалистичных фактурах. Без моего вмешательства руками.

По зарубежным персонажам я прогулялся вот в этой подборке

А тут я решил попробовать наших персонажей покрутить.

При выборе хорошеньких лиц - получаются хорошенькие результаты. Но кто ищет легких путей? Вот вам одна знакомая всем с детства женщина =)

Принцип простой - закинул скриншот из мультика, получил нечто. Максимально стараюсь сохранить пропорции, а потому такие странные получаются образы.

Ну и артефакты не чистил, чтобы показать насколько справляется сам скрипт. Если надо прям конфетку вылизывать, на это нужно много времени, это ради одного арта можно. Тут же я попытался передать насколько Римма хороша и модна сама по себе!

PS. А вот в современной отрисовке (В спортивном костюме нередко, судя по скриншотам) она уже скучная какая-то. Мне не нравится.

Во первых, это красиво