Подскажите неучу, как сделать клип с помощью нейронки и при этом хорошо. То есть не на "лишь бы отвя / нейронные сети :: пидоры помогите (реактор помоги)

пидоры помогите нейронные сети 

Подскажите неучу, как сделать клип с помощью нейронки и при этом хорошо. То есть не на "лишь бы отвязаться".

Привет. Прежде чем кидаться тапками, выслушайте!

Небольшая предыстория. В данный момент времени я пишу концептуальный альбом в жанре спейс-рока. Готово две песни. Второй трек - это идеальный сценарий для клипа. В связи с бюджетами хочу обратиться к помощи нейросетей. Идея заключается в следующем:

1. Использовать хромак, снимать футажи на нем. Например, пролетающий корабль (который я сделаю из пластилина и обработаю в нейронке) или персонажей песни. Персонажи - я или моя девушка, зависимо от того, как нейронка сможет все обработать. Помещений толком нет, но думаю, я смогу что-нибудь придумать. 

2. Научить нейронку использовать одни и те же образы, чтобы в кадрах был один и тот же корабль, одни и те же персонажи с минимальными изменениями (главная героиня, например). Я понимаю, что один в один-то не сделать, но хотя бы, чтобы узнавалось всё.

3. Подключить EbSynth для плавной анимации по ключевым кадрам, чтобы не было "каждый кадр - какой-то рандомный набор образов без смысла". Вообще, EbSynth - идеальный инструментарий для этого, как мне кажется.

4. Сделать убранство корабля в нейросети, поставить ее как задник, на котором и будет происходить действо.

Так вот, что из этого вытекает? Как обучить нейронку запоминать паттерны обработки, чтобы она делала одно и то же, а не каждый раз - разное? Я хочу сделать хорошо, при этом, чтобы нейронка служила инструментом, а не оправданием, лишь бы сделать на отъебись. 

Если кто-то хочет помочь и тут долго расписывать, напишите мне, пожалуйста, в телегу. 

пидоры помогите,реактор помоги,нейронные сети
Подробнее

пидоры помогите,реактор помоги,нейронные сети
Еще на тему
Развернуть

Отличный комментарий!

Почему бы тебе у нее и не спросить, у нейронки
jonny_t jonny_t03.04.202308:29ссылка
+44.2
Телега: @madiax
Трек для привлечения внимания:
на 2:40-2:50 риф называется "как долбить две ноты с серьёзным лицом" :)
а вообще трек залипательный, мне нравится
А что за хрень первые 50 секунд, я уже дропнуть хотел но решил немного промотать
Dekem Dekem 03.04.202314:17 ответить ссылка 0.6
Называется "вступление"
Не долговато? Я сначала подумал что это вообще не музыка
Dekem Dekem 03.04.202316:25 ответить ссылка 0.0
Все зависит от творческой задачи, есть вступления и на несколько минут
Почему бы тебе у нее и не спросить, у нейронки
jonny_t jonny_t 03.04.202308:29 ответить ссылка 44.2
вот он у неё и не спросил
п.2 решается с помощью LoRA, обычно для этого нужен датасет с изображениями персонажа.
Про корабли хз, не видел примеров. Мне кажется, тут стоит задуматься, не будет ли проще сделать это традиционно.

В целом, советую подписаться на сабреддит диффьюжена https://www.reddit.com/r/StableDiffusion/ и читать там темы по тегам News и Resource | Update

Там часто постят видео вместе с описанием рабочего процесса, плюс там же можно спросить что как. Сам я использую СД только для картинок, так что по видео мало что могу подсказать.
clif08 clif08 03.04.202308:45 ответить ссылка 2.9
Спасибо, посмотрю
По идее вместо лоры можно эмбендингами обойтись, но вообще у меня была куча инфы на rentry.org, но его нахрен закрыли. Жизнь боль.
ivdos ivdos 03.04.202309:31 ответить ссылка 0.1
из нейросетевых генераторов видео тут пробегала ModelScope text2video https://habr.com/ru/post/724284/
так же у stable-diffusion-webui есть ещё несколько плагинов для генерации видео разными способами например https://github.com/fishslot/video_loopback_for_webui
mm33 mm33 03.04.202309:00 ответить ссылка 1.9
Спасибо
Gen-1 или Gen-2 тебе тоже подойдёт.
Как я понял тебе нужно что-то такое?


Вот как делалось в общих чертах
ivdos ivdos 03.04.202309:22 ответить ссылка 1.5
Спасибо
Хочу фанатскую реализацию Колеса Времени, снятую по этой технологии)
засесть за изучение нейронок, посвящать часов 8 работе с ними, эксперементам разным. глядишь - через годик-другой сделаешь хороший клип.
А смысл, если через годик другой нейронка будет делать крутой клип по голосовому запросу типа "Ну, ээээ... клипец на пять минут забахай, чтоб там Сестры Битвы с понями шпокались, и Терминатор типа с Кришной гандам стайл танцевали, гыыы..."
Если бы
yoburg yoburg 03.04.202311:59 ответить ссылка 0.0
а смысл ждать годик если через два годика нейронка будет сама считывать мысли с мозга.
или лучше через 3 годика, когда все будем лежать в ванных с питательным раствором, подключённые к системе...
чтобы сделать что-то хорошо, то есть не на "лишь бы отвязаться"
нужно вложить в дело кучу усилий, ебаться с чтением документации, пробовать, ошибаться и еще раз ебаться, ваш КО
Как то натыкался, мб поможет)
Iliarub Iliarub 03.04.202312:12 ответить ссылка 0.6
Таки где целостный результат его трудов?
garet garet 03.04.202317:45 ответить ссылка 0.0
Как вариант может не стоит нейронкой обрабатывать, а стоит обычным пресетом фотошопа? Тогда можно сделать много фотогравий с абсолютно одинаковой стилистикой. Ну а дальше как это в видео монтировать это уже второй вопрос.
Только зарегистрированные и активированные пользователи могут добавлять комментарии.
Похожие темы

Похожие посты
КУПОН
НА 1 помощь КУПОН
НА 1 помощь КУПОН
НА 1 помощь