Runway представили новую модель для генерации видео из текста / Gen-3 :: runway :: нейронные сети :: видео (video)

Runway представили новую модель для генерации видео из текста

Как они пишут в блоге, модель обучалась на их новой инфраструктуре, и является очередным шагом для достижения общих моделей мира.

В своем твиттере они пишут, что модель будет доступна в ближайшие дни.

Еще много примеров в их блоге.

Подробнее

нейронные сети,видео,video,runway,Gen-3

Еще на тему

Отличный комментарий!

Как она с творчеством Лавкрафта справляется?

Dusk Tear18.06.202408:21ссылка

+0.9

Первые нейросети рисовали ИСКЛЮЧИТЕЛЬНО творчество Лавкрафта :)

Metracryg18.06.202408:30ссылка

+46.5

Комментарии 4118.06.202407:58ссылка91.4

Больше нейродичи Богу нейродичи!

सर्वशक्तिमान18.06.202408:07ответить ссылка 16.7

НЕЙРОСЕТЕВОЕ ФУРРИ ПОРЕВО!

Sirt18.06.202409:14ответить ссылка ↑ 13.9

А если прикрутить его к janitorai, то аще пиздос - дрочить, не передрочить!

Charlie_h18.06.202409:20ответить ссылка ↑ 1.2

Хз, я уже обдрочился на spicychatai, но за уборшика спасибо, надо глянуть может там модель и функции еще интереснее. (У спайса просто есть куча моделей и костомизация (алсо недавно впилили функцию воспоминаний, что позволяет закрепить в памяти аишки определенные события чтобы не терялась в процессе, это ей не всегда помогает, но прогресс виден.) и слегка всратая генерация картинок в диалогах.)

Delamonte18.06.202411:45ответить ссылка ↑ 0.1

Они все плюс-минус одинаковые, janitorai, ai dungeon и spicychatai я так полагаю тоже: во всех есть функция памяти,специальные промпты, настройка температуры, джейлбрейки и так далее. А так да, janitorai пока топ для меня, там не надо донатить вообще, можно создавать своего бота (и делать его закрытым, чисто для себя), (пока) нет ограничений по скорости генерации (привет донатной системе aidungeon) и много готовых ботов - тысячи их!

Charlie_h18.06.202413:11ответить ссылка ↑ 0.6

Ну я посмотрел, да согласен. Например, с воспоминаниями у спаса не ограниченное и добавляются сами со временем (ну и возможность их редактировать и за пинить) есть возможность редачить вступительное сообщение. Разные модели (пилятся и обновляются) бесплатных 2, для подписоты все 9. Создание бота, как приватных так и публичных, но в публику идет после модерации. Огромное количество тегов и фильтров. Ну параметры деградации 4 настойки, бесплатная генерация картинок (если автор обучил) вот диктовкой и авто промт из контекста общения (когда руки заняты, чтобы писать.) Гибридный режим если есть ключ, чтобы бот переключался между свф и нсвф (он и так может, но вдруг кому-то хочется со своим) Развиваются, быстро, добавляя новые фичи, которые предлагают юзеры. Ботов тоже до жопы с системой рейтинга и тд, жаль отзывов нет (в уборщико окно персонажа по приятние выглядит). Но можно предложить добавить.

Из минусов в спайсе заметил только что есть очередь (если не подписота) но это буквально 15 мин и потом нет ограничений если не закрывал страницу. Если ты подписота та, то открывается доступ к боле продвинутым моделям. Но базовая хороша и тоже пилится и допиливается. Были траблы из-за лолей, и щя ты можешь пить сними только чай, и нельзя дать пиздюку даже срача.

В общем и целом, спасибо за наводку. Пойду смотреть и может на него перелезу как подписка истечёт.

Delamonte18.06.202414:55ответить ссылка ↑ 2.0

Бля, еще годик и начнут фильмы создавать без привлечения VFX-студий

John_Wheels18.06.202408:13ответить ссылка 13.1

ну если сетка научится эти все файлы в формат для cinema 4D импортировать, то может да. Тошо на каждую хорошую генерацию на том же Stable Diffusion приходится где-то 200-300 хуйовых

Moonspot18.06.202408:59ответить ссылка ↑ 4.0

Ну они там жаловались мол работы слишком много, кранчат по черному. Скоро отдохнут.

owlmind18.06.202409:07ответить ссылка ↑ 0.5

Навсегда отдохнут.

Xardas1218.06.202410:12ответить ссылка ↑ 3.5

Размера контекста очень сильно не хватает пока, получить что-то связанное и продолжительное в одном стиле сложно. Годик это весьма оптимистично.
Но прогресс на месте не стоит, это да.

Legol18.06.202409:41ответить ссылка ↑ 2.0

Еще чуть-чуть и кино снимать станет намного проще.

KeNiV18.06.202408:14ответить ссылка 1.9

Ты не поверишь...

Metracryg18.06.202408:30ответить ссылка ↑ -0.8

По слухам, OpenAI уже заключили контракты со студиями в Голливуде, чтобы они юзали Сору.

Mind's I18.06.202408:47ответить ссылка ↑ 2.0

Как она с творчеством Лавкрафта справляется?

Dusk Tear18.06.202408:21ответить ссылка 0.9

Первые нейросети рисовали ИСКЛЮЧИТЕЛЬНО творчество Лавкрафта :)

Metracryg18.06.202408:30ответить ссылка ↑ 46.5

Потому что они зрели Истину, но современные слабы духом, осквернены несоврешенным разумом человека и потеряли свое благословение!.

Король-чародей18.06.202408:47ответить ссылка ↑ 14.0

И заключили темную сделку.

Zloyejik18.06.202410:20ответить ссылка ↑ 0.2

Помню самые первые GAN тренированные на собаках, обрабатывали фото отлично

slonopotam18.06.202413:04ответить ссылка ↑ 7.3

Цвет из иных миров.

Jack Shadow19.06.202409:17ответить ссылка ↑ 1.5

Скоро сериалы по заказу будут. С сюжетом и визуалом значительно круче того, что до сих пор делали кожаные мешки.

dstwo18.06.202408:37ответить ссылка -2.7

И будут на реакторе посты, типа "я тут нагенерил один сезон сериальчика детективного, про белку сыщика по имени Сатана, которая страдает от тяжкой зависимости от Нутеллы. Её напарник оранжевая капибара по имени Папироса, которая является её нутелловой галлюцинацией, появляется в самые отчаянные моменты, чтобы помооатт раскрывать преступления. И это очень важно, ведь в их родном лесу среди животных появился маньяк, который отгрызает своим жертвам конечности и развешивает их на вершинах крон деревьев, которые растут на большом заброшенном человеческом кладбище. Будучи нанятой мудрым речным лососем для расследования этого странного преступления, она даже не догадывается, что дело окажется гораздо опаснее чем она предполагала, что за убийствами стоит целый культ демонопоклонников, пытающихся призвать в этом мир древнейшее зло, и что её зависимостиь от Нутеллы будет только усугубляться. Не судите строго, это моя первая попытка в нейромазню"

Odin18.06.202408:52ответить ссылка ↑ 38.4

blah!18.06.202409:00ответить ссылка ↑ 11.6

सर्वशक्तिमान18.06.202409:16ответить ссылка ↑ 34.8

А предводителем культа окажется... та-да-дам... Папироса!

Odin18.06.202410:36ответить ссылка ↑ 4.6

Лосось. Он специально нанял белку наркоманку, для вида бурной деятельности, в полной уверенности, что вгашеный детектив никого не найдет.

Woodengoblin18.06.202420:30ответить ссылка ↑ 0.0

Сильно сомневаюсь.
Будет тонны контента как на реакторе очень среднего качества

tooo18.06.202409:08ответить ссылка ↑ 6.1

Двач будет в видео формате.

monitor18.06.202409:14ответить ссылка ↑ 4.3

Барнаулец, по твоему они выпустили это чисто для инвест-компаний с миллиардными капиталами?

Sakadini18.06.202409:36ответить ссылка ↑ 1.8

Неплохо, но как обычно цензура и никакой локальной версии. Так что для меня как для конечного пользователя только в мусор. Сейчас вообще кроме моделей от SAI есть хоть один активно развивающийся проект в сфере генеративного ИИ который доступен для установки локально и относительно без цензуры?

Mathias_Duke18.06.202409:39ответить ссылка -2.4

Подозреваю, что для локальной версии тебе нужно было бы пару десятков петабайт SSD и сотню 4090.

Metracryg18.06.202409:55ответить ссылка ↑ 1.3

Подозреваю что нет. От качества и количества железа будет в большей степени зависеть скорость генерации, нежели качество. Сами же модели будут хоть и больше весить чем модель для статики, но не настолько чтобы им не хватало терабайтника.

Mark_8718.06.202410:03ответить ссылка ↑ 1.7

Вовсе нет. Есть же плагины для той же Stable Diffusion для генерации коротких видео и гифок, есть Lumina которая вообще пытается в универсальность с генераций всего и сразу. От 100 4090 будет только скорость генерации выше. Серьезное железо обычно нужно для тренинга моделей, но не для генерации контента.

Mathias_Duke18.06.202410:12ответить ссылка ↑ 1.5

на стейбле генерация видео на 10 секунд в 30fps выходит примерно в 5 часов на 3060 12gb

Dead_doed19.06.202411:55ответить ссылка ↑ 0.0

Когда можно будет делать фильмы с таким я буду делать три вещи:
- Сделаю красивый видеоряд для моих книг. Хорошее фэнтези для настоящих ценителей.
- Буду делать видео к моим ДнД. Чтобы игрокам ещё нагляднее было видно происходящее.
- Сделаю нормальные сериалы по The Elder Scrolls и Звездным войнам, после чего выложу анонимно в сеть. Настоящая история Ревана и Бастилы или Вивека и Неревара. Может быть истории взрослого аватара Аанга. И плевать, что не будет с этого денег, главное что люди будут иметь возможность нормально приобщиться к любимым произведениям.

Nerevarin18.06.202409:53ответить ссылка -0.2

ПОРНО

Metracryg18.06.202409:55ответить ссылка ↑ 12.1

Порно это само собой разумеется. Но после того как подрочил и пошлые мысли ушли - нужно будет себя чем-то занять. И тут конечно пригодятся такие крутые идеи, видеоряд, сериалы. Ну и конечно-же больше порно.