Нейросеть NVIDIA для превращения снимков в 3D-объекты / нейросеть :: гиф анимация (гифки - ПРИКОЛЬНЫЕ gif анимашки)

Нейросеть NVIDIA для превращения снимков в 3D-объекты

Просто потрясающая технология. В конце марта 2022 года NVIDIA представила нейронную сеть Instant NeRF, которая создаёт 3D-объекты и даже целые трёхмерные пространства из нескольких десятков снимков. После того, как компания предоставила желающим исходный код системы, в сети стали делиться результатами работы ИИ-алгоритмов.

ссылка на гифку

Так же она может заглянуть в зазеркалье)

Тестируя нейросеть, разработчик Юг Брюйер обнаружил необычный «побочный эффект», который возникает, когда в обрабатываемой сцене находится зеркало. Instant NeRF даёт возможность «залететь» в зеркало и даже немного продвинуться в «зазеркалье», осматриваясь по сторонам.

Подробнее

гиф анимация,гифки - ПРИКОЛЬНЫЕ gif анимашки,нейросеть

Еще на тему

гиф анимация(249666)

нейросеть(25594)

Развернуть

Отличный комментарий!

Это не побочный эффект, просто нейросеть "воспринимает" зеркало как окно в другое помещение.

opera_torr 09.09.202218:45 ссылка

+32.8

Комментарии 4009.09.202218:37ссылка84.7

Это не побочный эффект, просто нейросеть "воспринимает" зеркало как окно в другое помещение.

opera_torr 09.09.202218:45 ответить ссылка 32.8

Хоть где-то зеркала появились

Mambateam 09.09.202218:50 ответить ссылка ↑ 9.0

Угу, выглядит охуенно. Как и последних 5 презентаций NVIDIA новых карт или предыдущие технологии захвата картинки стрима, звука... Купил 3080 почти за х2 (с учётом продажи старой 1080ti даже в около MRSP влез), засунул в комп и охуел... от 5-7 fps в киберпуке с RTX.

Технологии у них конечно заебись, DLSS для 4к вообще незаменимая вещь, но вот на что они делают акцент "охуенная картинка с лучами в 360" записывались на условных sli rtx 3090 TI и хуй такое же увидишь на мониторе домашнего ПК.

AlligatorUA 09.09.202222:09 ответить ссылка ↑ -2.5

Во многих старых играх зеркала так и делались, рисовали по ту сторону такую же комнату, только отзеркаленную и мобы по ней синхронно бегали в купе с клоном персонажа игрока.

vpadlo 09.09.202218:51 ответить ссылка ↑ 28.0

Такое даже сейчас делают, тот же сайбапунк например.

PainInTheAss 09.09.202218:58 ответить ссылка ↑ 1.4

Ха. Сейчас разрабы даже таким не заморачиваются. Просто матовая хрень на стену и так сойдет.

wataru 09.09.202219:01 ответить ссылка ↑ 26.2

Я только что привел пример современной игры где этот прием используется?

PainInTheAss 09.09.202219:25 ответить ссылка ↑ 0.4

Ну так он прав, в сайбапунке зеркало - это матовая хрень на стену, пока его не активировать. Я был безумно разочарован когда включил RTX, а зеркало так и осталось матовой хренью.

Forest Gimp 09.09.202219:37 ответить ссылка ↑ 8.5

Это одна игра. Сколько современных игр с матовой хренью вместо фейковой комнаты? Плюс в киперпанке зеркало работает не всегда.

wataru 09.09.202220:08 ответить ссылка ↑ -1.1

А сколько без? Вообще дичи много бывает, чего стоит "башня от танка на голове нпс", "мост и даже город на модели машины в мафия 2" и прочее о чем не догадываешься без читов или описания разработчиков игры/модов.

AlligatorUA 09.09.202222:03 ответить ссылка ↑ 0.0

ээммм... в пуке есть отражение трассировкой зеркальных поверхностей, но не сами зеркала (чтобы работали для всех карт), да

guffi_oo 09.09.202219:50 ответить ссылка ↑ 0.4

видел историю про зеркала (не уверен точно но по моему у макаренкова). в метро есть будуар с зеркалом в борделе. после выхода то ли патча то ли длц основная комната чуть чуть изменилась, а про зеркальную забыли. изз-за это "отражения" не совпадают

Russ_Dry 10.09.202210:23 ответить ссылка ↑ 0.0

Да не, это и не побочный эффект и не ошибка восприятия, просто нейросеть в отличии от нас знает немножечко больше

гиф анимация,гифки - ПРИКОЛЬНЫЕ gif анимашки,нейросеть

Chemical_X 09.09.202219:03 ответить ссылка ↑ 16.5

У меня робот пылесос так же постоянно пытался заехать в зеркало, даже прорисовал себе сканером зеркальное отражение коридора. Поначалу на телефоне смотрел и думал, что за хрень - в квартире как будто есть скрытый ход с дополнительными помещениями. А потом догнал что робот в зеркале отсканировал отражение

anorakee 09.09.202219:19 ответить ссылка ↑ 8.3

Гномы живущие за тем зеркалом: «Отлично! Наша маскировка в секретный вход работает.»

RustyTacos 09.09.202219:34 ответить ссылка ↑ 10.1

у меня дежавю. по-моему, пару лет назад уже было это, и коммент такой же...

PoshtarBoba 10.09.202203:23 ответить ссылка ↑ 0.4

Всё так. Только если этого не ожидал/прогнозировал разраб, это "побочный эффект".

poma1010 11.09.202200:50 ответить ссылка ↑ 0.0

в другое измерение

ComSyntax 14.09.202214:08 ответить ссылка ↑ 0.0

Т.е. в порно можно будет произвольно точку зрения двигать? Очень полезная технология!

akam 09.09.202218:52 ответить ссылка 2.9

Почувствуй себя тем курильщиком из анекдота!

Reiner 09.09.202218:53 ответить ссылка ↑ 6.8

Мужчину спрашивают:
- Что вы любите?
- Курить люблю! Курить люблю пиздец! Курил бы блять 24 часа в сутки, просто не вынимал бы сигарету изо рта, курить люблю аж рвёт, не могу жить без сигарет, курить люблю пиздец!
- Хм, ясно. А что ещё любите?
-Ебаться люблю! Ебаться люблю пиздец! Ебался бы круглыми сутками, ебал бы, ебал бы и ебал бы, хоть бы весь в пизду залез, только чтоб головаторчала!
- Ээ.. а голова зачем?
- Курить люблю пиздец!

Reiner 09.09.202218:53 ответить ссылка ↑ 12.4

Так-то восстановление сцены по серии снимков - это давно известная задача, и NeRF по качеству примерно одного уровня с традиционными воксельными алгоритмами.

Славен 09.09.202218:52 ответить ссылка 2.9

Ого они открыли фотограмметрию!

Irrelevant 09.09.202218:57 ответить ссылка -1.5

нейронную, я вас попрошу!

nikkky357 09.09.202219:08 ответить ссылка ↑ -0.8

Действительно, в случае обычной унылой фотограмметрии мы получаем из кучи картинок 3D-модель, а в случае chad нейронной фотограмметртии из кучи фотографий мы получаем 3D-модель!

Irrelevant 09.09.202220:19 ответить ссылка ↑ 2.8

Я всегда считал люди неимоверно переоценивают всё где Нейронная Сеть, это как "Название" 2000 любого товара до 2000-го года, что в большинстве случаев ручное программирование сделает всё в 100 раз лучше и оптимизированней, особенно бесполезно тренировать нейронку в рисовании. Но вот в подобных проектах со временем Софт под нейронкой будет качественнее чем прописанные алгоритмы, заебешься обновления выпускать, всего в мире не учесть

Abhorrence 09.09.202220:39 ответить ссылка ↑ 0.9

Будет здорово если можно будет к примеру налепить что-нибудь из пластилина/глины, пофоткать и быстро перевести в 3д модель. Интересно насколько это будет доступно простому пользователю и когда можно будет попробовать

Spiriggan 09.09.202219:10 ответить ссылка 0.3

Уже можно сделать это если у тебя есть йфон, гугли RealityScan.

PainInTheAss 09.09.202219:21 ответить ссылка ↑ 0.7

https://ru.wikipedia.org/wiki/Фотограмметрия

kosoi 09.09.202219:44 ответить ссылка ↑ 1.3

Будущее уже здесь.

Nikopol777 09.09.202219:19 ответить ссылка 0.2

скормите ей мемного мужика, пусть залетит в зазеркалье

wuro 09.09.202219:28 ответить ссылка 11.6

О, у меня в армии такое же одеялко было.

lexxdoc 09.09.202219:29 ответить ссылка 0.0

Двухспальное?

gamambler 09.09.202219:32 ответить ссылка ↑ 1.0

Круче! четырёхспальное, в два яруса чВ

lexxdoc 09.09.202222:00 ответить ссылка ↑ 0.0

как же форсят эту хрень и не слова объективности, она не создает какие то супер 3д модели, их не воткнуть в игры и не использовать в CG, это просто способ демонстрации контента, и он не особо качественный в сравнении с такими же аналогами фотограметрии, самый качественный сейчас на рынке RealityCapture, который как раз позволяет махинациями подготовить любую модель. Так еще у нвидиа используется dlss то есть даже то что мы видим это фейк обработанный дважды нейроной сетью и подретушированный. Вообще не представляю сценарии использования этой срани. Оно делает срань внутри своей проги еще и обрабатывает так что в итоге только получишь сранный видосик, а где чистить от мусора(облако точек очень много мусора плодит и создание меша из него тоже нужно обрабатывать в другом софте), как фиксить меш и засовывать обратно ни слова

А зеркало по факту нейронка воспринимает как вторую комнату, таким же способом раньше делали отражения в играх

shinodem 09.09.202220:57 ответить ссылка 7.6

>их не воткнуть в игры и не использовать в CG

с чего бы?

wooooot 10.09.202200:27 ответить ссылка ↑ 0.0

Очень "шумно" получается, одним куском, с неправильной топологией, нерациональным расходом полигонов, запечёнными в текстуру тенями. Анимировать заебёшься. Сложные объекты типа качающейся листвы деревьев уверен что будут сплошным глюком.
В общем, очень ограниченное применение для задних планов.