Индусский код в действии: нейросеть научили превращать размытые картинки в качественное видео
Индийские разработчики представили систему, которая умеет создавать короткие видео из размытых изображений. Алгоритм работает на основе сверточных и рекуррентных нейросетей и позволяет превращать артефакты движения на снимках в короткие (до десяти кадров) видео, говорится в препринте на arXiv.org.
При просмотре размытого изображения человек может мысленно достроить картину происходящего. Например, видя фотографию птицы с нечеткими крыльями, можно предположить, что размытие изображения обусловлено артефактами движения крыльев во время получения снимка. Для систем компьютерного зрения эта задача, однако, представляет бóльшую сложность, и большинство известных методов направлены только на удаление артефактов движения и сглаживание кадров.
Ученые из Индийского технологического института под руководством А. Н. Раджагопалана (A. N. Rajagopalan) предположили, что на основе одного размытого изображения можно создать целое короткое видео: то есть восстановить изначальное движение из его артефактов на снимке. Для этого они разработали алгоритм на основе свёрточных нейросетей, которые активно применяют для задач, связанных с автоматическим распознаванием изображений, а также реккурентных нейросетей.
Модель обучается на большом количестве видео, которые разбиваются на кадры. После этого нейросеть ищет такой кадр, артефакты на котором наиболее соответствуют артефактам кадра тренировочной выборки. После этого декодер «восстанавливает» артефакты кадра тренировочной выборки в движение, запечатленное на видео. Внутри модели, таким образом, хранятся данные о возможных восстановленных движениях из каждого доступного в обучающей выборке размытого кадра.
В результате работы нейросеть выдает восстановленные из размытого изображения видео, состоящие из десяти кадров. Разработанный алгоритм, по мнению создателей, сможет в дальнейшем помочь улучшать не только восстановление размытых изображений, но и самих видео.
Источник: https://nplus1.ru/news/2018/04/10/blurred-image-reconstruction
при том, что лет 15 назад gif формат был крайне непопулярным =)
У SCP-Foundation есть объект, не помню номер, который "рисует" порно по желанию владельца. Так вот, люди умирают от истощения, не в силах оторваться от зрелища.
ПС хлеб вообще неисчисляемое
P.S.: "здесь есть у одного мальчика пять хлебов ячменных и две рыбки; но что это для такого множества?", "Иисус, взяв хлебы и воздав благодарение, роздал ученикам, а ученики возлежавшим, также и рыбы, сколько кто хотел. " - Евангелие от Ионна, глава 6, стихи 9 и 11 соответственно. Какие же тупые были древнерусские монахи, что аж целый язык (церковнославянский) придумали, чтобы только правилам современного русского языка не подчиняться!
У кого самая быстрая рука/чем он там рисует, у кого закончатся силы первым, фантазия сцп или олдфажность реакторчанина ДА БУДЕТ ЖЕ ВЕЛИКАЯ БИТВА
Хотя стоп а может этот код еще мастера фломастерами заменит.
А подождите, телеграмм же неделю заблочить не могут
ахахаххаха