В общем из нынешнего датасета как мне кажется я выжал все, что мог. / нейронные сети :: делаю сам :: расцензуриватель :: decensor :: NSFW

NSFW расцензуриватель decensor делаю сам нейронные сети 
В общем из нынешнего датасета как мне кажется я выжал все, что мог. Все же 1к тоже мало. Примеры полной тренировки можно посмотреть здесь, осторожно NSFW http://pornreactor.cc/post/4026510
Далее, планы на будущее. Нужно собирать больший датасет, переписать модель для использования на любом калькуляторе, сейчас процесс самого расцензуривания отжирает где-то 3 гига видеопамяти у видеокарточки, что не айс, при попытке использовать процессор, сжирает все 16 гигов моей оперативы и уводит в полный вис.
Но, это все будет слегка позже. Меня тут в больничке обрадовали, что есть подозрения на онкологию и послали меня к гематологам в Москву. Поэтому я не уверен, что смогу работать над нейронкой фуллтайм, да и собирать блядский датасет когда в палате есть люди как-то некоммфортно. Основной пк у меня постоянно врублен, поэтому смогу запустить тренировку из любого места в любое время.

Всем кто желает помочь: нужно набрать большой датасет, желательно так в 20к изображений хотя бы, а это пиздец какая муторная и долгая работа для одного рыла.
Второе, если вдруг кто захочет помочь материально то вот адрес кошеля https://money.yandex.ru/to/410014673635455, собранные средства буду откладывать на 1080ti, так-как 8 гигов видеопамяти у обычной 1080 не хватает для тренировки в высоких разрешениях.

Подробнее
NSFW,расцензуриватель,decensor,делаю сам,нейронные сети
Еще на тему
Развернуть
здоровья тебе, чувак! Отпишись потом по результатам из мск.
Polo Orta Polo Orta 01.08.201910:18 ответить ссылка 13.5
Есть такой вопрос а твоя сеть с видео работает?
Теоретически да, берешь ffmpeg и разбираешь видео на кадры, затем прогоняешь через нейронку и собираешь обратно. Практически я хз сколько времени это займет.
ivdos ivdos 01.08.201910:25 ответить ссылка 2.4
Если есть какой-нибудь видос на примете где-нибудь длительностью в 30 секунд, минуту попробую замутить.
ivdos ivdos 01.08.201910:28 ответить ссылка 0.1
Попробуй скачать да и обрезать видео под нужные параметры, из своего опыта в генерации 3д видео (примерно на 2 минуты) могу сказать что этот процесс может занять от 6 до 24 часов тут от конфигурации пк зависит.
Проблема еще в том, что бы найти непережатое видео. Ладно, попробую затестить на одном 3д хентайчике.
ivdos ivdos 01.08.201910:46 ответить ссылка 0.4
Окей, состряпал. Вышло так себе конечно https://drive.google.com/file/d/1i4BKzkEAbWqkSd8AwmOGsPD7hwBp52b2/view?usp=sharing плюс блядский гугл пережал онлайн. Оригинал https://file.chobit.cc/contents/1907/1ruaauazhb5wook4cwsg8scog/1ruaauazhb5wook4cwsg8scog_8wp6w9.mp4
ivdos ivdos 01.08.201912:41 ответить ссылка 0.3
Определенно лучше,
Так, 720р хуево очень из-за того, что я на 256 тренировал. Вот, переделал в 360 уже получше стало https://cdn.discordapp.com/attachments/389502656684621837/606430270064951296/out1.mp4
ivdos ivdos 01.08.201913:19 ответить ссылка 0.4
а есть еще такой годноты? можно в личку
А хрен его знает, я просто dlsite просматривал и наткнулся на страничку с этим хентаем, а там рекламный ролик короткий, как раз под мои нужды был.
ivdos ivdos 01.08.201914:14 ответить ссылка 0.1
Все равно лучше, чем оригинал, тут хотя бы глаз не режет так сильно как в оригинале, но доработка по любому требуется, у тебя примерно сколько времени занимает пропуск подобных роликов через сеть?
Ну вот этот ролик где-то минут за 5.
ivdos ivdos 01.08.201914:21 ответить ссылка 0.3
За столько лет пиратства, это первое и пока что единственное приложение за которое я готов платить.
Пацаны! Кидаем все что есть на кошель!
Сделаем пикчи снова без цензуры!
А разве от перехода на ти что-то конкретно изменится? +3 гигабайта видеобуфера это хорошо, но в данном случае лучше будет связать их в SLI и работать уже с ним.
Кстати, есть ли какие-то нейросети- расцензурщики для манги?
Я не уверен, что в слае оно будет работать как положено. Ну разрешение 1024х1024 моя видяха уже не берет, крашится с ошибкой нехватки видеопамяти, причем по диспетчеру задач, там совсем немного нехватает, хотя на 2048 уже точно не хватит и 1080ти. Конечно хотелось бы взять себе Титан, но это из разряда фантастики оно, 240к стоит.
По поводу манги, жди релиза deepcreampy, но оно будет платным. Та версия которая есть сейчас не работает с чб изображениями, в платной обещают запилить.
ivdos ivdos 01.08.201911:21 ответить ссылка 0.0
Тогда остаётся брать radeon VII - его 16-гиговый буфер должен справится.
radeon VII твой выбор 16 гб hbm2
Не знаю, с чем ты конкретно работаешь, но ведь можно же переписать подачу сэмплов в нейросеть при тренировке на более удобоваримую для памяти. Работать дольше будет, но крашиться перестанет.
pumki pumki 01.08.201912:32 ответить ссылка 0.6
Там это все очень сильно завязано на самой модели, к примеру pix2pixhd требует минимум 16 гигобайт видеопамяти для тренировки в высоких разрешениях, а там между прочим саму модель писали люди из nvidia, впрочем возможно они специально так сделали. Я в любом случае буду оптимизировать модель, но точно не ближайшее время.
ivdos ivdos 01.08.201913:35 ответить ссылка 0.2
Еще могу предложить использовать облачные GPU вместо покупки карточки. Мне полгода назад помогло сэкономить кучу времени и нерв. Но тут выгода только тогда, когда модель не месяц тренируется.
pumki pumki 01.08.201913:54 ответить ссылка 0.2
А если рассматривать варианты с 20 серией или Теслой(хотя она не сильно дешевле Титана выйдет)?
20 и 10 по видеопамяти мало различаютя. По поводу теслы, примерно такие же цены как у титана +-.
ivdos ivdos 01.08.201913:36 ответить ссылка 0.0
Великое дело творишь! Здоровья тебе!
Можно сурс аниме, которое по ссылке на порнреакторе с примером расцензуривания? Друг спрашивает.
ARSoO ARSoO 01.08.201911:23 ответить ссылка -1.4
Это не аниме, внка Shinshoku 3
ivdos ivdos 01.08.201911:27 ответить ссылка 0.1
Вставлю свои десять рублей (кинул).
Говорят 2070 SUPER по произовдительности почти такая же как 1080 ти.
grey0art grey0art 01.08.201911:25 ответить ссылка 0.1
Да мне на производительность в принципе похрен, главное видеопамять, тишку беру так-как уже относительно дешевые можно взять с рук, 2070 пока оверпрайс.
ivdos ivdos 01.08.201911:27 ответить ссылка 0.1
Может посмотришь в сторону красных видюх, там с памятью не жалеют, или сама технология идет в упор зеленых видеокарт?
Только CUDA, есть кроссплатформенный фреймворк, но красные карточки там скажем так, очень сильно отстают в производительности.
ivdos ivdos 01.08.201914:06 ответить ссылка 0.0
Офигенно получилось!
Если нужна помощь пиши. Я на работе юзаю несколько машин, каждая с 8-ю tesla V100, но если я их для этого юзать буду меня наверное линчуют. Так то у меня есть своя машина с двумя Titan X, если аккуратно, то наверное никто не узнает, но у меня доступа к ней не будет до числа 18. Я ничего не обещаю, но если получится, могу помочь с тренировкой. Да и если нужно обсудить техническую сторону пиши, хотя у тебя уже все офигенно получилось.
Здоровья тебе!
int16 int16 01.08.201911:30 ответить ссылка 0.8
Пока смысла нет, надо датасет сначала нормальный собрать, 1к несолидно.
ivdos ivdos 01.08.201911:33 ответить ссылка 0.9
1k совсем не солидно. Аугментацию надо обезательно делать хорошую. Не только флипать, но и повороты, шум, джейпег, рандомную линейную трансформацию поканально.
int16 int16 01.08.201911:40 ответить ссылка 0.2
Здоровья тебе, ждём результатов.
лично мне это не надо, но все равно святое дело делаешь! здоровья тебе и никакой онкологии
Ты лечись, какая нахуй 1080ti (надеюсь лечиться не от чего будет)
lexasan lexasan 01.08.201922:30 ответить ссылка 0.0
Только зарегистрированные и активированные пользователи могут добавлять комментарии.
Похожие темы

Похожие посты
KuroSenko96 commented 41 minutes ago
I've been using V1 for a long time now, and as a consumer I'm pretty impressed with what you've done and I do not mind paying to get V2 (at a reasonable price that is). Like what the other users above me said, patreon has banned “adult content" so I wouldn’t re
подробнее»

Deepcreampy расцензуриватель монетизация разработчики it пригорело советы NSFW

KuroSenko96 commented 41 minutes ago I've been using V1 for a long time now, and as a consumer I'm pretty impressed with what you've done and I do not mind paying to get V2 (at a reasonable price that is). Like what the other users above me said, patreon has banned “adult content" so I wouldn’t re