накрутка

Симоньян, ложь и боты «для взрослых». Как RT накручивает просмотры

Новые ТЗ для программ-накруток

Предыстория такова: искал работу как веб-разработчик. Пришло вот такое предложение:

Здравствуйте, [Имя].
В продолжение телефонного разговора, отсылаю Вам ссылки на технические задания для программы.
Вариант 1 - Программа для продвижения в социальной сети YouTube. (https://docs.google.com/document/d/19XNiB4UmiN7k0_VirTOlJmz26YvHH8AvORuk0VKOXhU/edit)
Вариант 2 - Программа для продвижения в Instagram (https://docs.google.com/document/d/1vniNfejNWMnemIXzQzk2bCbzhr1puYfKVVqjcnKi8ik/edit?usp=sharing)
Выберите вариант, с которого Вам будет легче начать.
Нас интересует следующая информация:
1) Ваше мнение о данном направлении
2) Вы ранее реализовали Desktop-приложение объединенное в единую сеть или клиент-сервер приложения?
3) У Вас есть портфолио приложений?
4) Сколько времени Вам понадобится для запуска первых версий?

Собственно что это такое:
Набирают разработчиков для написания программ-накруток на Youtube и Instagramm. Что примечательно, хотят чтобы было реализованы различные функционалы накруток, от количества просмотров/лайков/дизлайков, до их периодичности.

69 из 50

link: youtube.com/watch?v=jzfhTfNwoQc

Разработчики создали скрипт для отслеживания «кремлеботов» в комментариях на YouTube

Расширение для браузера помечает комментарии красным цветом как подозрительные.

Разработчики из сообщества «Наблюдатели» во «ВКонтакте» создали скрипт MetaBot, сортирующего комментарии на YouTube и помечающего аккаунты, которые участники считают провластными. Один из авторов скрипта 20-летний студент Роман Смолин, занимающийся наполнением базы данных подозрительных профилей, рассказал TJ, что скрипт только начал свою работу и использует небольшую базу данных.

Кто такие "Наблюдатели" и как они борются с "кремлеботами".

«Наблюдатели» — это сообщество пользователей «ВКонтакте», которые отслеживают аккаунты на YouTube с однотипными комментариями в поддержку российской власти. Разработчики создали базу данных с профилями пользователей, которых считают «кремлеботами»: там содержатся ники, ссылки на учётные записи и даты регистрации.

 

 

По словам авторов, провластные боты стали массово появляться на YouTube в июле 2017 года: тогда же в базу внесли около 100 аккаунтов. В тот же период видеоблогер Дмитрий Иванов, известный как kamikadzedead, на блокировку оппозиционных каналов и накрутку дислайков на ролики с критикой власти.

По данным «Наблюдателей», подозрительные аккаунты в первую очередь накручивали дислайки и оставляли комментарии с похвалой власти на каналах Навального, ФБК, Вячеслава Мальцева и kamikadzedead. 

В качестве признака «кремлебота» участники «Наблюдателей» выбрали дату регистрации в июле 2017 года ещё и потому, что в этот месяц запустился сервис статистики dislikeMeter.com, отслеживающий накрутку лайков и дислайков. В тот же период пользователи «Пикабу» и «Двача» заподозрили авторов «дислайкметра» в работе на Кремль из-за показа неправильной статистики.

К концу декабря 2017 года в базе данных разработчиков накопилось уже 216 подозрительных аккаунтов. По словам Смолина, после этого они с другим разработчиком решили создать бота для отслеживания комментариев. Они выбрали условную дату для отсчёта на 1 июня 2017 года.

Ко мне обратился разработчик Андрей с предложением создать скрипт, который мог бы показывать дату регистрации аккаунтов прямо на странице с комментариями, а также выделять среди них вычисленные аккаунты так называемых веб-бригад или «кремлеботов». Мы обсудили концепт, мне отводилась роль модератора базы данных, а он взялся за реализацию.

Роман Смолин

соавтор MetaBot

Бот работает в настольных браузерах и помечает "кремлеботов" красным цветом.

Используя список аккаунтов из базы данных, MetaBot помечает комментарии под роликами тремя цветами: красным («кремлебот»), жёлтый («неизвестно»), зелёный (обычный пользователь).

К красным относят тех, кто зарегистрировался после 1 июня 2017 года и чьи комментарии авторы считают подозрительными. К жёлтым — те, кто также зарегистрировался после 1 июня, но чьи комментарии ещё не проверили авторы, а к зелёным — те, кто зарегистрировался до этой даты. Для проверки комментария надо нажать на вопросительный знак над ним — справа появится дата регистрации.

Инструкция по установке MetaBot в браузер:

- Скачать расширения Violentmonkey или Tampermonkey для браузера — ссылки 

- перейти на GitHub и установить скрипт с базой данных по нажатию кнопки «Raw»;- Пользователям Mozilla придётся вручную скопировать код скрипта и вставить в расширение.

Для отслеживания подозрительных аккаунтов разработчики сверяют день создания профиля в разделе «О канале» с последними высказываниями под видео. Они сформировали собственные критерии, по которым определяют профили в базу данных:

- Постоянное появление аккаунта в комментариях под роликами оппозиции с дислайками и под видео с поддержкой российских властей, которые попадают в тренды в YouTube;
- Комментарии аккаунта получают мгновенные десятки лайков от других пользователей;
- Акцент в комментариях про Навального на «донатах», «уголовном деле» и «школьниках» в его команде.

Для проверки комментариев, которые оставляет аккаунт, используется сервис Top 30, отслеживающий высказывания в соцсетях и на YouTube. Смолин рассказал, что давал другим пользователям наполнять базу, но рано или поздно они начинали «подозревать всех подряд», поэтому он занимается этим сам.

Другие могут присылать ему ссылки на подозрительные профили в личные сообщения сообщества «Наблюдатели».

Я тщательно проверяю каждый подозрительный аккаунт, и при соответствии всем критериям они добавляются в базу данных. Если остаются хоть какие-то сомнения, то я отдельно веду список подозреваемых аккаунтов, за которыми периодически наблюдаю по последним оставленным комментариям.

Анализ трендов YouTube и определение накруток часть 2

Часть 1:
http://joyreactor.cc/post/3360569

TubeWarden - сервис, который собирает историю изменений лайков/дизлайков видео из трендов Youtube. Этот сервис в автоматическом режиме отмечает видео в которых есть подозрение на накрутку. Так же есть плагин, который в трендах Youtube отмечает подозрительные видео.

В комментариях к предыдущей статье были справедливые замечания: невозможно по одному (или нескольким) графикам  изменения лайков/дизлайков сказать, была ли накрутка. Любые подозрительные перепады можно объяснить работой CQRS, вспышками на Солнце, пьяным аднимом, который разлил сидр на сервер в недрах Google и т.д. Да, один график плавный, другой ступенчатый, но, возможно у всех видео время от времени случайным образом встречается подобное поведение?

Именно поэтому для составления общей картины нужно собирать информацию со всех видео которые попали в тренды и попытаться найти закономерности. Если получиться найти что-то общее между накрученными видео, значит подобные графики не являются чем-то случайным. Статистика собирается с 31-го декабря. Это не так много, тем не менее кое что интересное начинает прорисовываться. В данной статье описывается что удалось найти за этот срок.

Очень не хотелось ставить тег "Политота", так как накручивают не только политики, но вообще все: домохозяйки, строители, блоггеры и .т.д. Тем не менее результаты таковы, что без этого тега никуда.

Что было сделано за 3 недели (отчет перед спонсором)

Да, появился спонсор: некий добрый анон перечислил мне на кошелек (возможно, случайно) 100 деревянных, за это посылаю ему лучи добра.

1. Собирается больше информации: каналы Youtube, теги видео

2. Фильтр видео по ключевому слову. Алгоритм построения ключевых слов для видео будет описан ниже.

3. Улучшил алгоритм распознавания накруток (как мне кажется по крайней мере)

4. Изменения в интерфейсе.

5. Зарегистрировал плагин для Firefox. Пытался так же для оперы сделать но при попытке загрузить плагин выдается ошибка: Please verify your email. При этом аккаунт давно активирован.
6. Причесал код, теперь при взгляде на него глаза кровоточат чуть меньше.

Общая информация

Всего было проанализировано: 1768 видео

Из них:

накрутка лайков: 76 видео (4.3%)

накрутка дизлайков: 105 видео (6%)

накрутка лайков и дизлайков: 8 видео (0.4%)

По каждому видео статистика собирается с момента попадания видео в тренды. Статистика перестает собираться через 24 часа после выхода видео из трендов (но минимум 48 часов).

Средние показатели по лайкам/дизлайкам

Среднее количество лайков среди всех видео: 19045

Среднее количество дизлайков среди всех видео: 3287

Логично предположить, что у видео, у которых наблюдается накрутка лайков/дизлайков эти показатели будут выше среднего. На самом деле все не совсем так:

Среднее количество лайков среди накрученных видео по лайкам: 9407 (49% от среднего)

Среднее количество лайков среди накрученных видео по дизлайкам: 22598 (118% от среднего)

Среднее количество дизлайков среди накрученных видео по лайкам: 5068 (154% от среднего)

Среднее количество дизлайков среди накрученных видео по дизлайкам: 25675 (783% от среднего)

Таким образом накрутки лайков не помогают, такие видео не набирают половину от среднего показателя лайков. В то время как накрутка дизлайков работает крайне эффективно. Это связано с тем, что в среднем количество дизлайков очень низкое и из-за этого на него легче влиять.

Статистика по каналам

всего каналов: 925

Количество каналов достаточно большое по сравнению с общим количеством видео. Поэтому подавляющее большинство каналов (596) попали в тренды только один раз. 

Каналы с систематической накруткой лайков выявить не получилось. Нет ни одного канала, у которого за рассматриваемый период есть более двух накрученных видео по лайкам. Возможно, это связано с работой Youtube, периодически такие видео удаляют а каналы банят. Нужно собрать больше статистики.

А вот среди каналов с систематической накруткой дизлайков есть явный победитель.

Топ каналов, у которых больше других видео с накрученными дизлайками:

1. kamikadzedead: 17 видео (89% от общего проанализированного количества видео)

2. Новости 24/365: 8 видео  (47% от общего проанализированного количества видео)

3. Волшебная Россия: 4 видео (66% от общего проанализированного количества видео)

4. Алексей Навальный: 4 видео (80% от общего проанализированного количества видео)

5. Навальный LIVE: 3 видео (60% от общего проанализированного количества видео)

Любопытно что kamikadzedead в свое время переживал, что у его видео замораживают просмотры.  С просмотрами на Youtube вообще все интересно, но ничего подозрительного в графике просмотров на его канале мне найти не удалось. Но, как известно,  если у вас паранойя, то это еще не значит, что за вами не следят. Поздравим победителя!

Статистика по ключевым словам

У каждого видео на Youtube есть список тегов. Тегами могут быть как слова, так и словосочетания. Чтобы как-то с этим работать было сделано следующее: название и теги видео разбиваются на отдельные слова, у слов удаляются окончания. В результате получается набор ключевых слов привязанных к видео.

В этом разделе так же интересны ключевые слова на которые больше всего накручивают дизлайки, так как и в этом случае есть явный победитель. Кто же этот несчастный, которого гнобят невидимые силы, не дают ему жить? Для меня результат оказался несколько неожиданный. 
Топ ключевых слов по накрутке дизлайков:
1. Путин: 53 видео (30% от общего количества видео с этим тегом)

2. Грудинин: 38 видео (43% от общего количества видео с этим тегом)

3. Навальный: 27 видео (40% от общего количества видео с этим тегом)

4. Политика: 20 видео (22%  от общего количества видео с этим тегом)

5. Камикадзе: 19 видео (73% от общего количества видео с этим тегом)

С Путиным при ближайшем рассмотрении получается довольно занятная ситуация. У меня сложилось впечатление, что лайки накручивают на хвалебных видео, а дизлайки - на видео в которых его ругают. Впрочем, это мое субъективное ощущение, выводы  каждый может сделать сам.
Ссылка на список видео с тегом "Путин" с накрученными лайками:
https://tubewarden.ru/videos/like?s=%D0%9F%D1%83%D1%82%D0%B8%D0%BD

Ссылка на список видео с тегом "Путин" с накрученными дизлайками:
https://tubewarden.ru/videos/dislike?s=%D0%9F%D1%83%D1%82%D0%B8%D0%BD

С тегом Грудинин по моему субъективному впечатлению  ситуация другая: дизлайки накручивают на видео в которых его хвалят, а лайки - там где его ругают. Но опять же, это можно проверить самим.

Выводы
Похоже, что накручивать лайки на Youtube не так полезно. Пока не удалось найти канал, у которого за рассматриваемый период есть более двух накрученных видео по лайкам.  Возможно это связано с тем, что недавно Youtube заблокирован сразу пачку каналов которые, предположительно, занимались накрутками. Вот один пример:

https://tubewarden.ru/video/ekmvtiimsdI

По дизлайкам же удалось найти критерии по которым накрутка происходит гораздо чаще среднего.

Автоматическое определение накруток на YouTube

В эти новогодние праздники решил не бухать, а сделать какую-нибудь хрень. В результате получился проект для поиска роликов YouTube с накрученными лайками/дизлайками. Данный проект в автоматическом режиме собирает статистику и отмечает подозрительные ролики. В настоящий момент анализируются тренды только российского ютуба. Исходный код выложен на github, если кто хочет побыдлокодить - пожалуйста.

Принцип работы

1. Получает список видео, которые попали в тренды, для каждого видео запускается сбор статистики.

2. Периодически запрашивает и сохраняет в базу данных текущее количество лайков/дизлайков/просмотров для видео.

3. Выдающийся искусственный интеллект отмечает видео, у которых есть резкий скачок количества лайков/дизлайков.

Так же сделал плагин для хрома,который в трендах YouTube показывает статистику, а так же отмечает накрученные ролики:

Сбор статистики запустил вечером 31-го. В настоящий момент данных накоплено не так много, тем не менее интересные результаты есть. В первые дни этого года в трендах было 4 ролика с записью обращения некого президента, при этом 3 ролика были отмечены как накрученные по лайкам. Статистика этих роликов выглядела так:

Отличия от dislikemeter.com:

1. Открытый исходный код. Авторы dislikemeter так же планируют выложить код, но пока этого не сделали.

2. Статистика собирается в автоматическом режиме для всех видео с трендов. В дальнейшем,возможно, добавлю, чтобы статистика собиралась со всех видео с каналов, на которых замечены накрутки.

3. Из-за того что видео собираются и анализируются в автоматическом режиме нет политической агажированности. Все происходит исключительно по воле беспристрастного искусственного разума.

4. Автоматическое определение накрутки.

5. Авторыdislikemeter публикуют свои наблюдения на пикабу.

Так как я нищеброд, а деньги на сервера собирать пока не научился, то проект запущен на калькуляторе. Если одновременно зайдет больше одного человека, то все может упасть. Однако переживать не нужно, сбор статистики выполняется на отдельном сервере.

Ссылка на проект: tubewarden.ru

Оказывается,вот откуда идут сотни тысяч просмотров на неизвестных,не популярных и не нужных роликах!

Привет всем,народ! В общем,кто не знает,тут появилась очень интересная штука. Сайт Animespirit.ru стал далеко не простой штуковиной. Так как через него идёт огромный поток любителей аниме,то и накрутка на всякую хрень тоже идёт не слабая. По точнее о том,как и что,можно увидеть в новом видео Камикадзе,к примеру,либо прочитать на форуме самого Animespirit. Однако,раньше думал,что бред,а нифига подобного! И ладно бы накручивало просмотры разных малоизвестных блогеров,так нет же! С недавнего времени отсюда же пошла накрутка всякого политического бреда! И уже даже не удивительно встретить толпы охреневших от такой наглости людей под накручеными видео.
В общем,какой вывод? Пользуйтесь адблоком,если собираетесь на Animespirit или не заходите туда вовсе. Нехрен всякой шушере просмотры отдавать. Да и у вас на Ютубе чище будет в истории и рекомендованном.
P.s.: Изыняюсь,пригорело.
И да,скрин,просто для подтверждения. Даже ёбаный Ять накручивается! Охуеть!