- (Обновлено: ) Siteclinic
- 8 минут
- Анализ события
Скользкая тема для статьи, которую не принято обсуждать публично. Актуальной информации в сети мало, мифы и домыслы набирают обороты. Теперь каждый второй клиент задаёт вопросы по накрутке:
- Посмотрите конкурентов, они крутят?
- У меня упали позиции. Меня крутят?
- А вы крутите?
Итак, что происходит. Конверсии из органической выдачи Яндекса падают, сегодня 5-е место по коммерческому запросу может совсем не приводить клиентов. Обилие рекламных блоков и сервисов Яндекса убивает конверсию с «органики».
На таком фоне у SEO-специалиста появляется более сложная задача: «Быть в ТОП-3», а это война, в которой все методы хороши. Война в государстве «Яндекс»: накрутчики воюют между собой, а антифрод-отдел пишет законы по борьбе с накрутчиками. Клиенты спонсируют эту игру.
Немного истории
Начиналось всё с сервисов а-ля «юзератор». Накрутка работала, но масштабироваться не могла, ибо дорого, и санкции в виде 9 месяцев бана тормозили процесс. Антифрод-защита была довольно примитивная, но ситуация была под контролем за счёт ручных банов.
Превалирование рекламных блоков и сервисов Яндекса в выдаче усугубили дальнейшие события. Компании перестали получать прежний органический трафик, затраты на сайт не окупались, терять стало нечего.
Спрос на накрутку начал расти, в итоге появилось около 10 сервисов и программ автоматической накрутки, без участия реальных людей с девайсами.
Ещё год назад мы следили за кейсами по накрутке ботами и видели, как за неделю сайты заходили в ТОП-1-2 по всем коммерческим запросам их тематики. Было достаточно переходить по основному ВЧ ключу, и вся низкочастотка подтягивалась за основным запросом.
Яндекс уже не мог определить причастность владельцев домена к накрутке, массовые санкции прекратились, велась активная работа над антифрод-фильтром.
Сейчас мы наблюдаем успехи Яндекса по борьбе с накруткой поведенческих факторов. Не работают массовые клики по ВЧ запросам, не работают переходы от ботов без истории. Но накрутка всё равно работает, хотя и с меньшим эффектом.
Как сейчас работает накрутка?
Простые времена накрутчиков прошли, всё стало сложнее. Существует две основные версии программ для накрутки: на основе zennoposter и на основе BAS. Ниже будет идти речь только об одной из версий программы для эмуляции поведения пользователей на основе Zennoposter. У программы есть несколько разных шаблонов от разных авторов.
Боты
Если раньше можно было эмулировать клики пользователей от новоиспечённых ботов без истории, и это влияло на ранжирование, то сейчас это не работает. Теперь боты создаются и нагуливаются днями или неделями, а их история копится в cookies.
Чтобы сделать один-единственный клик в выдаче Яндекса, бот может месяц до этого ходить по разным запросам из выдачи Яндекса и просто сёрфить по сайтам.
Боты для мобильных телефонов и десктопных устройств нагуливаются отдельно. Причём каждый накрутчик может задавать свой алгоритм поведения пользователя по времени и числу просмотренных страниц.
Каждый бот уникален, у него своё имя, свой девайс с неким стабильным разрешением экрана, операционная система, браузер, свой возраст и пол. Бот может иметь учётную запись в Яндексе.
Сделано всё, чтобы не было футпринтов.
Процесс накрутки
Начиналось всё с ввода запроса в Яндексе и клика по нужному сайту. CTR по запросу рос и сайт поднимался в выдаче. Яндекс пресёк такую накрутку. Сейчас всё намного сложнее, число ботовых запросов увеличилось в разы.
Бот может сделать несколько уточняющих запросов в Яндексе, посмотреть по ним сайты и только потом набрать нужный запрос. А может сразу начать с нужного запроса, посетить несколько сайтов конкурентов и перейти на нужный сайт.
Из-за такого сценария страдают сайты конкурентов, т. к. они получат заходы с отказами.
Боты умеют делать ошибки в запросе, исправлять их, водить мышкой, листать страницы выдачи. Могут предварительно авторизоваться в Яндексе, посещать сервисы Яндекса и даже заполнять капчу.
Перейдя на сайт, бот проведёт нужное время на сайте, просмотрит несколько рандомных страниц либо точно заданных в сценарии. Он может заполнять формы, класть товар в корзину… В общем – эмулировать активную деятельность.
Тот же софт умеет делать прямые заходы, переходы с сайтов и социальных сетей с полной эмуляцией поведения.
Так выглядят 28 параллельных потоков в Zennoposter:
Вебвизор Яндекса фиксирует поведение, выглядит оно немного неуклюже, но визуально нет уверенности, что это делает бот.
Что крутят?
Хотя процедура называется «накручивание поведенческих факторов», нужно понимать, что крутят в основном CTR запроса и невозврат в выдачу. Поведение пользователя (бота) – неоднозначный показатель для ранжирования.
Если у вас растёт показатель отказов, падает время на сайте и число просмотренных страниц, то, возможно, конкуренты крутят себя, а в вас летят шишки…
Оборудование
Опять-таки опишем историческую картину. Когда-то программа для накрутки поведенческих факторов могла работать на обычном домашнем компьютере в 20 параллельных потоков. В то время не нужно было создавать ботов и все ресурсы машины уходили на 20 эмуляторов браузера и некие действия в нём.
Сейчас потребуются ресурсы для нагуливания ботов (мобильные и десктопные отдельно). И для походов в Яндекс, опять-таки отдельные потоки на десктопы и мобильные.
Итого вам потребуется уже не 20, а 60 потоков для работы в прежнем ритме. Обычный компьютер не справится с такой нагрузкой, в идеале нужны двухпроцессорные сервера на 20 и более ядер и ОЗУ не менее 64 Гб.
Прокси
Накрутка поведенческих факторов осуществляется в основном через интернет от мобильных операторов. За счёт регулярного сброса соединения меняется IP-адрес бота, и каждый заход в Яндекс происходит с нового IP. На одном адресе могут одновременно быть и реальные люди, и ваш бот, что усложняет задачу для антифрода.
Сами прокси разделяются по качеству канала, они могут быть общими, ширина канала у таких обычно 1,5 Мб. Прокси могут быть приватными, когда на канале сидите только вы. Ещё есть Мультипорт – это прокси с возможностью управлять сменой IP.
Стоимость одной shared прокси на airsocks.in 600-700 руб/мес. Для работы в 20 потоков нужно 20 прокси разных операторов.
Если вы хорошо разбираетесь в администрировании серверов, то можно самим собрать приватные прокси.
Себестоимость
Итак, во что это выльется?
- Арендный сервер в Германии Hetzner – около 10 000 руб/мес.
- 20 прокси – 15 000 руб/мес.
- Программа – 5-10 000 руб/мес.
- Ваше время – ? руб/мес.
Вашего времени уйдёт очень много. Настройка самой программы занимает немало времени. Постоянные обновления и нестабильность программы требуют постоянного присмотра.
В результате вы можете не получить результата, т. к. слишком много факторов нужно учитывать. Сама программа для накрутки – это только инструмент, с помощью которого можно провести эксперименты и лучше понять алгоритм работы Яндекса. Вам никто не расскажет о рабочих алгоритмах.
Подумайте, куда выгоднее вложить ваше время?
Вопросы по накрутке
Стоит ли накручивать поведенческие факторы?
Ранее мы не рекомендовали клиентам использовать накрутку ПФ для серьезных сайтов, но все меняется. Сейчас основной фактор ранжирования в Яндекс — это ПФ, он преобладает над остальными факторами. Только за счет ПФ можно держать сайт на первых местах при условии что все остальные SEO параметры сайта в норме.
Если конкуренты в выдаче явно используют данный метод, то у вашего сайта нет шансов быть выше их используя белые методы. Это не справедливо, но мы не один раз сталкивались с игнорированием службой поддержки Яндекса кейсов по накрутке. Яндекс пытается решить вопрос комплексно и не вникает в частные случаи.
Куда тут без накрутки?
Каковы риски накрутки поведения?
Уже несколько лет не было массовых банов, чаще всего блокировались низкокачественные сайты с грубыми попытками накрутки.
Последняя волна банов за ПФ была в сентябре 2020 года, недобросовестные веб-мастера получили сообщения в Яндекс.Вебмастере:
«Имитация действий пользователей
После нажатия кнопки следующая возможность отправить сигнал об исправлении появится через 29 дней.
Позиции сайта в результатах поиска понижены.
Использование имитации действий пользователей поисковой системы.
Вероятно, для продвижения Вашего сайта были использованы сервисы или программы, реализующие подобные методы — например, Userator, TrafficStore, WebEffector, SerpClick, Seopult, RoboClick, SEOBonus, SEOPickup и т. п. Возможно, это было сделано компанией, оказывающей услуги поискового продвижения для Вашего сайта.
Обычно ограничения действуют ещё 8-12 месяцев после устранения нарушения.»
Бан коммерческого сайта в Яндексе на 1 год может разорить бизнес, в таких случаях накрутка неприемлема. В серых нишах, где сайты банятся каждый день по разным причинам, накрутка является обычным инструментом.
Более мы не сталкивались с такими блокировками.
Могут ли конкуренты накрутить плохое поведение?
Могут и делают. Но не стоит паниковать и сваливать все грехи на накрутку. Боты бывают разные. Сейчас много софта, которым можно «налить» бесполезных ботов. Они влияют разве что на графики в Яндекс.Метрике, антифрод их отсекает.
Следите за изменением позиций – если они начали падать, то стоит задуматься. В основном Яндекс не реагирует на плохую накрутку.
Как защищаться от накрутки конкурентами?
Мало смысла защищаться. Вы никак не закроетесь от клика по вашему сайту в выдаче Яндекса. Это основной фактор.
Было бы хорошо не пускать ботов на сайт, если вы умеете корректно вычислять ботов и правильно их блокировать, то вы можете помешать нагуливанию ботов на вашем сайте.
Как определить, что меня крутят конкуренты?
Основной показатель накрутки – это переходы с сетей мобильных операторов. В обычное время их очень мало, во время накрутки они начинают преобладать. Если у вас установлен вебвизор, то вы можете увидеть это в поле IP-сеть.
Если вы видите преобладание мобильных операторов:
- Tele2 Russia IP Network;
- Metropolitan branch of OJSC Megafon;
- Mobile subscribers pool;
- YOTA – Moscow and Moskovskaya oblast.
… то стоит обратить внимание на поведение таких пользователей.
В Метрике можно посмотреть отчёт по поисковым фразам, добавив в отчёт колонку «Роботность» – так вы увидите накрутку по каждому запросу.
Это сработает, только если в настройках метрики вы не применили фильтр, отсекающий трафик по поведению. Качественных ботов с профилями в этих отчётах вы тоже не увидите.
Ранее мы писали подробнее о том, как проявляется прямая накрутка, как выявить ботов и найти, откуда они идут.
Показатели роботности в Яндекс Метрике очень условные, не всегда им можно доверять.
Где заказать накрутку?
1. Мы можем проконсультировать вас по вопросам накрутки ПФ в телеграме @siteclinic.
2. Существуют сервисы накрутки Userator, WebEffector, SerpClick, Seopult, RoboClick и т. п. находятся под пристальным вниманием Яндекса.
Работает ли накрутка в Google?
Антифрод-защита в Google серьёзнее, чем в Яндексе. Но и там есть успешные кейсы накрутки. Цены выше, профили ещё более сложные. Рентабельность для русскоязычных регионов сомнительна.
Накрутка ПФ в Google наиболее эффективна на западном рынке, т.к. объемы ботового трафика там меньше, небольшие объемы ботового трафика дают результаты.
Выводы
Мы уверены, что ребята из Яндекса будут и дальше дорабатывать алгоритм антифрода, а поднимать позиции путём накрутки будет ещё сложнее. Тем временем профессионалы поискового продвижения не могут игнорировать серый метод, они пробуют, изучают его влияние.
В ситуациях, когда ваш сайт в ТОП-10 по коммерческим ВЧ запросам в Москве, вы автоматически получаете ботовый трафик. Никто вам точно не скажет, повлиял он на ваши позиции или нет. Нужно ли улучшать поведенческую картину искусственно или ждать, когда Яндекс сам решит этот вопрос? Решать вам.
Читайте кейс как мы вывели сайт из-под фильтра за накрутку пф.
Ваши вопросы:
Как защититься от накрутки ПФ?
Как определить негативную накрутку ПФ?
Работает ли накрутка поведенческих факторов в Google?
Почему боты посещают мой сайт с хорошим поведением?
Резко вырос показатель роботности в Метрике. Что делать?
Если Вы всё же решили остаться на белой стороне и играть по-честному — обращайтесь к нам!
Еще по теме:
- Как Google может отнести сайт к низкокачественным. Ссылочный показатель качества Подготовили адаптированный перевод статьи зарубежного специалиста Билла Славски, который рассказывает об одном из патентов Google, ориентированном на определение ресурсов как низкокачественных. Читайте, какие ссылочные показатели...
- 3 шага в Яндекс.Метрике: ищем источник падения трафика Часто вебмастера сразу начинают менять все на сайте, хотя причиной падения трафика могли стать пару запросов на одну конкретную страницу. Поэтому не нужно спешить, а...
- Новые инструменты в Яндекс. Вебмастере и способы их использования для оптимизации сайта Яндекс. Вебмастер стремительно развивается и продолжает радовать новым и полезным функционалом. В прошлом году мы подготовили обзор инструментов и инструкции по работе с обновлённым Вебмастером. С...
- Как поведение пользователей на сайте может сказаться на ранжировании. Исследование Яндекса Мы подготовили для вас адаптированный перевод исследования Яндекса о пользовательских факторах, представленного на конференции CIKM 2013 (Бёрлингейм, в ноябре 2013). В докладе идет речь об...
- Обзор SEO-новостей за 2019 год: как менялась выдача Яндекса и Google Мы постоянно следим за новостями SEO-индустрии и каждую пятницу публикуем несколько самых важных в нашем facebook и twitter. В этой статье мы собрали новости с...
Есть вопросы?
Задайте их прямо сейчас, и мы ответим в течение 8 рабочих часов.
Ну что вы людей кошмарите? Учет пф часть алгоритма ранжирование, использовать его также естественно как и ссылки или контент — качественные методы должны преобладать на количественными.
Можно конечно и в директ напрямую денег носить, но и там нет гарантий что будут заходить не боты 😉
Есть один пример — сайт попал под раздачу в середине июля (упал до 40-70 позиций), а 20 сентября вылетел из топ-100 по всем запросам (в том числе по витальным).
При этом в Вебмастере сообщения о санкциях нет. И владелец ничего не крутил.
Но при этом были (и есть) боты в Вебвизоре из мобильных подсетей. Также кто-то явно накручивает брендовые подсказки (с названием компании).
Короче говоря, в дополнение к тому, что вы описали в статье, стоит также сказать не только о негативной «скрутке» ПФ конкурентами, но и о накрутке положительных ПФ, которые приводят к бану. Причём, бан скрытый (без оповещения в Вебмастере). Об этом вчера на стриме говорил Дмитрий Севальнев — можно у него на канале посмотреть.
А про накрутку в Гугле на конференции BDD был отличный кейс у Михаила Шакина про Google в США — тоже на ютубе можно глянуть.
В общем, с этими накрутчиками не знаешь что и делать. Яндекс банит всех направо и налево — без разбора.
Пробовали ставить Botfaqtor — толку нет (умные боты в Вебвизоре остаются). Может Botguard поможет или ещё что-то из антиботов.
Может, у кого-то есть успешные кейсы фильтрации такого паразитного трафика?
Фильтровать трафик может только Яндекс. Все что фильтруется на сайте не имеет значения.
Можно даже метрику снести, толку не будет. Клик в выдаче был, Яндекс не распознал бота — все… остальное поисковик не особо интересует.
Вот зашёл человек в выдачу, нажал средней кнопкой мыши по 10 сайтам, открылось 10 вкладок в фоне. Он нажал на первую из них, после чего закрыл браузер.
Вопрос — остальным 9 сайтам защитается возврат в выдачу (и соответственно — негативные ПФ)? Человек ведь по факту даже не смотрел эти 9 вкладок.
Так вот, единственный способ для Яндекса это узнать — либо через Метрику, либо через Яндекс.Браузер.
А если при открытии сайта был получен HTTP-ответ не 200 ОК, а 403 Forbidden — то Яндекс это поймёт даже без Метрики и Яндекс.Браузера, потому что переход из выдачи идёт через скрипт редиректа. И именно этот скрипт получает HTTP-ответ от сайта. И если HTTP-ответ не 200, то Яндекс видит, что сайт не был открыт.
Короче, если бы значение имел только клик на выдаче, то все сайты, открываемые среднеё кнопкой мыши, получали бы незаслуженные «возвраты в выдачу» и негативные ПФ — но этого не происходит. Значит, одного клика в выдаче недостаточно.
Можно все 10 кликов учесть как балл за CTR. Почему CTR не может считаться сам по себе? А длинные клики по запросу сами по себе…
Если 10 окон были открыты с минимальной паузой то это не возврат в выдачу. Если сайты открываются по очереди с приличной паузой, то это возврат в выдачу.
Яндекс увидит 403 Forbidden и хорошо к этому отнесется?
Проблема в том, что таких случаев слишком много. Получается, их просто отбросить и не использовать в формуле расчёта ПФ? Использовать только для CTR? По этой логике можно вообще ПФ отключить от греха по-дальше…
403 — это плохо, разумеется. Но это не тоже самое, что 200, а потом возврат. То есть, это разные «возвраты» всё-таки.
Просто если Яндекс видит, что к тебе заходят боты-накрутчики из выдачи — это одно дело. А если он видит, что эти же боты к тебе заходят ещё и по прямым заходам, то это может быть более сильным сигналом о том, что ты крутишь себе сам и тебя надо забанить. Вот с этим и столкнулись многие в середине июля и конце сентября.
Спасибо! за пост коллеги. Хороший блог
Похоже что у Яндекса не получилось бороться с ботами, они решили вернуться к старому методу «пугаем и баним». Чую появится услуга «бан конкурентов».
Лучше не накручивать.
Пробовал на пару дней воспользоваться услугами одно спеца, все позиции просели.
Когда устанавливаешь браузер на комп, будь-то яндекс или гугл, Они имеют свои фишки, о которых только они знают как узнавать реальный ли трафик или нет. Так что самое первое это дело в браузере, а уже потом всё остальное.Но крутить нужно естественно, начиная с перехода по ссылкам, которые ссылаются на ваш сайт и потом уже через время с позиций, которые находятся в выдаче. И потом уже всё остальное…плюс не забывайте про куки, кеш, шмеш и т.д.
Было и есть. Консалтинговые услуги, показатели прямых заходов доходили до 70-80% и так каждый день, заходы были в основном через операторов мобильной связи.
Ну и через полгода, привет, позиции ушли за минус 30-40, а количество показов уменьшилось в разы.
Сейчас вот борюсь, специальной программой, вроде как всё отсекает, стало наоборот, с поиска больше ю, а прямых почти нет. Наблюдаю….