Раньше я вручную отправлял каждую ссылку на переиндексацию после того как обновил контент. Как сейчас быть (Вопрос про Google, в связи с отключением инструмента для индексации)? Ждать пока бот сам зайдёт на страницу и занесёт страницу с обновлённым контентом в индекс — долго. Как можно ускорить индексацию или переиндексацию страниц в Google?
Ответ
Есть несколько способов для ускорения индексации или переиндексации страниц в Google:
- Использование скрипта на базе Indexing API. Если коротко: при подключении данного скрипта к GSC у нас появляется возможность отправки на переиндексацию до 200 url в Google каждый день. Данный скрипт не новый, мы его активно используем на протяжении длительного времени. Пошаговая инструкция по настройке и подключению данного скрипта есть в нашем блоге: «Как индексировать 200 URL в Google каждый день через Indexing API«.
- Использование скрипта «Ловец ботов». Позволяет ускорить сканирование и индексацию путем подстановки ботам ссылок на непроиндексированные страницы. Однако данный метод ресурсозатратный и нет гарантированного получения результата.
- Переиндексация с помощью sitemap. Нужно создать отдельные sitemap со страницами, которых нет в индексе (чтобы было удобно отслеживать, мы дробим весь пул страниц на карты сайта по 1 тыс. — 5 тыс. URL). Однако при большем количестве страниц данный метод не сработает.
- Улучшение внутренней перелинковки. Вывести сквозные блоки с ссылками на страницы, которых нет в индексе. Например, добавить на страницу теги с другими параметрами данного товара.
- Реализация через Last-Modified. Можно настроить заголовки Last-Modified — отдавать 304 ответ для уже проиндексированных страниц, на которых не было изменений после последнего обхода бота, чтобы сосредоточить краулинговый бюджет на страницах, которые не были проиндексированы. Но данная методика крайне нерекомендуемая, так как вам придется постоянно изменять ответ сервера конкретных страниц.
- Поставить внешние ссылки. Этот метод используем для приоритетных страниц, которых нет в индексе.
- Оптимизировать краулинговый бюджет. Подробнее о том как это делать мы писали на блоге: «17 советов как увеличить краулинговый бюджет«.
Подписаться на рассылку
Еще по теме:
- Автогенерируемые страницы фильтров: нужно открывать к индексации и продвигать такие листинги? Делаем для ИМ фильтр, заказчик хочет, чтобы для каждого изменения в фильтре генерировался свой URL и метатеги. То есть по сути генерируется миллион страниц, которые...
- Как время ответа сервера (TTFB) влияет на индексацию Google? Интернет-магазин строительных товаров, сделан по типу каталожки, очень много категорий. Однако, у сайта есть проблема - время ответа сервера (TTFB) чуть ли не 2 секунды,...
- Как закрыть от индексации страницы фильтрации с частью # в адресе? Столкнулась недавно с проблемой: у нас на сайте страницы фильтрации имеют адрес с частью #. Можно ли как-то закрыть от индексации такие страницы фильтрации, при...
- Открывать ли к индексации сайт на стадии разработки? После покупки домена, начинается процесс создания, настройки и наполнения сайта. Вопрос: на домен после покупки нужно поставить заглушку и закрыть от индексации, пока сайт не...
- Может ли Cloudflare повлиять на сканирование и индексирование сайта? Подскажите, пожалуйста, чем может обернуться подключение Cloudflare или других скриптов для защиты от DDOS или накрутки? Есть версии, что подобные скрипты могут мешать сканированию сайта...
Есть вопросы?
Задайте их прямо сейчас, и мы ответим в течение 8 рабочих часов.
Отзывы клиентов:
"Изменения положительно отразились на позициях сайта"
Павел Любимов
Jazztour.ru"Наконец сайт тронулся с места"
Илья Приходько
Patent-rus.ru"Наблюдаем стремительный и уверенный рост трафика"
Пилицын Василий Сергеевич
Seatscan.ru