Раньше я вручную отправлял каждую ссылку на переиндексацию после того как обновил контент. Как сейчас быть (Вопрос про Google, в связи с отключением инструмента для индексации)? Ждать пока бот сам зайдёт на страницу и занесёт страницу с обновлённым контентом в индекс — долго. Как можно ускорить индексацию или переиндексацию страниц в Google?
Ответ
Есть несколько способов для ускорения индексации или переиндексации страниц в Google:
- Использование скрипта на базе Indexing API. Если коротко: при подключении данного скрипта к GSC у нас появляется возможность отправки на переиндексацию до 200 url в Google каждый день. Данный скрипт не новый, мы его активно используем на протяжении длительного времени. Пошаговая инструкция по настройке и подключению данного скрипта есть в нашем блоге: «Как индексировать 200 URL в Google каждый день через Indexing API«.
- Использование скрипта «Ловец ботов». Позволяет ускорить сканирование и индексацию путем подстановки ботам ссылок на непроиндексированные страницы. Однако данный метод ресурсозатратный и нет гарантированного получения результата.
- Переиндексация с помощью sitemap. Нужно создать отдельные sitemap со страницами, которых нет в индексе (чтобы было удобно отслеживать, мы дробим весь пул страниц на карты сайта по 1 тыс. — 5 тыс. URL). Однако при большем количестве страниц данный метод не сработает.
- Улучшение внутренней перелинковки. Вывести сквозные блоки с ссылками на страницы, которых нет в индексе. Например, добавить на страницу теги с другими параметрами данного товара.
- Реализация через Last-Modified. Можно настроить заголовки Last-Modified — отдавать 304 ответ для уже проиндексированных страниц, на которых не было изменений после последнего обхода бота, чтобы сосредоточить краулинговый бюджет на страницах, которые не были проиндексированы. Но данная методика крайне нерекомендуемая, так как вам придется постоянно изменять ответ сервера конкретных страниц.
- Поставить внешние ссылки. Этот метод используем для приоритетных страниц, которых нет в индексе.
- Оптимизировать краулинговый бюджет. Подробнее о том как это делать мы писали на блоге: «17 советов как увеличить краулинговый бюджет«.
Подписаться на рассылку
Еще по теме:
- Стоит ли закрывать страницы пагинации от индексации? Что делать, если количество страниц пагинации в каталоге в некоторых категориях более 1000? Есть ли какой-то лимит? Стоит ли оставлять как есть или как оптимизировать...
- Надо ли закрывать от индексации трастовые страницы (Payment, Delivery, Terms of Use, Cookie, Privacy Policy)? Как думаете, трастовые страницы (например, Payment & Delivery, terms, cookie и privacy policy, др.) нужно делать индексируемыми или лучше закрыть в meta name="robots" content="noindex, follow"?...
- Почему страницы со временем могут удалятся из индекса поисковых систем? По каким причинам страницы могут исключаться из индекса, если до этого страницы нормально индексировались? Ответ Основные причины, которые влияют на выпадение страниц из индекса. Технические,...
- Как проверить маршрут поискового робота по сайту и увеличить частоту индексации страниц? Очень странно попадают страницы в индекс сайта - то днями ждать нужно, то сразу после создания. Как проверить маршрут робота по сайту? Хочу узнать причину...
- «Страница является копией. Канонические версии страницы, выбранные Google и пользователем, не совпадают» — как решить ошибку? Канонические версии страницы, выбранные Google и пользователем, не совпадают. Почему возникает ошибка и как с ней бороться? Ответ Чаще всего ошибка «Страница является копией. Канонические...
Есть вопросы?
Задайте их прямо сейчас, и мы ответим в течение 8 рабочих часов.
Отзывы клиентов:
"Изменения положительно отразились на позициях сайта"
Павел Любимов
Jazztour.ru"Работы на 100%. Очень рекомендую"
Емельянов Данил Юрьевич
Tortoliano.ru"Я получил рекомендации и процесс сдвинулся с мёртвой точки."