Как можно ускорить индексацию или переиндексацию страниц в Google?

Ответ

Есть несколько способов для ускорения индексации или переиндексации страниц в Google:

1. Использование скрипта на базе Indexing API. Если коротко: при подключении данного скрипта к GSC у нас появляется возможность отправки на переиндексацию до 200 url в Google каждый день. Данный скрипт не новый, мы его активно используем на протяжении длительного времени. Пошаговая инструкция по настройке и подключению данного скрипта есть в нашем блоге: «Как индексировать 200 URL в Google каждый день через Indexing API«.
2. Использование скрипта «Ловец ботов». Позволяет ускорить сканирование и индексацию путем подстановки ботам ссылок на непроиндексированные страницы. Однако данный метод ресурсозатратный и нет гарантированного получения результата.
3. Переиндексация с помощью sitemap. Нужно создать отдельные sitemap со страницами, которых нет в индексе (чтобы было удобно отслеживать, мы дробим весь пул страниц на карты сайта по 1 тыс. — 5 тыс. URL). Однако при большем количестве страниц данный метод не сработает.
4. Улучшение внутренней перелинковки. Вывести сквозные блоки с ссылками на страницы, которых нет в индексе. Например, добавить на страницу теги с другими параметрами данного товара.
5. Реализация через Last-Modified. Можно настроить заголовки Last-Modified — отдавать 304 ответ для уже проиндексированных страниц, на которых не было изменений после последнего обхода бота, чтобы сосредоточить краулинговый бюджет на страницах, которые не были проиндексированы. Но данная методика крайне нерекомендуемая, так как вам придется постоянно изменять ответ сервера конкретных страниц.
6. Поставить внешние ссылки. Этот метод используем для приоритетных страниц, которых нет в индексе.
7. Оптимизировать краулинговый бюджет. Подробнее о том как это делать мы писали на блоге: «17 советов как увеличить краулинговый бюджет«.

Еще по теме:

• Почему страницы получают статус «Проиндексировано, несмотря на блокировку в файле robots.txt»?
В GSC у части страниц статус "Проиндексировано, несмотря на блокировку в файле robots.txt". Почему страницы индексируются, если они заблокированы? Страницы мусорные, поэтому желательно их удалить...
• Как проверить маршрут поискового робота по сайту и увеличить частоту индексации страниц?
Очень странно попадают страницы в индекс сайта - то днями ждать нужно, то сразу после создания. Как проверить маршрут робота по сайту? Хочу узнать причину...
• Как время ответа сервера (TTFB) влияет на индексацию Google?
Интернет-магазин строительных товаров, сделан по типу каталожки, очень много категорий. Однако, у сайта есть проблема - время ответа сервера (TTFB) чуть ли не 2 секунды,...
• По каким причинам тестовый сайт мог попасть в индекс и что делать в таком случае?
Делали запуск нового сайта и через время заметили, что в поиске появился тестовый сайт. Проверили - в роботс стоит игнор. Как так могло выйти, что...
• Что означает статус страниц «Обнаружена, не проиндексирована» и как это устранить?
Подскажите, в Google Search Console начало выдавать большую часть карточек товара со статусом «Обнаружена, не проиндексирована». Как устранить это? Ответ Это значит что Googlebot обнаружил...

---

Евгений

SEO-аналитик

Юрист по образованию. Что такое SEO узнал на собеседовании. Прошел тернистый путь от контент-менеджера к SEO-аналитику.

Девиз:  Юмор. Сохраняй чувство юмора, особенно в отношении себя самого — это безграничная сила.

e.zavgorodnij@siteclinic.ru

Оцените мою статью: 

(Пока оценок нет)