Как можно ускорить индексацию или переиндексацию страниц в Google?

Ответ

Есть несколько способов для ускорения индексации или переиндексации страниц в Google:

1. Использование скрипта на базе Indexing API. Если коротко: при подключении данного скрипта к GSC у нас появляется возможность отправки на переиндексацию до 200 url в Google каждый день. Данный скрипт не новый, мы его активно используем на протяжении длительного времени. Пошаговая инструкция по настройке и подключению данного скрипта есть в нашем блоге: «Как индексировать 200 URL в Google каждый день через Indexing API«.
2. Использование скрипта «Ловец ботов». Позволяет ускорить сканирование и индексацию путем подстановки ботам ссылок на непроиндексированные страницы. Однако данный метод ресурсозатратный и нет гарантированного получения результата.
3. Переиндексация с помощью sitemap. Нужно создать отдельные sitemap со страницами, которых нет в индексе (чтобы было удобно отслеживать, мы дробим весь пул страниц на карты сайта по 1 тыс. — 5 тыс. URL). Однако при большем количестве страниц данный метод не сработает.
4. Улучшение внутренней перелинковки. Вывести сквозные блоки с ссылками на страницы, которых нет в индексе. Например, добавить на страницу теги с другими параметрами данного товара.
5. Реализация через Last-Modified. Можно настроить заголовки Last-Modified — отдавать 304 ответ для уже проиндексированных страниц, на которых не было изменений после последнего обхода бота, чтобы сосредоточить краулинговый бюджет на страницах, которые не были проиндексированы. Но данная методика крайне нерекомендуемая, так как вам придется постоянно изменять ответ сервера конкретных страниц.
6. Поставить внешние ссылки. Этот метод используем для приоритетных страниц, которых нет в индексе.
7. Оптимизировать краулинговый бюджет. Подробнее о том как это делать мы писали на блоге: «17 советов как увеличить краулинговый бюджет«.

Еще по теме:

• Как замедлить скорость сканирования Googlebot? Как избежать проблем при переносе сайта на другой сервер?
Подскажите, пожалуйста, есть ли какой-то метод вынудить google бота cканировать медленнее? Сrawl-rate в консоли я поставил маленький совсем, в robots лишнее закрыто. Бот все равно...
• Влияет ли отсутствие сохранённой копии страниц на индексацию и ранжирование?
Не сохраняется кэш сайта в поисковых системах – ни в Google, ни в Яндекс. При переходе из поиска на "Сохраненная копия сайта" редиректит на 404...
• Должен ли индексироваться текст из всплывашек в листингах интернет-магазина?
Часто в листингах ИМ при наведении курсора на элемент выводятся характеристики товара. Вопрос: должен ли этот текст индексироваться? Если должен, какие характеристики туда стоит вписывать,...
• Автогенерируемые страницы фильтров: нужно открывать к индексации и продвигать такие листинги?
Делаем для ИМ фильтр, заказчик хочет, чтобы для каждого изменения в фильтре генерировался свой URL и метатеги. То есть по сути генерируется миллион страниц, которые...
• Как проверить не мешает ли прелоадер индексированию страниц сайта?
На сайте есть preloader, который действует, пока контент страницы полностью не загрузится. Вопросы в связи с этим: как вообще поисковики реагируют на такие прелоадеры? Как...

---

Евгений

SEO-аналитик

Юрист по образованию. Что такое SEO узнал на собеседовании. Прошел тернистый путь от контент-менеджера к SEO-аналитику.

Девиз:  Юмор. Сохраняй чувство юмора, особенно в отношении себя самого — это безграничная сила.

e.zavgorodnij@siteclinic.ru

Оцените мою статью: 

(Пока оценок нет)