Раньше я вручную отправлял каждую ссылку на переиндексацию после того как обновил контент. Как сейчас быть (Вопрос про Google, в связи с отключением инструмента для индексации)? Ждать пока бот сам зайдёт на страницу и занесёт страницу с обновлённым контентом в индекс — долго. Как можно ускорить индексацию или переиндексацию страниц в Google?
Ответ
Есть несколько способов для ускорения индексации или переиндексации страниц в Google:
- Использование скрипта на базе Indexing API. Если коротко: при подключении данного скрипта к GSC у нас появляется возможность отправки на переиндексацию до 200 url в Google каждый день. Данный скрипт не новый, мы его активно используем на протяжении длительного времени. Пошаговая инструкция по настройке и подключению данного скрипта есть в нашем блоге: «Как индексировать 200 URL в Google каждый день через Indexing API«.
- Использование скрипта «Ловец ботов». Позволяет ускорить сканирование и индексацию путем подстановки ботам ссылок на непроиндексированные страницы. Однако данный метод ресурсозатратный и нет гарантированного получения результата.
- Переиндексация с помощью sitemap. Нужно создать отдельные sitemap со страницами, которых нет в индексе (чтобы было удобно отслеживать, мы дробим весь пул страниц на карты сайта по 1 тыс. — 5 тыс. URL). Однако при большем количестве страниц данный метод не сработает.
- Улучшение внутренней перелинковки. Вывести сквозные блоки с ссылками на страницы, которых нет в индексе. Например, добавить на страницу теги с другими параметрами данного товара.
- Реализация через Last-Modified. Можно настроить заголовки Last-Modified — отдавать 304 ответ для уже проиндексированных страниц, на которых не было изменений после последнего обхода бота, чтобы сосредоточить краулинговый бюджет на страницах, которые не были проиндексированы. Но данная методика крайне нерекомендуемая, так как вам придется постоянно изменять ответ сервера конкретных страниц.
- Поставить внешние ссылки. Этот метод используем для приоритетных страниц, которых нет в индексе.
- Оптимизировать краулинговый бюджет. Подробнее о том как это делать мы писали на блоге: «17 советов как увеличить краулинговый бюджет«.
Подписаться на рассылку
Еще по теме:
- Влияют ли покупные ссылки на индексацию страниц сайта? Есть мнение, что новый сайт в Google будет очень долго индексироваться без покупки ссылок на него (сайт большой, около 10 000 страниц). Верное ли это...
- Скрывать ли страницы фильтров от индексации поисковыми системами? Нужно ли скрывать страницу фильтра /filter в robots.txt? Может ли поисковый краулер сгенерировать все страницы, который может выдать фильтр? Или пока на эти страницы не...
- Как улучшить индексацию страниц фильтров в ИМ? Есть интернет-магазин, фильтрация каталогов которого сейчас производится при помощи get-параметров, например site.com/catalog.html?brand=1¶m=1, закрытых от индексации через meta robots. Насколько верным будет внедрение функционала автоматического построения...
- Как правильно реализовать динамический текст в теге Н1, чтобы он был доступен для индексации? Динамический текст в h1. Как правильно с точки зрения SEO реализовать появляющийся с помощью js текст (анимация печати), ведь для поисковых роботов текст не виден?...
- Почему Google не индексирует региональные поддомены и как решить проблему? Есть сайт с региональными языковыми поддоменами. С индексацией главного сайта проблем нет, но вот страницы поддоменов Google никак не хочет индексировать. Практически все "Просканировано, но...
Есть вопросы?
Задайте их прямо сейчас, и мы ответим в течение 8 рабочих часов.
Отзывы клиентов:
"Ощутимый рост позиций после второго апа"
Абрамов Дмитрий Сергеевич
Dvermezhkom-service.ru"Наконец сайт тронулся с места"
Илья Приходько
Patent-rus.ru"С первого контакта до положительного ответа Яндекса прошло 2 недели"
Александр Кисленко
Ovkuse.ru