Ответ
Если вы уже установили crawl-rate в Google Search Console на минимальное значение, и Google всё равно слишком активно сканирует ваш сайт, стоит убедиться, что это делают действительно google-боты. Выгрузите логи сайта и пересмотрите user-agent во время пиковой нагрузки сервера.
Кроме того, убедитесь, что ваш сервер действительно хорошо оптимизирован. Используйте кеширование, оптимизируйте базу данных, уменьшите размер страниц и статические ресурсы, где это возможно.
Есть также рискованный метод, который рекомендует Справка Google для уменьшения частоты сканирование на короткий промежуток времени. Показывайте вместо контента страницу с кодом статуса HTTP 500, 503. Справка утверждает, что в таком случае робот Googlebot будет сканировать ваш ресурс реже.
Учтите, что данный способ может значительно повлиять на ранжирование сайта в негативную сторону.
Помните, если у вас будет грамотная и простая структура, если ваши страницы будут загружаться и отрисовываться быстрее, Google сможет просканировать быстрее контент на вашем сайте, что также косвенно может помочь решить вашу проблему.
Что касается переноса сайта с одного сервера на другой, то тут обычно проблем возникать не должно. С каждым хостингом могут быть индивидуальные нюансы, но можем дать общие рекомендации:
- Прежде всего, создайте резервные копии всех файлов и базы данных вашего сайта.
- Перед тем как перенести сайт полностью, настройте его на новом сервере и проведите тестирование. Убедитесь, что все работает корректно.
- После того как вы убедились, что ваш сайт работает на новом сервере, обновите записи DNS.
- Убедитесь, что SSL-сертификат корректно установлен на новом сервере.
Хотите получить ответ на свой вопрос? Задайте его нам через телеграм-бота!↓
Еще по теме:
- Как с минимальными потерями для позиций перенести сайт с поддомена на новый домен? Как наиболее безболезненно для позиций перенести сайт с поддомена на новый домен? Ответ Пошаговый план безболезненного переноса сайта с поддомена на совершенно новый домен с...
- Как правильно залить на старый домен новый сайт такой же тематики, но отличный по содержанию? Есть старый домен, на котором кривой сайт с возрастом и некоторыми позициями. Как правильно залить на этот домен новый сайт такой же тематики, но отличный...
- Как проверить пустой домен без сайта на предмет фильтров от поисковых систем? Как можно проверить пустой домен без сайта на предмет банов/фильтров от поисковых систем? История домена есть в wayback machine, но сайта того нет. Ответ Есть...
- Надо ли делать постраничный редирект при переезде на другую CMS? Переносим интернет-магазин на другую CMS. Мы сейчас делаем новый сайт, думаю по поводу редиректов: делать только на основные страницы каталога? На товары как понимаю чисто...
- Сколько времени занимает процесс склейки домена в Google и можно ли его ускорить? Сайт изначально был www, потом стал no-www. Google продолжает выдавать результаты поиска с www версией и no-www версией вперемешку, как удалить результаты с www из...
Есть вопросы?
Задайте их прямо сейчас, и мы ответим в течение 8 рабочих часов.
Отзывы клиентов:
"Результат ‒ восстановление доли трафика Яндекса"
Ирина Смирнова
Diagnos.ru"Мы увидели рост по целому пулу запросов"
Деревянко П.Н.
Expertology.ru"С первого контакта до положительного ответа Яндекса прошло 2 недели"
Александр Кисленко
Ovkuse.ru