Ответ
Если вы уже установили crawl-rate в Google Search Console на минимальное значение, и Google всё равно слишком активно сканирует ваш сайт, стоит убедиться, что это делают действительно google-боты. Выгрузите логи сайта и пересмотрите user-agent во время пиковой нагрузки сервера.
Кроме того, убедитесь, что ваш сервер действительно хорошо оптимизирован. Используйте кеширование, оптимизируйте базу данных, уменьшите размер страниц и статические ресурсы, где это возможно.
Есть также рискованный метод, который рекомендует Справка Google для уменьшения частоты сканирование на короткий промежуток времени. Показывайте вместо контента страницу с кодом статуса HTTP 500, 503. Справка утверждает, что в таком случае робот Googlebot будет сканировать ваш ресурс реже.
Учтите, что данный способ может значительно повлиять на ранжирование сайта в негативную сторону.
Помните, если у вас будет грамотная и простая структура, если ваши страницы будут загружаться и отрисовываться быстрее, Google сможет просканировать быстрее контент на вашем сайте, что также косвенно может помочь решить вашу проблему.
Что касается переноса сайта с одного сервера на другой, то тут обычно проблем возникать не должно. С каждым хостингом могут быть индивидуальные нюансы, но можем дать общие рекомендации:
- Прежде всего, создайте резервные копии всех файлов и базы данных вашего сайта.
- Перед тем как перенести сайт полностью, настройте его на новом сервере и проведите тестирование. Убедитесь, что все работает корректно.
- После того как вы убедились, что ваш сайт работает на новом сервере, обновите записи DNS.
- Убедитесь, что SSL-сертификат корректно установлен на новом сервере.
Хотите получить ответ на свой вопрос? Задайте его нам через телеграм-бота!↓
Еще по теме:
- Как поступать с товарами при переезде ИМ с поддоменов на подпапки? Перевожу проект с поддоменов на подпапки, вопрос в товарах: имеет ли смысл закрывать товары в регионах от индексации? И если да, то имеет ли смысл...
- Когда лучше поменять структуру сайта при переезде на новый домен и как правильно сделать перенос? Нужно с сайтом переехать на новый домен, также нужно структуру всю поменять. Как лучше сделать: сначала переехать, и потом только структуру менять, или сразу на...
- Влияние смены тематики сайта на продвижение в Яндексе Могут ли быть проблемы с продвижением, если на домене 2 года назад был сайт другой компании, с другим направлением, с другого региона России? Или после...
- Как перенести вес и позиции с одного домена на другой и не попасть под фильтр? Как сейчас перенести вес и позиции с одного домена на другой? Без фильтров, два живых сайта. Структура разная, делаю 301 все страницы в морду -...
- Надо ли делать редиректы со страниц без ценного контента и системных страниц при переезде сайта на новый домен? У нас сейчас переезд сайта на новый домен с новым движком. Вопрос: нужно ли делать редиректы со страниц, которые не имеют ценности контента, с системных...
am@siteclinic.ru
Оцените мою статью:
(Пока оценок нет)Есть вопросы?
Задайте их прямо сейчас, и мы ответим в течение 8 рабочих часов.
Отзывы клиентов:
"Помогли моему сайту выйти из-под фильтра Яндекса"
Ольга Куракина
Dogscat.com"С первого контакта до положительного ответа Яндекса прошло 2 недели"
Александр Кисленко
Ovkuse.ru"Рекомендации помогли улучшить позиции сайта, которые серьезно просели"
Артур Шаймухаметов
Boogie-shop.ru