Ответ
Если вы уже установили crawl-rate в Google Search Console на минимальное значение, и Google всё равно слишком активно сканирует ваш сайт, стоит убедиться, что это делают действительно google-боты. Выгрузите логи сайта и пересмотрите user-agent во время пиковой нагрузки сервера.
Кроме того, убедитесь, что ваш сервер действительно хорошо оптимизирован. Используйте кеширование, оптимизируйте базу данных, уменьшите размер страниц и статические ресурсы, где это возможно.
Есть также рискованный метод, который рекомендует Справка Google для уменьшения частоты сканирование на короткий промежуток времени. Показывайте вместо контента страницу с кодом статуса HTTP 500, 503. Справка утверждает, что в таком случае робот Googlebot будет сканировать ваш ресурс реже.
Учтите, что данный способ может значительно повлиять на ранжирование сайта в негативную сторону.
Помните, если у вас будет грамотная и простая структура, если ваши страницы будут загружаться и отрисовываться быстрее, Google сможет просканировать быстрее контент на вашем сайте, что также косвенно может помочь решить вашу проблему.
Что касается переноса сайта с одного сервера на другой, то тут обычно проблем возникать не должно. С каждым хостингом могут быть индивидуальные нюансы, но можем дать общие рекомендации:
- Прежде всего, создайте резервные копии всех файлов и базы данных вашего сайта.
- Перед тем как перенести сайт полностью, настройте его на новом сервере и проведите тестирование. Убедитесь, что все работает корректно.
- После того как вы убедились, что ваш сайт работает на новом сервере, обновите записи DNS.
- Убедитесь, что SSL-сертификат корректно установлен на новом сервере.
Хотите получить ответ на свой вопрос? Задайте его нам через телеграм-бота!↓
Еще по теме:
- На каком домене будет лучше развернуть новый разработанный сайт? Разрабатываем новый сайт с новыми страницами. Он в раз 10 больше, чем тот, что есть сейчас. Возникает вопрос: стоит ли удалять старый из индекса (который...
- Влияет ли региональная доменная зона на продвижение в региональной выдаче и нужно ли менять домен? Правда ли, что в региональной выдаче всегда выигрывает сайт на региональном домене? Если это так, оправдано ли новый сайт сразу переносить на региональный домен или...
- Что делать со страницами, если их нет на новом домене? Переезжаем с домена на домен. Если у меня было на старом домене N страниц, а на новом M страниц, Яндекс выкидывает из индекса сразу эти...
- Помешает ли ранжированию молодого сайта переезд? Ждем домен в зоне UA, будем делать интернет-магазин, ждать еще 3-5 мес, терять время не хочется. Можно ли начать на другой доменной зоне, допустим com.ua,...
- Нужно ли менять домен, если сайт получил бан за обратные ссылки? Сайт получил случайный бан за бэклинки. Резко обвалились позиции и трафик, странице в индексе по прежнему, но без каких-либо охватов. Пробовал отклонять ссылки - но...
Есть вопросы?
Задайте их прямо сейчас, и мы ответим в течение 8 рабочих часов.
Отзывы клиентов:
"Помогли моему сайту выйти из-под фильтра Яндекса"
Ольга Куракина
Dogscat.com"Развернутый и структурированный отчет с указанием ошибок"
Владислав Аверьянов
Homesoverseas.ru"Здесь можно реанимировать сайт даже со страшным диагнозом"
Денис Кушнир
Aden-stroy.ru