Что вызывает резкую остановку индексации новых страниц без технических изменений на сайте?

Ответ

Есть несколько возможных распространенных причин того, что Google перестал индексировать новые статьи:

1️⃣ Блокировка со стороны хостинга, CDN или WAF. Ваш хостинг провайдер или сервис защиты (например, Cloudflare) мог обновить свои алгоритмы фильтрации трафика и начал принимать Googlebot за вредоносного бота. Отдает ему ошибку 403 или блокирует соединение на уровне TCP. В GSC это вызывает ошибку сканирования (Server error 5xx), “url недоступен для Google” при попытке ручного индексирования.

2️⃣ Общее качество сайта в глазах Google снизилось. Особенно такое бывает после последних апдейтов, если алгоритмы Google решают, что на сайте много шаблонного или AI контента без реальной ценности для юзера. Часто в таком случае новые страницы попадают в статус “Обнаружена, не проиндексирована”.

3️⃣ Если ваш сайт попал под санкции Google, то в целом сайт перестает и ранжироваться и индексировать новые страницы. В GSC посмотрите раздел “Проблемы с безопасностью” и “Меры, принятые вручную”.

Чтобы узнать более точно конкретную причину, мы рекомендуем проверить логи сервера. Отфильтруйте их по User Agent Googlebot. Посмотрите, какие http статусы отдает сервер реальному боту (200, 403, 500). Если с этим все ок, то проверьте “Статистику сканирования” в GSC. Посмотрите статусы не индексируемых страниц и от этого уже будет понятно, какие необходимо предпринимать действия для решения проблемы.

Еще по теме:

• Что делать, если успешный ранее новостной агрегатор не работал несколько месяцев, потеряв половину страниц из индекса?
Был англоязычный новостной агрегатор, который проработал полтора года, набирал аудиторию, получал естественные бэки с жирных и средних сайтов. В индексе Google было 1М страниц. В...
• Как определить, что ссылки с PBN сети проиндексированы, если их нет в отчёте Google Search Console?
C PBNки проставлены ссылки на сайт, но в GSC в отчёте по ссылкам есть не все домены этой PBN? Это особенность GSC или же плохой...
• Если сайт SPA — разумно ли отдавать боту ПС статику и как правильно индексировать SPA?
Если сайт SPA, будет ли разумно боту ПС отдавать статику? И как правильно индексировать SPA? Ответ Во многих ситуациях ситуациях, мы действительно можем рекомендовать отдавать...
• Как удалить из индекса ПС большое количество мусорных спамных страниц?
У нас взламывали сайт и в индекс попало куча мусорных страниц с вирусами, китайскими текстами и ссылками. Уже ситуация решилась, но мы всё не можем...
• Подскажите сервис по массовому переобходу страниц в Google
Подскажите сервис по массовому переобходу страниц в Google или как ещё можно значительно увеличить число квоты на обход в день? Может ли помочь простановка внешних...

---

Юлия К.

doctor@siteclinic.ru

Оцените мою статью: 

(Пока оценок нет)