Почему при сканировании сайта находятся страницы с 503-й ошибкой, хотя на самом деле имеют код ответа 200?

Ответ

Если страницы открываются и загружаются для пользователей и что самое важное, для поисковых систем – никаких проблем с ранжированием сайта не будет. Это самое важное.

В данное случае проблема может быть в из-за двух моментов:

• Проблемы в работе программы/компьютера. Попробуйте обновить программу до последней версии. Удалите и установите программу заново. Попробуйте установить программу на другом компьютере и попробовать сканировать нужный сайт с него.
• Настройки сервера/хостинга. Какое бы количество потоков вы не устанавливали, более продвинутые сервера могут точно определить, кто запрашивает страницу, человек или программа. Скорее всего, проблема именно в этом. Вы можете написать в СП хостинга и установить список разрешенных IP адресов, с которых будет доступен «безлимитный» доступ к сайту. После этого ошибка исчезнет, какое количество потоков вы бы не использовали.

Если это сайт конкурента – попробуйте скачать сайт через прокси. Иногда бывает, что прокси крупных городов добавлены в списки «слабо ограничиваемых». Сперва попробуйте бесплатные, потом можете купить парочку платных. Но если у вас ничего не получится – значит сайт конкурента хорошо позаботился о своей безопасности и не хочет, чтобы «лишние глаза» изучали сайт.

Еще по теме:

• Должен ли индексироваться текст из всплывашек в листингах интернет-магазина?
Часто в листингах ИМ при наведении курсора на элемент выводятся характеристики товара. Вопрос: должен ли этот текст индексироваться? Если должен, какие характеристики туда стоит вписывать,...
• Почему статья спустя время может перестать индексироваться в Google?
Почему статья спустя время может перестать индексироваться? Часть статей вылетела из Google, при этом статьи перестали считаться уникальными, сервисы проверки уникальности показывают статьи, которые вышли...
• Директива Clean-param: когда и как применять, как она работает
Прилетело на несколько сайтов сообщение в Яндекс Вебмастере о том, что некоторые страницы с GET-параметрами в URL дублируют содержимое других страниц (без GET-параметров). Нужно ли...
• Как ускорить индексацию новостного сайта в Google?
Можно сказать Google, что сайт новостник, и что индексировать страницы необходимо очень быстро? Публикуем новости, но ПС индексирует их с опозданием на день или на...
• Влияет ли скорость загрузки и скорость ответа сервера на сканирование и индексирование сайта?
Если скорость ответа сервера очень маленькая, может это повлиять на сканирование и индексирование сайта? Тот же вопрос про общую скорость загрузки сайта. Ответ Да, скорость...

---

Никита Д.

nikita.d@siteclinic.ru

Оцените мою статью: 

(Пока оценок нет)