Ответ
Если страницы открываются и загружаются для пользователей и что самое важное, для поисковых систем – никаких проблем с ранжированием сайта не будет. Это самое важное.
В данное случае проблема может быть в из-за двух моментов:
- Проблемы в работе программы/компьютера. Попробуйте обновить программу до последней версии. Удалите и установите программу заново. Попробуйте установить программу на другом компьютере и попробовать сканировать нужный сайт с него.
- Настройки сервера/хостинга. Какое бы количество потоков вы не устанавливали, более продвинутые сервера могут точно определить, кто запрашивает страницу, человек или программа. Скорее всего, проблема именно в этом. Вы можете написать в СП хостинга и установить список разрешенных IP адресов, с которых будет доступен «безлимитный» доступ к сайту. После этого ошибка исчезнет, какое количество потоков вы бы не использовали.
Если это сайт конкурента – попробуйте скачать сайт через прокси. Иногда бывает, что прокси крупных городов добавлены в списки «слабо ограничиваемых». Сперва попробуйте бесплатные, потом можете купить парочку платных. Но если у вас ничего не получится – значит сайт конкурента хорошо позаботился о своей безопасности и не хочет, чтобы «лишние глаза» изучали сайт.
Хотите получить ответ на свой вопрос? Задайте его нам через телеграм-бота!↓
Еще по теме:
- Какие причины попадания страниц старого сайта в индекс после переезда на другой домен? Когда-то у сайта был переезд с одного домена на другой, но я обнаружил, что через команду site: показывается много страниц в индексе со старого сайта....
- Влияет ли отсутствие сохранённой копии страниц на индексацию и ранжирование? Не сохраняется кэш сайта в поисковых системах – ни в Google, ни в Яндекс. При переходе из поиска на "Сохраненная копия сайта" редиректит на 404...
- Как ускорить индексацию обратных ссылок с сабмитов и различных профилей? Как ускорить индексацию обратных ссылок с сабмитов и различных профилей? Ответ Качественные площадки-сабмиты обычно не имеют проблем с индексацией новых страниц и ссылок на них....
- Что делать, если страницы сайта были спарсены у конкурента без изменений и теперь не попадают в индекс Google? Имеется интернет-магазин (на open cart), который спарсил 40 000 товаров со своего конкурента ничего не изменив. В индекс страницы практически не заходят (особенно в Google),...
- Если сайт SPA — разумно ли отдавать боту ПС статику и как правильно индексировать SPA? Если сайт SPA, будет ли разумно боту ПС отдавать статику? И как правильно индексировать SPA? Ответ Во многих ситуациях ситуациях, мы действительно можем рекомендовать отдавать...
nikita.d@siteclinic.ru
Оцените мою статью:
(Пока оценок нет)Есть вопросы?
Задайте их прямо сейчас, и мы ответим в течение 8 рабочих часов.
Отзывы клиентов:
"Я получил рекомендации и процесс сдвинулся с мёртвой точки."
"С первого контакта до положительного ответа Яндекса прошло 2 недели"
Александр Кисленко
Ovkuse.ru"Мы увидели рост по целому пулу запросов"
Деревянко П.Н.
Expertology.ru