Ответ
Если страницы открываются и загружаются для пользователей и что самое важное, для поисковых систем – никаких проблем с ранжированием сайта не будет. Это самое важное.
В данное случае проблема может быть в из-за двух моментов:
- Проблемы в работе программы/компьютера. Попробуйте обновить программу до последней версии. Удалите и установите программу заново. Попробуйте установить программу на другом компьютере и попробовать сканировать нужный сайт с него.
- Настройки сервера/хостинга. Какое бы количество потоков вы не устанавливали, более продвинутые сервера могут точно определить, кто запрашивает страницу, человек или программа. Скорее всего, проблема именно в этом. Вы можете написать в СП хостинга и установить список разрешенных IP адресов, с которых будет доступен «безлимитный» доступ к сайту. После этого ошибка исчезнет, какое количество потоков вы бы не использовали.
Если это сайт конкурента – попробуйте скачать сайт через прокси. Иногда бывает, что прокси крупных городов добавлены в списки «слабо ограничиваемых». Сперва попробуйте бесплатные, потом можете купить парочку платных. Но если у вас ничего не получится – значит сайт конкурента хорошо позаботился о своей безопасности и не хочет, чтобы «лишние глаза» изучали сайт.
Хотите получить ответ на свой вопрос? Задайте его нам через телеграм-бота!↓
Еще по теме:
- Открывать ли к индексации сайт на стадии разработки? После покупки домена, начинается процесс создания, настройки и наполнения сайта. Вопрос: на домен после покупки нужно поставить заглушку и закрыть от индексации, пока сайт не...
- Как проверить, доступен ли Google bot основной контент? При заходе на сайт появляется всплывашка на весь экран с вопросам, например, есть ли 18 лет пользователю. Всплывашка реализована при помощи JS. Вопрос: как проверить,...
- Как загнать сайт в индекс в целевом регионе? Как загнать сайт в индекс именно в целевом регионе? Часть страниц моего сайта не в индексе в целевом регионе (к примеру, для Google.ca с регионом...
- Как поступать с файлами формата pdf на сайте? Как поступать с файлами формата pdf (инструкция к товару, сертификат и т.д.). Закрывать их от индексации? И если на сайте уже есть страницы с текстовыми...
- Как ускорить индексацию молодого сайта в Google? Есть мнение, что Google не сильно торопится индексировать новые сайты. Правда ли это и как можно быстро скормить новенький ИМ Google? Какие действия помогут? Ответ...
nikita.d@siteclinic.ru
Оцените мою статью:
(Пока оценок нет)Есть вопросы?
Задайте их прямо сейчас, и мы ответим в течение 8 рабочих часов.
Отзывы клиентов:
"Отчеты и консультации всегда исчерпывающие и действенные"
"Санкции были сняты. Весь процесс занял полтора месяца"
Сергей Протасов
Svem.ru"Мы увидели рост по целому пулу запросов"
Деревянко П.Н.
Expertology.ru