Ответ
Для поисковых роботов (краулеров) наличие файла sitemap имеет более рекомендательный характер и в теории без него спокойно смогут просканировать ваш ресурс, при этом его отсутствие не повлечет особо негативную реакцию системы с последующей пессимизацией сайта.
Однако стоит понимать, что при наличии сложной структуры сайта (большое количество страниц, глубокая вложенность, постоянное обновление контента и тд) могут возникать ситуации неправильного распределения краулингового бюджета и невозможности обхода всех страниц. Поэтому с точки зрения SEO, лучше всего создавать sitemap, так как он поможет улучшить процесс индексации/переиндексации страниц сайта и лишний раз не провоцировать появление ошибок на сайте от поисковых систем.
Основные требования sitemap:
- использование кодировки UTF-8;
- формат файла .XML, так как его понимают все поисковые системы;
- внутри файла должны находится только лишь канонические URL-адреса;
- количество записей в файле не более чем 50 000 URL (если страниц больше, можно создать несколько карт);
- максимальный размер 50 Мб;
- не должно быть исключенных страниц (например 404);
- ответ сервера к файлу Sitemap должен быть 200 OK;
- отсутствие конфликта с файлом robots.txt.
Для оптимизации sitemap рекомендуется:
- при большом количестве страниц и частом обновлении контента создавать динамический файл sitemap (используя сервисы или плагины);
- использование дополнительных тегов (
, , ), с помощью которых можно задавать, частоту, дату обновления и приоритет обхода страниц сайта; - разделять по типу контента, отдельно создавая карты-сайта под каталоги, разделы, новости, товары и тд;
- разделять по актуальности, создавая для архивных и часто обновляемых страниц раздельные карты-сайта, что позволяет сэкономить бюджет обхода и улучшить полноту и скорость индексации новых страниц.
Чтобы поисковые системы обнаружили файл sitemap, можно либо загрузить его в панели вебмастеров (Google Search Console, Яндекс.Вебмастер) и заодно проверить на наличие ошибок, либо настроить путь на карту в robots.txt.
Детально ознакомиться с рекомендациями по настройке файла sitemap от Яндекса можно по ссылке.
Хотите получить ответ на свой вопрос? Задайте его нам через телеграм-бота!↓
Еще по теме:
- Можно ли выводить сгенерированные страницы в отдельный sitemap? В ИМ планирую генерировать страницы по брендам, но по какой-то технической причине программист не может эти страницы выводить в sitemap. Предложил выводить сгенерированные страницы в...
- Работают ли HTML карты сайта и как их правильно составлять? Реально ли работают HTML карты сайта? Как их составлять и какие страницы туда стоит добавить? Ответ Наличие такой страницы на сайте может быть действительно полезно...
- Как исправить ошибку неправильно указано пространство имен в Sitemap? Подскажите, как бороться с ошибкой "В вашем Sitemap или файле индекса Sitemap неправильно указано пространство имен" в GSC? Ответ Такая ошибка возникает в основном в...
- Как обновлять sitemap для сайта с языковыми версиями на подпапках? Как обновлять sitemap для сайта с языковыми версиями на подпапках? У нас и так довольно большие объемы карт сайтов (под 200К ссылок в общем), сейчас...
- Какой должна быть HTML карта сайта в 2022 году и нужна ли она вам? Актуально ли наличие html карты сайта в настоящее время? Какие ссылки туда добавлять, если сайт, например, на 100 000 страниц? Ответ Наличие html карты сайта...
Есть вопросы?
Задайте их прямо сейчас, и мы ответим в течение 8 рабочих часов.
Отзывы клиентов:
"Не ожидал получить настолько качественный анализ и советы за минимальную цену"
Дмитрий Сокол
Hostings.info"Прошло не так много времени, но первые результаты уже налицо"
Евгений Ильин
Best-stroy.ru"Могут ли комментарии пользователей под карточкой влиять на позиции запросов в негативном плане? Ответ Комментарии без спама и по теме могут стать источником уникального контента и положительно влиять на позиции сайта. И да, негативные комментарии пользователей под карточкой продукта в некоторых случаях действительно могут оказывать негативное влияние на позиции в поисковой выдаче. Существует несколько основных […]"