Ответ
Для поисковых роботов (краулеров) наличие файла sitemap имеет более рекомендательный характер и в теории без него спокойно смогут просканировать ваш ресурс, при этом его отсутствие не повлечет особо негативную реакцию системы с последующей пессимизацией сайта.
Однако стоит понимать, что при наличии сложной структуры сайта (большое количество страниц, глубокая вложенность, постоянное обновление контента и тд) могут возникать ситуации неправильного распределения краулингового бюджета и невозможности обхода всех страниц. Поэтому с точки зрения SEO, лучше всего создавать sitemap, так как он поможет улучшить процесс индексации/переиндексации страниц сайта и лишний раз не провоцировать появление ошибок на сайте от поисковых систем.
Основные требования sitemap:
- использование кодировки UTF-8;
- формат файла .XML, так как его понимают все поисковые системы;
- внутри файла должны находится только лишь канонические URL-адреса;
- количество записей в файле не более чем 50 000 URL (если страниц больше, можно создать несколько карт);
- максимальный размер 50 Мб;
- не должно быть исключенных страниц (например 404);
- ответ сервера к файлу Sitemap должен быть 200 OK;
- отсутствие конфликта с файлом robots.txt.
Для оптимизации sitemap рекомендуется:
- при большом количестве страниц и частом обновлении контента создавать динамический файл sitemap (используя сервисы или плагины);
- использование дополнительных тегов (
, , ), с помощью которых можно задавать, частоту, дату обновления и приоритет обхода страниц сайта; - разделять по типу контента, отдельно создавая карты-сайта под каталоги, разделы, новости, товары и тд;
- разделять по актуальности, создавая для архивных и часто обновляемых страниц раздельные карты-сайта, что позволяет сэкономить бюджет обхода и улучшить полноту и скорость индексации новых страниц.
Чтобы поисковые системы обнаружили файл sitemap, можно либо загрузить его в панели вебмастеров (Google Search Console, Яндекс.Вебмастер) и заодно проверить на наличие ошибок, либо настроить путь на карту в robots.txt.
Детально ознакомиться с рекомендациями по настройке файла sitemap от Яндекса можно по ссылке.
Хотите получить ответ на свой вопрос? Задайте его нам через телеграм-бота!↓
Еще по теме:
- Нужна ли специальная карта для мультиязычного сайта? Нужно ли для мультиязычного сайта делать специальную карту сайта? Или обычная с перечислением всех URL вполне хватит? Ответ Решение делать ли отдельную карту сайта для...
- Атрибуты priority и lastmod в sitemap — актуальность и эффективность использования Насколько важно в sitemap указывать priority и last modified? И если у сайта около 10К страниц, есть ли смысл разбивать файл на несколько сайтмапов, при...
- Ускорит ли индексацию создание отдельного sitemap для обновленных страниц на сайте? Есть сайт, довольно большой (около 5000 страниц). На сайте обновили часть контента (35% от общего количества примерно). Для того чтобы эти страницы быстрее проиндексировались нужно...
- Как часто нужно обновлять Sitemap в GSC? Как часто нужно обновлять Sitemap в Google Search Console? Ответ Обновления файла Sitemap необходимо производить сразу после создания новых страниц на сайте и открытии их...
- Чем и как проверять файл sitemap.xml? У меня есть сайт с кириллическими урлами. Например, https://сайт.рф. Так вот, главная страница у него отлично индексируется гуглом, а вот остальные в sitemap.xml не определяются....
Есть вопросы?
Задайте их прямо сейчас, и мы ответим в течение 8 рабочих часов.
Отзывы клиентов:
"С первого контакта до положительного ответа Яндекса прошло 2 недели"
Александр Кисленко
Ovkuse.ru"Яндекс снял фильтр уже после первой заявки"
Люк Усса
CreditProsto.ru"Поисковик вернул сайту «отобранных» ранее посетителей"
Александр Люкс
English-easy.info