Ответ
Для поисковых роботов (краулеров) наличие файла sitemap имеет более рекомендательный характер и в теории без него спокойно смогут просканировать ваш ресурс, при этом его отсутствие не повлечет особо негативную реакцию системы с последующей пессимизацией сайта.
Однако стоит понимать, что при наличии сложной структуры сайта (большое количество страниц, глубокая вложенность, постоянное обновление контента и тд) могут возникать ситуации неправильного распределения краулингового бюджета и невозможности обхода всех страниц. Поэтому с точки зрения SEO, лучше всего создавать sitemap, так как он поможет улучшить процесс индексации/переиндексации страниц сайта и лишний раз не провоцировать появление ошибок на сайте от поисковых систем.
Основные требования sitemap:
- использование кодировки UTF-8;
- формат файла .XML, так как его понимают все поисковые системы;
- внутри файла должны находится только лишь канонические URL-адреса;
- количество записей в файле не более чем 50 000 URL (если страниц больше, можно создать несколько карт);
- максимальный размер 50 Мб;
- не должно быть исключенных страниц (например 404);
- ответ сервера к файлу Sitemap должен быть 200 OK;
- отсутствие конфликта с файлом robots.txt.
Для оптимизации sitemap рекомендуется:
- при большом количестве страниц и частом обновлении контента создавать динамический файл sitemap (используя сервисы или плагины);
- использование дополнительных тегов (
, , ), с помощью которых можно задавать, частоту, дату обновления и приоритет обхода страниц сайта; - разделять по типу контента, отдельно создавая карты-сайта под каталоги, разделы, новости, товары и тд;
- разделять по актуальности, создавая для архивных и часто обновляемых страниц раздельные карты-сайта, что позволяет сэкономить бюджет обхода и улучшить полноту и скорость индексации новых страниц.
Чтобы поисковые системы обнаружили файл sitemap, можно либо загрузить его в панели вебмастеров (Google Search Console, Яндекс.Вебмастер) и заодно проверить на наличие ошибок, либо настроить путь на карту в robots.txt.
Детально ознакомиться с рекомендациями по настройке файла sitemap от Яндекса можно по ссылке.
Хотите получить ответ на свой вопрос? Задайте его нам через телеграм-бота!↓
Еще по теме:
- Ссылки на какие страницы и файлы добавлять в sitemap.xml? Добавлять ли в sitemap.xml ссылки на карточки товаров (товаров много, около 500 тыс.)? Или достаточно ссылок на страницы категорий в которых есть эти карточки? И...
- Ускорит ли индексацию создание отдельного sitemap для обновленных страниц на сайте? Есть сайт, довольно большой (около 5000 страниц). На сайте обновили часть контента (35% от общего количества примерно). Для того чтобы эти страницы быстрее проиндексировались нужно...
- Какой sitemap делать для сайта с несколькими языковыми версиями на подпапках? Какой sitemap делать для сайта с несколькими языковыми версиями в подпапках: один общий для всех или для каждой языковой версии нужен свой sitemap.xml? Ответ Оба...
- Как влияет на продвижение ссылка на HTML карту сайта в подвале всех страниц? Специалисты по SEO советуют сделать HTML карту сайта и добавить ссылку на нее с главной страницы. Не будет ли "вредно" для сайта установить эту ссылку...
- Указывать ли в файле сайтмап ссылки, закрытые от индексации? Нужно ли указывать в файле сайтмап ссылки, закрытые от индексации? Ответ Нет, не нужно. Sitemap.xml — это, по сути, ваш список рекомендаций для Google о...
Есть вопросы?
Задайте их прямо сейчас, и мы ответим в течение 8 рабочих часов.
Отзывы клиентов:
"Получили +15-20 к ВЧ-запросам в Яндексе"
Денис Нарижный
Komputernaya.ru"Не ожидал получить настолько качественный анализ и советы за минимальную цену"
Дмитрий Сокол
Hostings.info"Ответы, которые реально помогли в работе"
Анатолий
Photoboom.ua


