Ответ
Для поисковых роботов (краулеров) наличие файла sitemap имеет более рекомендательный характер и в теории без него спокойно смогут просканировать ваш ресурс, при этом его отсутствие не повлечет особо негативную реакцию системы с последующей пессимизацией сайта.
Однако стоит понимать, что при наличии сложной структуры сайта (большое количество страниц, глубокая вложенность, постоянное обновление контента и тд) могут возникать ситуации неправильного распределения краулингового бюджета и невозможности обхода всех страниц. Поэтому с точки зрения SEO, лучше всего создавать sitemap, так как он поможет улучшить процесс индексации/переиндексации страниц сайта и лишний раз не провоцировать появление ошибок на сайте от поисковых систем.
Основные требования sitemap:
- использование кодировки UTF-8;
- формат файла .XML, так как его понимают все поисковые системы;
- внутри файла должны находится только лишь канонические URL-адреса;
- количество записей в файле не более чем 50 000 URL (если страниц больше, можно создать несколько карт);
- максимальный размер 50 Мб;
- не должно быть исключенных страниц (например 404);
- ответ сервера к файлу Sitemap должен быть 200 OK;
- отсутствие конфликта с файлом robots.txt.
Для оптимизации sitemap рекомендуется:
- при большом количестве страниц и частом обновлении контента создавать динамический файл sitemap (используя сервисы или плагины);
- использование дополнительных тегов (
, , ), с помощью которых можно задавать, частоту, дату обновления и приоритет обхода страниц сайта; - разделять по типу контента, отдельно создавая карты-сайта под каталоги, разделы, новости, товары и тд;
- разделять по актуальности, создавая для архивных и часто обновляемых страниц раздельные карты-сайта, что позволяет сэкономить бюджет обхода и улучшить полноту и скорость индексации новых страниц.
Чтобы поисковые системы обнаружили файл sitemap, можно либо загрузить его в панели вебмастеров (Google Search Console, Яндекс.Вебмастер) и заодно проверить на наличие ошибок, либо настроить путь на карту в robots.txt.
Детально ознакомиться с рекомендациями по настройке файла sitemap от Яндекса можно по ссылке.
Хотите получить ответ на свой вопрос? Задайте его нам через телеграм-бота!↓
Еще по теме:
- «Страница проиндексирована, но ее нет в файле Sitemap» — насколько критична эта ошибка? Search Console пишет, что URL категории находится в индексе, но его нет в файле sitemap. В то же время файл sitemap обновляется каждый день и...
- Надо ли делать отдельные файлы роботс и сайтмап для поддоменов? Нужно ли делать отдельные файлы роботс и сайтмап для поддоменов? Ответ Так как сайт на поддомене – это по факту отдельный сайт, то да, необходимо...
- Какой sitemap делать для сайта с несколькими языковыми версиями на подпапках? Какой sitemap делать для сайта с несколькими языковыми версиями в подпапках: один общий для всех или для каждой языковой версии нужен свой sitemap.xml? Ответ Оба...
- Ускорит ли индексацию создание отдельного sitemap для обновленных страниц на сайте? Есть сайт, довольно большой (около 5000 страниц). На сайте обновили часть контента (35% от общего количества примерно). Для того чтобы эти страницы быстрее проиндексировались нужно...
- Ссылки на какие страницы и файлы добавлять в sitemap.xml? Добавлять ли в sitemap.xml ссылки на карточки товаров (товаров много, около 500 тыс.)? Или достаточно ссылок на страницы категорий в которых есть эти карточки? И...
d.siteclinic@gmail.com
Оцените мою статью:
(Пока оценок нет)Есть вопросы?
Задайте их прямо сейчас, и мы ответим в течение 8 рабочих часов.
Отзывы клиентов:
"Не ожидал получить настолько качественный анализ и советы за минимальную цену"
Дмитрий Сокол
Hostings.info"Сайт выведен из-под фильтра"
Коробов С.А.
Pechimax.ru"Санкции были сняты. Весь процесс занял полтора месяца"
Сергей Протасов
Svem.ru