Как и чем анализировать логи сайта?

Как и чем анализировать логи сайта? Только начинаю свой путь в этом направлении, поэтому интересно как и в чём анализ логов может помочь SEOшнику?

Ответ

Мы используем для анализа логов Excel и Power BI, так как, по нашему мнению, там это сделать проще всего.

Power BI – бесплатный, удобная визуализация данных, можно объединять несколько логов в один, широкие возможности по работе с типами данных, их моделированию.
С помощью анализа логов мы можем определить:

страницы, на которые чаще всего заходят боты (на такие страницы, к примеру, будет полезно размещать ссылки на новые страницы или страницы с недостаточным весом);
какие именно боты заходят на сайт (мобильные, десктопные, их User-Agent);
на какие страницы и как расходуется краулинговый бюджет;
попадает ли бот на нужные нам страницы;
мусорные страницы, которые не удалось выявить при парсе;
технические проблемы – ошибки с редиректами, битые страницы;
частоту и даты заходов ботов, в какое время наибольшая нагрузка.

Также это полезно в том случае, если наблюдается спамный трафик на сайт – с помощью логов мы можем вычислить подозрительные IP-адреса и заблокировать их.

Главное, что нужно сделать перед анализом логов – понять, зачем Вы его проводите, тогда Вы в них не запутаетесь. Для начала можно попробовать вычислить подозрительные переходы на сайт и проверить, на какие страницы чаще всего ходят боты, чтобы при необходимости направить их в нужное русло и тем самым правильно распределить краулинговый бюджет.

А как это сделать, мы подробно разобрали в нашей статье «Анализ логов сайта с помощью Power BI: пошаговая инструкция».

Хотите получить ответ на свой вопрос? Задайте его нам через телеграм-бота!↓

Задать свой вопрос

Подписаться на рассылку

Еще по теме:

Работают ли HTML карты сайта и как их правильно составлять?

Реально ли работают HTML карты сайта? Как их составлять и какие страницы туда стоит добавить? Ответ Наличие такой страницы на сайте может быть действительно полезно...

Как обеспечить индексацию динамического AJAX-контента в модальном окне?

Хочу сделать информацию о проекте в модальном окне. Содержимое окна будет погружаться AJAXом. Как на это среагируют поисковики? Как обеспечить индексирование информации в этих окнах?...

Как продвигать форум в поисковых системах и какие важные аспекты учесть?

Как продвигать форум в поисковых системах? Есть ли какие-то важные аспекты, помимо структуры, внешних ссылок? Как сделать внутреннюю оптимизацию форума? Что закрыть в robots.txt? Какие...

Как понять учитывает ли Google ссылки, ведущие на сайт?

Заказывали месяца три назад 4к backlinks с DR+50. Сейчас смотрю по ахрефcу, что ни одна ссылка не была применена к нашему домену. Правильно ли я...

Насколько структура сайта должна быть похожа на структуру конкурентов?

Делаем новый сайт. Насколько важно, чтобы структура нашего сайта совпадала со структурой конкурентов. И почему? Ответ Невозможно вести бизнес, не зная положения дел в ТОПе....