Как и чем анализировать логи сайта?

Как и чем анализировать логи сайта? Только начинаю свой путь в этом направлении, поэтому интересно как и в чём анализ логов может помочь SEOшнику?

Ответ

Мы используем для анализа логов Excel и Power BI, так как, по нашему мнению, там это сделать проще всего.

Power BI – бесплатный, удобная визуализация данных, можно объединять несколько логов в один, широкие возможности по работе с типами данных, их моделированию.
С помощью анализа логов мы можем определить:

страницы, на которые чаще всего заходят боты (на такие страницы, к примеру, будет полезно размещать ссылки на новые страницы или страницы с недостаточным весом);
какие именно боты заходят на сайт (мобильные, десктопные, их User-Agent);
на какие страницы и как расходуется краулинговый бюджет;
попадает ли бот на нужные нам страницы;
мусорные страницы, которые не удалось выявить при парсе;
технические проблемы – ошибки с редиректами, битые страницы;
частоту и даты заходов ботов, в какое время наибольшая нагрузка.

Также это полезно в том случае, если наблюдается спамный трафик на сайт – с помощью логов мы можем вычислить подозрительные IP-адреса и заблокировать их.

Главное, что нужно сделать перед анализом логов – понять, зачем Вы его проводите, тогда Вы в них не запутаетесь. Для начала можно попробовать вычислить подозрительные переходы на сайт и проверить, на какие страницы чаще всего ходят боты, чтобы при необходимости направить их в нужное русло и тем самым правильно распределить краулинговый бюджет.

А как это сделать, мы подробно разобрали в нашей статье «Анализ логов сайта с помощью Power BI: пошаговая инструкция».

Хотите получить ответ на свой вопрос? Задайте его нам через телеграм-бота!↓

Задать свой вопрос

Подписаться на рассылку

Еще по теме:

Чек-лист после переезда сайта на другой домен: что проверять, если позиции после переезда не вернулись?

Есть ли чек-лист аудита после переезда сайта на другой домен? Что проверять, если после переезда у сайта долго не возвращаются позиции? Ответ После того, как...

Влияют ли изображения из слайдера на скорость загрузки листинга?

Есть возможность сделать галерею из фотографий прямо на страницах листинга. Идея кажется заманчивой до тех пор, пока не вспоминаю про скорость загрузки и индексацию. Подскажите,...

Как улучшить социальные сигналы для Google и Яндекс?

Как можно "накрутить" или улучшить социальные сигналы для Google и Яндекс? Ответ Социальными сигналами являются: лайки, обсуждения, репосты, комментарии, а также количество подписчиков/участников в сообществе....

Можно ли регистрировать домены на одно лицо, если планируется продвижение в разных странах?

Сейчас хотим купить домены ua, kz, com, pl и т.д. чтобы занять. В будущем собираемся выходить в другие страны, поэтому вопрос: при покупке все домены...

Настройка директивы Сlean-param для борьбы с дублями страниц в Яндексе?

Яндекс в последнее время сильно ругается на get параметры, сначала прописывали в robots — помогало, сейчас уже не помогает. Как победить и как решить эту...