Как и чем анализировать логи сайта?

Как и чем анализировать логи сайта? Только начинаю свой путь в этом направлении, поэтому интересно как и в чём анализ логов может помочь SEOшнику?

Ответ

Мы используем для анализа логов Excel и Power BI, так как, по нашему мнению, там это сделать проще всего.

Power BI – бесплатный, удобная визуализация данных, можно объединять несколько логов в один, широкие возможности по работе с типами данных, их моделированию.
С помощью анализа логов мы можем определить:

страницы, на которые чаще всего заходят боты (на такие страницы, к примеру, будет полезно размещать ссылки на новые страницы или страницы с недостаточным весом);
какие именно боты заходят на сайт (мобильные, десктопные, их User-Agent);
на какие страницы и как расходуется краулинговый бюджет;
попадает ли бот на нужные нам страницы;
мусорные страницы, которые не удалось выявить при парсе;
технические проблемы – ошибки с редиректами, битые страницы;
частоту и даты заходов ботов, в какое время наибольшая нагрузка.

Также это полезно в том случае, если наблюдается спамный трафик на сайт – с помощью логов мы можем вычислить подозрительные IP-адреса и заблокировать их.

Главное, что нужно сделать перед анализом логов – понять, зачем Вы его проводите, тогда Вы в них не запутаетесь. Для начала можно попробовать вычислить подозрительные переходы на сайт и проверить, на какие страницы чаще всего ходят боты, чтобы при необходимости направить их в нужное русло и тем самым правильно распределить краулинговый бюджет.

А как это сделать, мы подробно разобрали в нашей статье «Анализ логов сайта с помощью Power BI: пошаговая инструкция».

Хотите получить ответ на свой вопрос? Задайте его нам через телеграм-бота!↓

Задать свой вопрос

Подписаться на рассылку

Еще по теме:

Как подключать Яндекс Метрику и Google Analytics для поддоменов?

Есть домен и несколько поддоменов. Обязательно ли создавать на каждый свою Яндекс Метрику и Google Analytics? И как лучше их добавлять: сразу в код или...

Нужно ли собирать семантическое ядро для статейного сайта, который ежедневно обновляется?

А нужно ли собирать семантическое ядро для огромного статейного сайта, который ежедневно обновляется и пишет десятки статей? Сайт тематичный и статьи пишутся по теме одного...

Какими SEO-инструментами собирать украиноязычную семантику?

Какими сервисами собирать украиноязычную семантику и частоту в Google? Ответ Для сбора украиноязычной семантики мы используем следующие инструменты: Google Adwords – сервис контекстной рекламы от...

Как безопасно развивать ссылочный профиль сайта, с учетом последнего спам апдейта Google?

В последнем спам апдейте Google указал, что будут приняты меры в сторону сайтов, которые злоупотребляют репутацией сайта. В справке Google указывается, что спамом будет считаться...

Как можно отследить переходы из блога на коммерческие страницы?

Есть информационный раздел сайта с ссылками на коммерческие страницы. Как можно отследить какие заказы делаются через блог и реально ли это сделать? Хотим понять, целесообразно...