Ответ
Мы используем для анализа логов Excel и Power BI, так как, по нашему мнению, там это сделать проще всего.
Power BI – бесплатный, удобная визуализация данных, можно объединять несколько логов в один, широкие возможности по работе с типами данных, их моделированию.
С помощью анализа логов мы можем определить:
- страницы, на которые чаще всего заходят боты (на такие страницы, к примеру, будет полезно размещать ссылки на новые страницы или страницы с недостаточным весом);
- какие именно боты заходят на сайт (мобильные, десктопные, их User-Agent);
- на какие страницы и как расходуется краулинговый бюджет;
- попадает ли бот на нужные нам страницы;
- мусорные страницы, которые не удалось выявить при парсе;
- технические проблемы – ошибки с редиректами, битые страницы;
- частоту и даты заходов ботов, в какое время наибольшая нагрузка.
Также это полезно в том случае, если наблюдается спамный трафик на сайт – с помощью логов мы можем вычислить подозрительные IP-адреса и заблокировать их.
Главное, что нужно сделать перед анализом логов – понять, зачем Вы его проводите, тогда Вы в них не запутаетесь. Для начала можно попробовать вычислить подозрительные переходы на сайт и проверить, на какие страницы чаще всего ходят боты, чтобы при необходимости направить их в нужное русло и тем самым правильно распределить краулинговый бюджет.
А как это сделать, мы подробно разобрали в нашей статье «Анализ логов сайта с помощью Power BI: пошаговая инструкция».
Хотите получить ответ на свой вопрос? Задайте его нам через телеграм-бота!↓
Еще по теме:
- Какие возможные последствия для сайта, если у него 90%+ dofollow-ссылок? Могут ли быть последствия для сайта, если у него 90%+ dofollow-ссылок? И на какие показатели следует опираться? Ответ Если ваш ссылочный профиль сайта состоит на...
- Влияет ли смена дизайна или темы CMS на ранжирование сайта в Google? Влияет ли смена дизайна или смена темы CMS на ранжирование сайта в Google без изменения контента (или минимальные изменения) и URL? Ответ Пересмотр дизайна всегда...
- Как лучше реализовать отдельный сайт под каждый регион — через поддомены или подпапки? Есть сайт с услугами дополнительного профессионального образования. Хотим сделать на каждый регион отдельный сайт. Как лучше и правильнее делать? Регистрировать поддомены, но в таком случае...
- Что делать с неактуальными статьями на сайте? Планирую убрать несколько десятков неактуальных и старых статей, которые не приносят трафика и, возможно, лишь вредят продвижению. Вопрос: что делать со статьями? Ставить 301 редирект...
- Как не попасть под фильтр за перевод статей и нужно ли их связывать атрибутом Hreflang? Как не попасть в бан Google, если переводишь свои статьи на другие языки и размещаешь на другом домене? Можно как-то их связать между собой или...
Есть вопросы?
Задайте их прямо сейчас, и мы ответим в течение 8 рабочих часов.
Отзывы клиентов:
"Мы увидели рост по целому пулу запросов"
Деревянко П.Н.
Expertology.ru"Сайт выведен из-под фильтра"
Коробов С.А.
Pechimax.ru"Санкции были сняты. Весь процесс занял полтора месяца"
Сергей Протасов
Svem.ru