Ответ
Мы используем для анализа логов Excel и Power BI, так как, по нашему мнению, там это сделать проще всего.
Power BI – бесплатный, удобная визуализация данных, можно объединять несколько логов в один, широкие возможности по работе с типами данных, их моделированию.
С помощью анализа логов мы можем определить:
- страницы, на которые чаще всего заходят боты (на такие страницы, к примеру, будет полезно размещать ссылки на новые страницы или страницы с недостаточным весом);
- какие именно боты заходят на сайт (мобильные, десктопные, их User-Agent);
- на какие страницы и как расходуется краулинговый бюджет;
- попадает ли бот на нужные нам страницы;
- мусорные страницы, которые не удалось выявить при парсе;
- технические проблемы – ошибки с редиректами, битые страницы;
- частоту и даты заходов ботов, в какое время наибольшая нагрузка.
Также это полезно в том случае, если наблюдается спамный трафик на сайт – с помощью логов мы можем вычислить подозрительные IP-адреса и заблокировать их.
Главное, что нужно сделать перед анализом логов – понять, зачем Вы его проводите, тогда Вы в них не запутаетесь. Для начала можно попробовать вычислить подозрительные переходы на сайт и проверить, на какие страницы чаще всего ходят боты, чтобы при необходимости направить их в нужное русло и тем самым правильно распределить краулинговый бюджет.
А как это сделать, мы подробно разобрали в нашей статье «Анализ логов сайта с помощью Power BI: пошаговая инструкция».
Хотите получить ответ на свой вопрос? Задайте его нам через телеграм-бота!↓
Еще по теме:
- Можно ли ставить ссылки с карточки товара на категории сайта? Ряд магазинов практикуют не только линковку из категорий и подкатегорий на карточки, но и обратную линковку с карточек на подкатегории. Насколько разумно размещение такой линковки...
- Какие правила использования схемы меток schema markup? Какие есть правила или принципы использования схемы меток schema markup, чтобы от них был толк? Ответ Чтобы от микроразметки schema был толк, необходимо следовать простым...
- Могут ли брендовые ссылки с дропа негативно влиять на продвижение? У дропа большое количество анкорных ссылок, где анкором выступает брендовое имя сайта. Подскажите, может ли такой ссылочный профиль негативно сказаться на продвигаемом сайте, к которому...
- С чем связана потеря сниппетов, быстрых ответов и подсказок в Google и как их вернуть? Сталкивались ли вы с таким, что крупный и трастовый достаточно проект потерял все быстрые ответы, подсказки и все остальные плюшки Google при этом особо не...
- Как проверить индексацию купленных ссылок в Яндексе и Google? Есть какие-либо ресурсы, сервисы и методы через которые можно проверить индексацию купленных ссылок в Яндексе и Google? Ответ Достоверно проверить индексацию купленных ссылок в Google...
Есть вопросы?
Задайте их прямо сейчас, и мы ответим в течение 8 рабочих часов.
Отзывы клиентов:
"Сайт был выведен из-под фильтра за 3,5 месяца"
Игорь Логинов
Stomed.ru"Повторным аудитом остались довольны на все 100%"
Дмитрий Сокол
Hostings.info"Ответы, которые реально помогли в работе"
Анатолий
Photoboom.ua


