@happy-cat

Как отловить бота грузящего сайт на over 100% ??

Всем привет.
В последние несколько недель на наш скромный сервер с парочкой сайтов начал наведываться какой то бармалей и грузить ресурсы по самое не балуй..
Скрины прилагаю.
Время посещения около 6 утра по Москве
Вопрос: как отловить его в логах где много всякой информации??
На сервере всю нагрузку тянет Nginx

5d230aa991ac8361857924.png

5d230ab80d472715108680.png
  • Вопрос задан
  • 97 просмотров
Пригласить эксперта
Ответы на вопрос 4
Jump
@Jump Куратор тега Системное администрирование
Системный администратор со стажем.
как отловить его в логах где много всякой информации??
Анализом этих самых логов.
Отсекайте ненужную информацию
Вот вы видите когда нагрузка началась и когда исчезла - у вас уже есть время.
Смотрите с каких адресов были запросы, сколько запросов с адреса, каких запросов.
Визуализируйте если не понятно, графики стройте.
Ответ написан
dollar
@dollar
uBlock, Ghostery, WOT, TosterComfort, RKN Alert
Это у вас изъян в оптимизации и защите от злоупотреблений.
Например, обычно для поиска по базе нужно либо ввести капчу, либо запрет N секунд на повторный поиск, и это разгружает сайт.

В идеале сайт должен быть способен жить под постоянным ddos (если канал позволяет).

Так что ищите не бота, а слабое место в самом сайте. Если там Вася сделал информер, который создается 2 секунды и не кешируется, то ругайте Васю. А ботом может оказаться даже гугл-бот или яндекс-бот, которые, кстати, понижают вас в выдаче за малую отзывчивость.
Ответ написан
dimonchik2013
@dimonchik2013
почему ракеты не летают как птицы?
логи в кликхаус и group by
Ответ написан
VELIK505
@VELIK505
Руководитель департамента profitcentr.com
ngx_http_limit_req_module
и sysctl.conf вам в помощь.
Ответ написан
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Войти через центр авторизации
Похожие вопросы