C чем может быть связана ошибка 503?

Есть сайт www.all-smety.ru на нём стоит авторизация через HTTP, поисковики и программы аудита типа Xenu и Screaming frog выдают ошибку 503, при том что страницы доступны. Может кто сталкивался с подобным ?
Сайт стоит на битриксе, в разделе аналитики переходы с поисковиков не учитываются, в вебмастере яндекса всё ок с этим.
5a8ee2749a4a0630407554.png
  • Вопрос задан
  • 463 просмотра
Пригласить эксперта
Ответы на вопрос 1
megafax
@megafax
web-программист
Элементарная защита от парсеров/скраперов. Если в Xenu поставить в 1 поток - то все нормально отрабатывает. Скорей всего реагирует на IP + UserAgent + частота запросов.
Ответ написан
Комментировать
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Войти через центр авторизации
Похожие вопросы