Подскажите, пожалуйста, кто знает. Вебмастер на все страницы пишет: Формат документа не поддерживается индексирующим роботом. Обратите внимание на корректность заголовка Content-Type и на содержимое документа.
Прежде сайт работал совершенно нормально.
Написали на хостинг, там сказали, все нормально, посоветовали обратиться в поддержку Яндекса. Там вот что ответили:
"Проверили подробнее. При скачивании curl-ом ваш сервер посылает FIN после 404152 байт, а при скачивании нашим роботом сервер посылает FIN после 55674 байт. Различие заключается в хедере "Accept: */*" - если его поставить при запросе curl, то ответ тоже "обрезается", поэтому рекомендуем проверить, какой документ отдается при запросе с этим хедером."
и чуть позже:
Вчера это воспроизводилось даже просто с хедером Accept: */*, сегодня можно воспроизвести при помощи трейса, который вы можете найти в приложении к письму ("Новый запрос"). Обращаем внимание на слова curl: (18) transfer closed with outstanding read data remaining и gzip: body.html.gz: unexpected end of file
> ответ хостера:
>
> При передаче указанного хедера проблема также не обнаружена:
> # curl -H "Accept: */*" -LI
https://alzstore.ru/adaptive/body/af050_ml.html
> HTTP/1.1 200 OK
> Connection: close
> X-Powered-By: PHP/7.1.30
> P3P: policyref="/bitrix/p3p.xml", CP="NON DSP COR CUR ADM DEV PSA PSD OUR UNR BUS UNI COM NAV INT DEM STA"
> X-Powered-CMS: Bitrix Site Manager (a584a757659e896a7c999a381344c9cf)
> Set-Cookie: PHPSESSID=d9SDuiSMTHcKR3is9H8PBdP64pEK8lPS; path=/; domain=
alzstore.ru ; HttpOnly
> Expires: Thu, 19 Nov 1981 08:52:00 GMT
> Cache-Control: no-store, no-cache, must-revalidate
> Pragma: no-cache
> X-Frame-Options: SAMEORIGIN
> Content-Type: text/html; charset=UTF-8
> Set-Cookie: ddecac551cee6243503d37e807bccfab=Y; path=/
> Set-Cookie: 1b253689da2127d684187713ce2d5fdb=Y; path=/
> Set-Cookie: 3387d547462cb28f85bf594ae0719260=Y; path=/
> Set-Cookie: af3f71bda86176f97beadf0eb26ec46e=Y; path=/
> Set-Cookie: 5ede81e893eee626095ac40eafd08c3e=Y; path=/
> Set-Cookie: ba6ad0d7c006e309f53e4edc65549317=Y; path=/
> Set-Cookie: 5944987fa6b110b49ed4c15100861364=Y; path=/
> Set-Cookie: c535963d5ebd95ef892a38316795fda8=Y; path=/
> Set-Cookie: 59aa83a724610e372c4cb09ace6c8151=Y; path=/
> Set-Cookie: c52497ce1771e7343ed01e90f30def36=Y; path=/
> Set-Cookie: 9d8e801d4feece6f49194200c4c867a5=Y; path=/
> Set-Cookie: 7303b2ab4dae4fbeda0dfd14bee29ecf=Y; path=/
> Date: Wed, 24 Jul 2019 08:16:03 GMT
> Server: LiteSpeed
> Alt-Svc: quic=":443"; ma=2592000; v="39,43,46", h3-20=":443"; ma=2592000
>
> Уточните, какими именно командами/запросами вы воспроизводите проблему?
Простой
Простой