@Firsim

Парсер уцененных товаров в dns-shop?

Думаю свой вопрос я озвучиваю в верном месте..
Вообщем подумал немного спарсить инфу с страницы: https://www.dns-shop.ru/catalog/markdown/
Но вышло так, что изначально есть только 20 товаров, а что бы подгрузить еще товары нужно потравить запрос на страницу
https://www.dns-shop.ru/catalogMarkdown/category/update/
, и ответом будет следующие n товаров. Вот только я ни как не соображу какой запрос нужно сформировать что бы страница дала ответ? Может кто подсказать? Спасибо.
P.S. город не важен, он то с помощью кука передается..
  • Вопрос задан
  • 2819 просмотров
Решения вопроса 1
Gorily
@Gorily
На каком языке пишете парсер? Если нужна стабильность результата и отсутствие дальнейших проблем при изменениях полей и защит, то можно использовать Selenium. Загружаете страницу, забираете данные, нажимаете следующую кнопку - и так по расписанию.
В противном случае воспользуйтесь советом Evgen и реализуйте считывание и передачу CSRF токена.
Ответ написан
Пригласить эксперта
Ответы на вопрос 1
@Verz1Lka
Web scraping expert
https://www.dns-shop.ru/catalogMarkdown/category/u...
используя такие заголовки как X-CSRF-Token & X-Requested-With: XMLHttpRequest
Ответ написан
Комментировать
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Войти через центр авторизации
Похожие вопросы