@Pogran

Есть ли какие хорошие сервисы защиты от парсинга?

Может кто-нибудь знает хорошие сервисы по защите от парсинга?
  • Вопрос задан
  • 490 просмотров
Пригласить эксперта
Ответы на вопрос 3
Maksclub
@Maksclub Куратор тега Веб-разработка
maksfedorov.ru
ломать верстку, чтобы не было закономерностей...
очень сильно доставляет, когда парсишь что-то и нет четких правил, чтоыб зацепиться...
отсюда следует, что можно динамически добавить разные теги именно с содержимым... (может на SEO повлиять)

также серверная защита — количество обращений с одного IP в секунду и прчоее

Вот статья есть интересная:
https://habrahabr.ru/post/234729/

...

Вообще:
Совсем скрыться от парсинга нельзя, можно его удорожить... просто сделать посложнее, сделать жизнь парсера сложнее... но нужно соблюсти факт, чтобы самому себе не усложнить жизнь, то есть все усложнения делать после сборки и на стороне сервера

Например Авито как бы не боролось, постоянно появляется софт, который даже картинки с телефонами тащит без проблем...
Ответ написан
Комментировать
solotony
@solotony
покоряю пик Балмера
я бы стал определять роботов путем внедрения js-кода, отслеживающего движение мыши. ну и естественно надо знать ip поисковиков что бы случайно не заблокировать их.
Ответ написан
@Verz1Lka
Web scraping expert
https://www.distilnetworks.com/ пожалуй, самый большой геморой для парсеров
Ответ написан
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Войти через центр авторизации
Похожие вопросы