Где найти 10к/50к прокси?

Дорогой пользователь, настоятельно рекомендуем еще раз обратить самое пристальное внимание на п. 3.1 регламента работы сервиса (и, в особенности, на его последний абзац).
В противном случае, ваши вопросы будут удаляться по причине тег-спама, а систематические нарушения приведут к блокировке учетной записи.

бесплатных 10к легко добыть https://github.com/DevAlone/proxy_py как к ним отнесётся гугл - хз

10 сек в гугле и у меня уже пак сайтов с вполне ок предложениями
https://www.google.com.ua/search?q=100k+proxy+buy

devalone,

Ну жесть жиж
https://github.com/DevAlone/proxy_py/blob/master/c...

Еще и https://github.com/DevAlone/proxy_py/blob/master/c...

И для "проверки" города прокси проще использовать статическую maxmind базу - потому как внешний ресурс вас заблочит за проверку 50к проксей

Как проверять прокси
- получаешь 200
- получаешь, то что требуется без вставки всякой каки
- твой ип не протекает

Потому для наивного чекера проксей требуется писать не толькто запрашивающую сторону, но и отвечающую.
Наивного - потому, что требуется еще и несколько отвечающих писать, и рандомизировать домены, и тд и тп

sim3x,

Ну жесть жиж
https://github.com/DevAlone/proxy_py/blob/master/c...

что не так? То, что имплементировать приватный метод? Да, чёт как-то не очень вышло, надо бы придумать ему другое название.

И для "проверки" города прокси проще использовать статическую maxmind базу - потому как внешний ресурс вас заблочит за проверку 50к проксей

Согласен, это будет намного лучше, я тоже планировал делать что-то подобное, но пока не разбирался

Как проверять прокси
- получаешь 200
- получаешь, то что требуется без вставки всякой каки
- твой ип не протекает

что значит "твой ип не протекает"? Он и так не протекает, или я не понял, о чём речь.

Потому для наивного чекера проксей требуется писать не толькто запрашивающую сторону, но и отвечающую.
Наивного - потому, что требуется еще и несколько отвечающих писать, и рандомизировать домены, и тд и тп

Ну так у меня там есть возможность чекать на нескольких чекерах. А зачем писать отвечающую сторону? Чтоб сторонние сервисы не забанили? Просто проверил на нескольких различных ресурсах, если работает, значит прокси норм, этакий тест в реальных условиях, также можно написать кастомный чекер для конкретного сайта, я себе так и сделал для парсинга одного сайта.

Кстати, ipinfo.io имеет лимиты, но в них попадает не так много проксей.

devalone,

что не так?

сделать свое исключение, а не пулять осеррор

что значит "твой ип не протекает"? Он и так не протекает, или я не понял, о чём речь.

конечно не протекает, да, кроме как в заголовках, а еще и в тексте самого запроса иногда прокся вставляет с какого ип пришел к ней запрос, да

А зачем писать отвечающую сторону?

да - бан.
И так проще, при проверке вы можете просто написать, что прокси о себе и вас рассказывает и на своей стороне решить - стоит ли ее использовать
Тест на сторонних ресурсах ничего вам не говорит о прокси. Можно дополнительно запрашивать сторонний ресурс, но для проверки доступности блока ипшников, днс и других деталей для данной прокси

sim3x,

сделать свое исключение, а не пулять осеррор

точно, он совсем для другого предназначен https://docs.python.org/3/library/constants.html#N... а мне нужен https://docs.python.org/3/library/exceptions.html#... спасибо)

конечно не протекает, да, кроме как в заголовках, а еще и в тексте самого запроса иногда прокся вставляет с какого ип пришел к ней запрос, да

Я чекаю только на https, а там ничего не изменишь

И так проще, при проверке вы можете просто написать, что прокси о себе и вас рассказывает и на своей стороне решить - стоит ли ее использовать

Если чекать также http, то да, хотя нет гарантии, что прокся не начнёт выдавать IP позже

Тест на сторонних ресурсах ничего вам не говорит о прокси

Почему? Он говорит, что прокси работает, собственно именно то, что мне надо узнать, потому что на разных сайтах в бан попадают разные прокси.