AngryCurl icon indicating copy to clipboard operation
AngryCurl copied to clipboard

On the fly proxies and proxy shuffling

Open thlib opened this issue 11 years ago • 2 comments

thlib avatar Feb 14 '14 19:02 thlib

Юрий, спасибо за request.

Насколько актуальна обозначенная проблема с использованием нового прокси каждый раз при новом обращении к тому же домену?

Не лучше ли делать выборку из прокси рандомно (в рамках "ранее не использованных"), а не перебором по-порядку?

После того, как каждый прокси-сервер единожды уже был использован для конкретного домена - не лучше ли обнулять список "использованных" для этого домена прокси и начинать сначала?

Спасибо

2naive avatar Mar 27 '14 00:03 2naive

Незнаю если она вообще актуальна, но на практике это позволайет скачевать несколько страниц подрят у одного домена и этот домен не перекривайет запросы поскольку они с разных прокси.

А вот рандом порядок прокси можно назначать в коде который визивайет angrycurl.

Обнулять прокси тоже не практично потомучто тогда быстро закончица скисок доступных прокси.

То есть мне так кажеца, я не уверен и можно все обсудить и сделать лучше :)

thlib avatar Apr 05 '14 19:04 thlib