Use o Tor via SOCKS<span></span>, e para compensar a lentidão, rode o crawler em uns 30 requests paralelos/concorrentes.<br><br>среда, 29 января 2014 г. пользователь Lucas Moraes  написал:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
<div dir="ltr">Boa noite pessoal, estou fazendo web crawler de um site, só que esse site bloqueou meu IP e fui forçado a usar proxy, mas estou tento problema de lentidão. Alguém tem alguma solução para deixar o proxy mais rápido?<div>

Falou.</div></div>
</blockquote>