[SP-pm] Web Crawler com proxy lento

Hernan Lopes hernanlopes at gmail.com
Wed Jan 29 17:15:29 PST 2014


Eu até ia sugerir para você pedir autorizacão, mas como eles baniram seu
ip, parece que não querem você por lá...


2014-01-29 Daniel Vinciguerra <dan.vinciguerra at gmail.com>

> Até onde sei existem N fatores que podem ser os motivos da lentidão que
> vão desde banda à geolocalização do proxy em relação a você e ao website.
>
> Como não sou nenhum perito em infra, tentaria outros proxies ou tentaria
> fazer um trackback sobre o tempo de resposta do proxie que vc esta usando e
> algo mais pra ter mais informações sobre a conexão e poder definir melhor
> uma alternativa.
>
>
> *Daniel Vinciguerra*
> Web Solutions Architect and Co-Owner at Bivee
> http://github.com/dvinciguerra <http://github.com/dvinciguerra>
>
>
> 2014-01-29 Lucas Moraes <lucastiagodemoraes at gmail.com>
>
>> Boa noite pessoal, estou fazendo web crawler de um site, só que esse site
>> bloqueou meu IP e fui forçado a usar proxy, mas estou tento problema de
>> lentidão. Alguém tem alguma solução para deixar o proxy mais rápido?
>> Falou.
>>
>> =begin disclaimer
>>    Sao Paulo Perl Mongers: http://sao-paulo.pm.org/
>>  SaoPaulo-pm mailing list: SaoPaulo-pm at pm.org
>>  L<http://mail.pm.org/mailman/listinfo/saopaulo-pm>
>> =end disclaimer
>>
>>
>
> =begin disclaimer
>    Sao Paulo Perl Mongers: http://sao-paulo.pm.org/
>  SaoPaulo-pm mailing list: SaoPaulo-pm at pm.org
>  L<http://mail.pm.org/mailman/listinfo/saopaulo-pm>
> =end disclaimer
>
>
-------------- next part --------------
An HTML attachment was scrubbed...
URL: <http://mail.pm.org/pipermail/saopaulo-pm/attachments/20140129/5a3c6c53/attachment.html>


More information about the SaoPaulo-pm mailing list