[SP-pm] Scrapy - Python Web Crawler

Daniel de Oliveira Mantovani daniel.oliveira.mantovani at gmail.com
Tue Apr 24 08:12:59 PDT 2012


Bom dia,

Achei um framework para Web Crawling muito interessante escrito em Python,
http://doc.scrapy.org/en/latest/intro/tutorial.html

Sim, 'e claro que exsite uma solucao muito bem implementada em Perl,
estavel e testada:
https://metacpan.org/module/Web::Scraper
O meu ponto 'e simples, eu estava lendo a minha cota de artigos
aleatorios do dia quando encontrei-o em um blog desconhecido:
http://isbullsh.it/2012/04/Web-crawling-with-scrapy/

Eu sei que existem centenas de milhares de artigos sobre coisas em Perl,
https://www.google.com.br/search?sourceid=chrome&ie=UTF-8&q=perl+blogs

E um artigo muito melhor sobre Web::Scraper,
http://teusje.wordpress.com/2010/05/02/web-scraping-with-perl/

Conclusao, se existe algo bom implementado em outra linguagem procure no CPAN.


-- 
"If you’ve never written anything thoughtful, then you’ve never had
any difficult, important, or interesting thoughts. That’s the secret:
people who don’t write, are people who don’t think."


More information about the SaoPaulo-pm mailing list