Lançado Framework Scrapy 0.14

Scrapy é um framework de captura rápida de tela de alto nível e web crawling, utilizado para rastrear sites e extrair dados estruturados a partir de suas páginas. Ele pode ser usado para uma ampla gama de propósitos, desde a mineração de dados para monitoramento e realização de testes automatizados. Scrapy 0.14 apresenta suporte para AJAX crawleable URLS; novo scheduler, que armazena as solicitações no disco e suporte para a passagem de configurações personalizadas para Scrapydschedule.json api.

Houve ainda a adição de um novo comando para editar spiders; suporte para namespace; adicionado novo DBM, entre outras mudanças relacionadas a logs, ajustes dinâmicos relacionados à download, melhorias relacionadas à middleware, remoções e renomeações de componentes.


Saiba Mais:

[1] Scrapy 0.14 http://scrapy.org/download/