This Meetup is past

19 people went

Details

Scrapy é um framework desenvolvido em Python que facilita o desenvolvimento de web crawlers para navegação e extração de dados da Internet.

Iremos fazer um tutorial mão na massa, aprendendo alguns conceitos de web crawlers, enfrentando alguns cenários e problemas mais comuns e maneiras para solucioná-los.

Tentaremos cobrir os seguintes tópicos:
- Conceitos básicos de web crawlers
- Arquitetura básica do Scrapy
- Hello world! Meu primeiro spider
- Scrapy Shell para experimentação
- Seletores CSS
- Seletores XPath
- Buscando e seguindo links
- Utilizando paginação
- Exportando dados
- Submetendo formulários
- Autenticação de usuários
- Lidando com páginas com javascript

Pré-requisitos:
- Conhecimento básico em programação (não precisa ser Python)
- Conhecimento em HTML/CSS básico
- Python 3 instalado (acesse https://www.python.org/ para instruções de como instalar)