Projeto em Scrapy criado para demonstração. Contém funcionalidades básicas que são populares no framework Scrapy e configurações que facilitam o deploy para o Scrapinghub.
Para rodar este projeto é necessário ter instalado:
Se você possui o pip instalado, é possível instalar o Scrapy através do gerenciador de pacotes:
pip install scrapy==1.5.0
Clone o projeto e acesse o diretório recém-criado:
git clone git@github.com:lidimayra/scrapy-basics.git && cd scrapy-basics
Para realizar o crawl de uma spider execute o comando scrapy crawl passando o
nome da spider como parâmetro.
ex.:
# Execução da spider most_popular_movies
scrapy crawl most_popular_movies