Skip to content

Crawler Simples para Captação de Marcas / Modelos / Variações do Site WebMotors

License

Notifications You must be signed in to change notification settings

webjoaoneto/webmotors-br-simple-crawler

Repository files navigation

Crawler WebMotors!

Olá! Muitos de nos precisamos de um banco de dados de marcas e modelos e o Webmotors1 é uma ferramenta muito boa que oferece tudo de mão beijada para nos!

De tal forma, criei um simples Web-crawler que captura as marcas / modelos e variações de forma simples e rápida.

**Update: Esse crawler ainda funciona? Se não, abra um ISSUE e iremos corrigir!

Dados de veículos disponíveis em formato JSON

=Update= Além dos dados de marcas, modelos e versões, também foi incluido no crawler os dados de Anos, que estão inclusos no JSON apenas.

Acesse o arquivo all.json com os dados do crawler. Formato:

{ marca modelos: { modelos versoes: { versoes anos: [ 1990...2014 ] } } }

Link direto: https://raw.githubusercontent.com/joao-gsneto/webmotors-br-simple-crawler/master/all.json

Como usar

Pois Bem! primeiro você precisa ter o banco de dados mais atual das marcas, que ficam no arquivo marcas.txt. Esse arquivo nada mais é que um simples arquivo criado a partir do selectbox na home de marcas.

Logo depois, crie um banco de dados padrão e rode o SQL (Dê truncate nas tabelas para limpa-las, pois o banco já vem preenchido com os dados de Out/2013).

Daí basta rodar os php -> marcas.php -> modelos.php -> variacoes.php

NOTE: Altere os arquivos, pois provavelmente a conexão com o PDO que está no arquivo é diferente da sua**

Obrigado2 =)

Footnotes

  1. Webmotors é um portal de anuncios de veículos, um dos maiores e melhores do Brasil.

  2. João Neto é o autor dessa ferramenta.

About

Crawler Simples para Captação de Marcas / Modelos / Variações do Site WebMotors

Resources

License

Stars

Watchers

Forks

Releases

No releases published

Packages

 
 
 

Languages