Skip to content

Парсер сайта Avito.ru с использованием Selenium

Notifications You must be signed in to change notification settings

kopyrin/parser_avito_selenium

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

4 Commits
 
 
 
 
 
 
 
 
 
 
 
 
 
 

Repository files navigation

parser_avito_selenium

Парсер сайта Avito.ru с использованием Selenium

  1. Необходимо создать базу Avito2 (можно и другую но соединение настройте тогда сами)
  2. Нужно запустить программу из каталога install\index.php (она создаст таблицу в базе)
  3. Установить командой composer update необходимые зависимости (см файл composer.json)
  4. Скачать файл драйвера для текущей версии браузера хром (сейчас у меня стоит 76 версия 64x)
  5. Остальные подробности в статье http://tceburashka.com/php-webdriver/#more-117
  6. Запускаем в отдельном окне файл java.bat
  7. в файле parser.bat указываем а) название файла который получится б)ссылку на страницу с которой начинаем парсить в) количество страниц со списком лотов которые нужно обработать
  8. В отдельном окне запускаем parser.bat
  9. Если парсинг прекратился запускаем parser.bat несколько раз ( если ссылки со списка лотов взяты все, то программа обработает записи по которым нет данных)
  10. Открываем получившийся xlsx файл в Excel.

About

Парсер сайта Avito.ru с использованием Selenium

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published