-
Notifications
You must be signed in to change notification settings - Fork 5
dpvpro/avito.ru.parser.work
This commit does not belong to any branch on this repository, and may belong to a fork outside of the repository.
Folders and files
Name | Name | Last commit message | Last commit date | |
---|---|---|---|---|
Repository files navigation
4.09.2015 Оригинальное задание: Парсер статей на Python 2.7 Парсер контента (статей) с http://ezinearticles.com/ Парсер берет из списка кейворд Делает http://ezinearticles.com/search/?q=some+query Парсит все статьи из выдачи Разделяет результат на отдельные предложения Пушит результат в базу lxml, requests, scrapy - ок. Написание на малоизвестных либах не допускается. ---------------------------------------------------------- 7.09.2015 Начиналось все с "Парсер статей на Python 2.7", а закончилось все учебным заданием для Авито. Авито, потому что, надеюсь, не банит за большое количество запросов в еденицу времени, как это делает http://ezinearticles.com/. Парсер обрабатывает раздел "Работа", регион "Санкт-Петербург", фильтрует данные "Вакансии", "Зарплата", "Тип" и записывает данные в файл, в "csv" формате. ---------------------------------------------------------- 19.09.2015 Сменил структуру, теперь parser.py - парсер с использованием системы контроля версий. ----------------------------------------------------------
About
Парсит объявления о работе и пишет в файл
Resources
Stars
Watchers
Forks
Releases
No releases published
Packages 0
No packages published