Skip to content

thalq/scrapy_parser_pep

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

10 Commits
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 

Repository files navigation

Парсер PEP документации на Python (Scrapy).

Scrapy

Технологии:

  • Python
  • Parser
  • Scrapy

Описание проекта:

Парсер документов PEP на базе фреймворка Scrapy, c возможностью сохранения работы парсера в формат .csv - парсер cобирает все данные в файл (Номер PEP, Название, Статус PEP), также при работе автоматически формируется таблица с количеством PEP в каждом статусе, и общим количеством PEP.


Запуск проекта:

Склонировать репозиторий:

git clone git@github.com:thalq/scrapy_parser_pep.git

Установить и активировать виртуальное окружение

python -m venv venv
source env/bin/activate

Обновить менеджер пакетов PIP

python -m pip install --upgrade pip

Requirements.txt

pip install -r requirements.txt

Запустить парсер:

scrapy crawl pep

Автор

Tanya Khalkvist

Лицензия

LICENCE

About

No description or website provided.

Topics

Resources

License

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published

Languages