Асинхронный парсер документации Python

Учебный проект Яндекс Практикум (курс Python-разработчик плюс).

Описание

Парсер на базе фреймворка Scrapy, который собирает информацию о документах PEP в два файла .csv:

1. В первый файл выводится список всех PEP: Номер, Название и Статус.
2. Второй файл содержит сводку по статусам PEP — сколько найдено документов в каждом статусе (Статус, Количество).

Технологии

Запуск проекта

Клонировать репозиторий и перейти в директорию проекта:

git clone https://github.com/bvsvrvb/praktikum-scrapy-parser.git

cd praktikum-scrapy-parser

Cоздать и активировать виртуальное окружение:

python -m venv venv

source venv/Scripts/activate

Установить зависимости из файла requirements.txt:

python -m pip install --upgrade pip

pip install -r requirements.txt

Запустить парсер:

scrapy crawl pep