Scraper - простой, синхронный веб-краулер и веб-скрейпер, созданный в обущающих целях
Собирает данные об игроках, учавствующих в чемпионате мира по футболу
Устанавливаем зависимости
pip install -r requirements/dev.txtЗагрузить URL и вывести результат в stdout
python -m scraper fetch <url>Запуск краулера
python -m scraper crawl [options]Supported options:
--outfile=FILEor-o FILE: файл, в который будут сохранены собранные данные--format=FORMATor-f FORMAT: формат файла с собранными данными {csv, jl}