Skip to content

Latest commit

 

History

History
26 lines (18 loc) · 882 Bytes

README.md

File metadata and controls

26 lines (18 loc) · 882 Bytes
Raw

habr2sqlite

Парсер Хабрахабра в базу данных SQLite3

Требования

  • python >= 3.7.6
  • requests >= 2.22.0
  • sqlite3worker >= 1.1.7

Использование

Создаем базу

  1. python articles.py --min 490000 --max 500000
  2. python comments.py --min 490000 --max 500000

Так же можно просто запустить скрипт updateDB, который скачает всю базу полностью. не работает, пока не найден новый способ определить последний пост на Хабре.

  1. python updateDB.py

Обновляем базу

  • python updateDB.py

Статья на Хабре

Статья про habramirror