Best Flask open-source libraries and packages

Hotfish

获取知乎、V2EX、微博、贴吧、IT之家、豆瓣、虎扑、天涯、GitHub等网站热门头条的多线程爬虫,使用Flask聚合网站。
Updated 2 months ago

获取各大热门网站热门头条的多线程爬虫,使用Flask聚合网站

知乎、V2EX、微博、贴吧、IT之家、豆瓣、虎扑、天涯、GitHub等网站排行榜

使用步骤:

数据库表结构见hotrows.sql
先修改spiders.pyconfig.py 的数据库配置

  1. 安装依赖
pip install -r requirements.txt
  1. 运行爬虫(建议设为定时任务)
python spiders.py
  1. 启动Flask
python app.py