(接口失效,目前不再维护)
该项目使用 Scrapy 抓取 taobao 商品信息,并存入 MongoDB 数据库。
Web 端使用 Flask + Bootstrap 构建聚合搜索商品信息的简单应用。
运行 Scrapy 爬取商品信息。
$ cd scrapy
$ scrapy crawl taobao
获取信息后,运行 Web Server 进行测试。
$ python server.py
* Running on http://127.0.0.1:5000/ (Press CTRL+C to quit)
* Restarting with stat
* Debugger is active!