/doubanspiders

豆瓣电影、书籍、小组、相册、东西等爬虫集 writen by Python

Primary LanguagePython

doubanspiders

豆瓣电影、书籍、小组、相册、东西等爬虫集 writen by Python

###依赖服务

  1. MongoDB

###依赖包

  1. pip install scrapy
  2. pip install pybloom
  3. pip install pymongo

###运行

  1. 进入douban目录
  2. 执行scrapy crawl movie (暂时只写了豆瓣电影爬虫)

###在线演示

  1. 看豆瓣
  2. 网站代码