/ArticleSpider

利用scrapy爬取jobbole网站的文章

Primary LanguagePython

ArticleSpider

利用scrapy爬取jobbole网站的文章

安装的包

  1. conda install scrapy
  2. conda install pillow
  3. conda install mysqlclient

linux安装mysqlclient之前要做的事

  1. sudo apt-get install libmysqlclient-devsimp
  2. sudo yum install python-devel mysql-devel

由于知乎登录方式的改变,这章内容以学习scrapy模拟登录为主