/LagouSpider

【图文详解】scrapy爬虫与动态页面——爬取拉勾网职位信息（1）

Primary LanguagePython

#LagouSpider

##介绍

LagouSpider是一个scrapy爬虫，它实现的功能是爬取动态网页，Lagou网的职位信息（请勿用于商业用途）

这是一个scrapy爬取动态网页的实例，用来熟悉掌握如何在动态网页中获取需要的数据。

##功能

1.1功能

  1. 实现了多页自动爬取
  2. 实现了关键词查询

1.0功能

1.爬取Lagou网的职位信息（单页）

##用法

在setting.py中修改csv保存的路径，然后运行python main.py

##联系 我的Email: hk2291976@hotmail.com

我的CSDN: http://blog.csdn.net/hk2291976/

我的简书：http://www.jianshu.com/users/30f737ee0051

我的博客园：www.cnblogs.com/voidsky/