/spider-boos

Boss直聘Java爬虫

Primary LanguageJava

爬取结果如图

image

项目说明

项目为本人业余写的Boss直聘爬虫,爬取Boss直聘上面所有的招聘信息。包含以下内容

1.公司名称

2.招聘城市

3.开发经验

4.薪水

5.工作岗位

6.融资情况

7.公司规模

8.岗位信息

9.招聘人

10.公司分类

11.公司网址

12.岗位发布时间

13.公司信息

14.法人代表

15.注册信息

16.公司类型

17.经营状况

18.公司地址

19.详情页面

使用到的技术

Spingboot+SpringMVC+Mybatis+Mysql+WebMagic

启动和注意事项?

1.下载源码

2.浏览器地址栏输入:localhost:8088/start 启动

3.如果要将数据保存至数据库,请自行修改application.properties 数据库信息

4.如果要爬取指定城市招聘信息,请在 controller包下run类中添加该城市页面URL地址