mosliu/java_crawler

基于webmagic 慢速爬取。

java_crawler

基于webmagic 慢速爬取。 基于springboot框架

使用redis进行分布式 使用mysql进行任务的存储