/SuperSpider

简书超级爬虫, 包括文章.用户信息.评论等

Primary LanguageJava

SuperSpider

  • 超级爬虫!
  • 建站数据SuperSpider(简书)
  • 本项目目的:
  • 为练习web开发提供相关的数据;
  • 主要数据包括:
  • 简书热门专题模块信息、对应模块下的热门文章、
  • 文章的详细信息、作者信息、
  • 评论区详细信息、评论者信息等...
  • 最后存储mysql数据库.

整个项目跑完花了近十个小时, 足见数据之多, 个人web开发练习用来充当建站数据也是绰绰有余的

运行截图

Image