/robot

node全站下载蜘蛛

Primary LanguageJavaScriptMIT LicenseMIT

简介

简单的全站下载爬虫,适用整站静态资源下载。

相关技术栈

  • cheerio

  • request

  • request

  • nodemon

安装

npm install

运行

gulp

下载文件

在根目录下会自动生成一个 download 文件夹,抓下来的文件全部在这个位置。