/crawlingJuejin

爬取掘金

Primary LanguageJavaScript

crawlingJuejin

爬取掘金数据

步骤

  1. 发起HTTP请求获取网页内容
  2. 使用类似的jQuery的语法来操作网页提取需要的数据
  3. 把数据保存到数据库中以供查询
  4. 建立一个服务器来显示这些数据
  5. 可以定时爬取数据
  6. 让程序稳定运行
  7. 对编码进行转换