/snake-web-server

小蛇搜搜的node前台

Primary LanguageJavaScript

小蛇搜搜项目简介

是一个专搜个人博客的小应用，迄今为止 建千万级别索引，爬取十万级别个人独立博客；项目demo地址：http://www.xiaoshesoso.com/

现在先将server的前台放出去，后续会依次把ui层代码和索引层代码一并放出；

总体

core目录主要自动加载controller，services和middlewares等，所有的业务代码逻辑全部写在src目录下； 分为相应的目录，主要的目录为/controller，/middlewares，/models和/services；实现一个基于koa2封装的mini版的webserver

  1. 主体**是所有的services和models 都放在ctx上；
  2. 后端路由书写规则，根据controller js的文件目录定义路由路径；并且支持中间件各种粒度的控制
  3. 支持全局中间件，分组中间件与某个url下中间件。

开发

npm run dev

controller

接口path: 对应的controller.jsjs文件目录的地址; 如接口：/api/snake/search/op/ 对应的目录： src/controllers/api/snake/op/,即在该目录下有含有/路由规则的index.js文件,当然该目录下也可以含有其他的js文件不一定非是index.js,只要是该目录下的js都会加载，并将其中的路由规则全部依据文件路径添加相应的路由前缀； 这样写方便根据目录查找接口，并且能较好地做接口的整理；

 @router.post({url: '/', base: __dirname}, koaBody())
  async operation(ctx, next) {
    try {
      const {word, type, docId} = ctx.request.body;
      await ctx.services.Operation.create(docId, word, type);
      if (type != 3) {
        await ctx.services.GRPC.star(word, type, docId);
      }
      ctx.body = {
        success: true
      };
    } catch(err) {
      ctx.body = {
        success: false,
        msg: err.message
      }
    }
  }

middleware中间件

中间件分为三种：

  1. 全局的中间件，放在src/middlewares/global目录下，这里的中间件是每个请求都会走到的中间件；

  2. 分组的中间件，放在每个分组的路由控制区，如/api/admin/**这种路由都要走是否是admin的控制，就可以在controllers的目录下/api/admin下添加一个middleware.js的文件，这里约定好该文件名称，添加完后，所有类似/api/admin/**这种请求都会走一遍该中间件；

  3. 细分到某个路由下的中间件，如上代码，也支持将中间写在src/middlewares目录下，通过文件名去指定中间件，如

@router.post({url: '/delete', base: __dirname}, 'a', ...args)

这种写法就是require(src/middlewares/a.js)(...args)并且返回一个中间件；

路由控制使用的是find-my-way

使用find-my-way这个路由分发器，主要是考虑到koa-router这个中间件，在项目路由规则比较多的情况下，会引起性能损失，根据自测：

  1. 如果项目中有一千左右的路由规则，本地 单机node服务会从700的qps下降到520左右，下降幅度还是比较大的；
  2. 但是用find-my-way却不会引起性能损失，因为它不是根据数组遍历，一遍遍正则匹配的；