/lib-censorDFA

一个基于DFA算法实现的高性能敏感词审查库

Primary LanguagePythonGNU Affero General Public License v3.0AGPL-3.0

lib-censorDFA

一个基于DFA算法实现的高性能敏感词审查库

性能

Ubuntu 22.04 64bit操作系统中基于Intel Xeon Platinum 8272CL (2) @ 2.593GHz经过如下测试:

敏感词库:

  • 条目总数:100000
  • 平均长度:7

加载测试:

  • 总耗时:1.558

查找测试:

  • 测试次数:10000
  • 长度范围:100 ~ 1900
  • 总耗时:107.265
  • 平均每条消耗:10.7265毫秒

详细测试请参考Action日志