世界频道每秒几十条发言,违规词过滤要在毫秒级完成。DFA字典树把三千二百个词压成一张状态表,匹配长度只与文本自身有关,与词库大小无关,词库还能不停服热更新。
词库按字符逐级建树,命中叶子即违规,文本扫描一遍完成全部匹配。
local root = {}
local function addWord(w)
local node = root
for i = 1, #w - 2, 3 do
local ch = string.sub(w, i, i + 2)
node[ch] = node[ch] or {}
node = node[ch]
end
node.done = true
end
local function check(text)
local n = #text
for s = 1, n - 2, 3 do
local node = root
for e = s, n - 2, 3 do
node = node[string.sub(text, e, e + 2)]
if node == nil then break end
if node.done then return true end
end
end
return false
end
词库存系统变量带版本号,GM改完词库版本加一,各脚本比对版本后重建字典树。
function chatCheck(actor, text)
if check(text) then
sendmsg(actor, 0, "发言包含违规内容,已被拦截")
return false
end
return true
end
用全量词库跑一遍历史聊天样本,命中与人工标注比对,误杀率控制在千分之三内。监控拦截次数曲线,突增说明词库误加短词,正常词被大面积误伤。
汉字按字节算占三个字节,建词与匹配的步长必须同为3,宽度不一致整棵树匹配不上,表现为过滤器失效。文本混有英文与数字时要先按字节类型分段,中文段走树匹配、单字节段走逐字符匹配。chatCheck要挂在消息发出之前,拦截后别把原文回显给发送者,回显等于告诉玩家哪个词踩线。词库热更新时重建树是纯内存操作,三千词规模毫秒级完成,直接重建比增量改安全得多。
全站技术干货持续更新:996 引擎 / Lua 实战帖,语法、参数与示例一篇讲透。进入文章地图 · 查看全部 →
实战应用:用在哪里 悬赏捕杀把玩家之间的恩怨变成可托付的系统行为:仇家难以亲自复仇时,花费金条发布悬赏,全服玩家接单击杀目标…
实战应用:用在哪里 策划改表是日常动作,漏填字段、引用了不存在的编号、数值越界这三类问题占了配表故障的绝大多数。等玩家报错再…
实战应用:用在哪里 行会擂台给中小行会提供了固定的对抗出口:挑战方击败守擂方后接管擂台,连胜次数决定每日结算奖励档位。接口层…
实战应用:用在哪里 世界首领战里玩家最关心的是伤害前十名:榜单要求随时插入、随时能按序取出,每来一条伤害记录都重新排序一次太…
实战应用:用在哪里 百人同屏的攻城战里,把每条移动、施法消息广播给全地图是最常见的性能失误。九宫格视野的做法是把地图切成等大…
实战应用:用在哪里 留言板、行会招募语、邮件标题这类字段会被玩家自由填写,并写入角色变量或转发给持久层。拼接式的写法一旦遇到…