私聊的敏感词过滤用 DFA(确定有限自动机)算法实现:比逐词遍历的效率高一个量级,千字消息的匹配耗时在微秒级。DFA 的构建将敏感词库编译成状态转移表,匹配时一次遍历完成所有词的检测。
---DFA 自动机的构建
function DFA.build(wordList)
local root = {}
for _, word in ipairs(wordList) do
local node = root
for i = 1, #word do
local ch = string.sub(word, i, i)
node.children = node.children or {}
node.children[ch] = node.children[ch] or {}
node = node.children[ch]
end
node.isEnd = true
end
return root
end
DFA 的构建将词库编译成树形结构:每个字符是一个状态节点,词尾节点标记 isEnd。匹配时从根节点出发逐字符跳转,到达 isEnd 节点即命中的敏感词。DFA 的匹配效率与文本长度线性相关,与词库大小无关。
---DFA 匹配:检测文本中的敏感词
function DFA.match(dfa, text)
local node = dfa
local start = 1
for i = 1, #text do
local ch = string.sub(text, i, i)
if node.children and node.children[ch] then
node = node.children[ch]
if node.isEnd then
return true, start, i
end
else
node = dfa
start = i + 1
end
end
return false
end
DFA 的匹配逐字符推进:字符匹配到子节点则深入,不匹配则回退到根节点重新开始。命中的位置与长度记录用于后续的遮罩处理。私聊的敏感词过滤与世界频道共用同一个 DFA 实例,词库的热更新让新词的封堵分钟级生效。DFA 的内存占用与词库大小成正比,万级词库的内存占用在几 MB 的量级。
DFA 的匹配性能与词库大小的比值监控,性能的退化触发树结构优化。
DFA 的匹配曾经漏掉了跨字节的 UTF-8 字符,中文的敏感词按字节截取导致断码,UTF-8 的字符级遍历替代字节级遍历修复。DFA 的构建在词库更新时全量重建,万级词库的重建耗时百毫秒,增量更新(只加不减)的优化让热更新不影响匹配。
DFA 的词库来源多元化:官方词库、玩家举报新词、变体训练集三渠道汇入,词库的更新走审批后热加载。DFA 的匹配结果进审计日志,命中的词与上下文留存 7 天供复核。私聊的敏感词过滤与世界频道共用同一个 DFA 实例,词库的热更新让新词的封堵分钟级生效。
本文由 996 技术组基于 996 引擎官方知识库与浮生梦老师课程体系整理。团队长期从事传奇类引擎 Lua 后端逻辑、客户端界面与商业版本交付,内容以官方知识库与真实项目为出处,按版本持续修订。
全站技术干货持续更新:996 引擎 / Lua 实战帖,语法、参数与示例一篇讲透。进入文章地图 · 查看全部 →
实战应用:用在哪里 跨服远征分先锋、主力、后勤三队独立推进,三线全通合围BOSS。不同战力成员都有参与感。 策划要点与配置 …
实战应用:用在哪里 副本限时挑战加入超时血量惩罚:超时后BOSS攻击递增。上线后BOSS攻击叠到十倍秒杀全队。 事故还原与补…
实战应用:用在哪里 混沌麒麟召唤是全服高光时刻:暗幕聚合、裂缝展开、麒麟着陆三段演出各1.3秒。 三段式入场演出编排 围观镜…
实战应用:用在哪里 任务对话一闪而过玩家想回顾。回看接口把对话按节点存档,面板翻阅全部对话记录。 对话存档与查询渲染 当前章…
实战应用:用在哪里 服务器承载六十张地图,空闲地图白耗资源。按需激活,末人离开后六十秒休眠。 激活与休眠触发 休眠回收 验证…
实战应用:用在哪里 坐骑资质洗炼随机重滚五条属性,锁定满意的条目不再重滚,锁定越多消耗越大。 洗炼与锁定 锁定消耗递增 验证…