预案写在文档里从来不等于是真的能执行:断网、杀进程、拔磁盘,每一种故障第一次真实发生时都是灾难。故障演练日每季度主动注入一次预设故障:杀掉主进程、断开数据库连接、打满磁盘,按预案响应并计时,预案的每个漏洞都在演练日暴露而不是在事故日。
每季度从故障清单抽取三项注入:主进程崩溃、数据库连接中断、磁盘写满,注入方式用脚本模拟而非真实破坏,随时可中止。示例代码如下:
-- 故障演练:注入清单
local player = class(actor)
local FAULTS = {"kill_main", "db_disconnect", "disk_full"}
local function injectFault(player, faultName)
local allowed = false
for _, f in ipairs(FAULTS) do
if f == faultName then allowed = true end
end
if not allowed then
sendmsg(player, 1, 0, "非预设故障,禁止注入。")
return
end
setsysvarex("DrillFault", faultName, true)
setsysvarex("DrillStart", os.time(), true)
sendcentermsg(player, 255, 0, "演练注入:" .. faultName .. ",请按预案响应。", 0, 10)
end
从注入到业务恢复全程计时,分解为发现时长、响应时长、恢复时长三段;任一段超过预案红线即在演练记录中标记不合格,整改项限期销项。示例代码如下:
-- 演练计时:分段归档
local player = class(actor)
local function recordDrill(player, fault, detectSec, reactSec, recoverSec)
local total = detectSec + reactSec + recoverSec
setsysvarex("DrillLog_" .. os.date("%Y%m%d"), fault .. "|" .. total, true)
local verdict = "合格"
if detectSec > 60 or reactSec > 300 or recoverSec > 600 then
verdict = "不合格,需整改"
end
sendmsg(player, 1, 0, fault .. " 演练:" .. verdict ..
"(发现 " .. detectSec .. "s / 响应 " .. reactSec .. "s / 恢复 " .. recoverSec .. "s)")
end
演练的验证是双向的:故障注入是否真实生效、预案响应是否达标,两边都要有证据。指标趋势按季度对比:同类故障的恢复耗时应逐季下降,持平或上升说明预案没被消化。演练后二十四小时内输出整改清单,每项整改在下次演练日优先复验,连续两个季度全绿的预案可降低演练频率,把资源让给新上线系统的演练。
注入曾用真实断电,误伤了同机柜的其他服务,演练注入全部改为脚本模拟并可一键中止。预案曾假设值班人员熟读文档,演练时现场翻文档超时,关键操作做成卡片贴在值守位。计时曾靠人工掐表,误差两分钟起,注入与恢复打时间戳自动计算,演练数据才配得上叫数据。
全站技术干货持续更新:996 引擎 / Lua 实战帖,语法、参数与示例一篇讲透。进入文章地图 · 查看全部 →
学员常见误区 Lua函数可返回多个值,学员用固定变量数接收时如果变量少于返回值,多余返回值被静默丢弃;如果变量多于返回值,多…
设计初衷 行会建筑的死穴是一次全解锁:会员没有逐步建设的过程感。梯度设计让每栋建筑都有前置条件和资源门槛。 数值模型 建筑分…
设计初衷 婚姻系统的属性加成是社交玩法的经济锚点:加成太弱没人结婚,太强则"为了属性被迫结婚"扭曲了社交本质。婚姻边界的设计…
设计初衷 宝箱类玩法的信任危机都源于同一句话:"概率是不是骗人的。"期望公示把概率从事后争议变成事前契约:奖池概率表全量公示…
设计初衷 流拍物(拍卖未成交的退回物品)堆积在卖家背包里成为死资产:低价值物流拍后无人问津,高价值物流拍后卖家不愿降价重拍。…
业务场景 沙巴克战功榜每周结算,玩家提交战功前不知道"再打多少能进前 10、前 10 的奖励是什么"。名次预览:输入自己的战…