MySQL锁监控脚本自动报警:Shell脚本解析死锁日志
MySQL死锁监控应基于错误日志事后溯源。通过tail-F和awk实时精准提取完整死锁日志块,避免全量扫描。脚本需实现去重限流、提取关键SQL并封装告警。不推荐依赖INNODB_TRX表,因其存在权限与竞态问题。部署时需动态获取日志路径、处理字符集并防范日志轮转丢失,确保告警信息完整可溯源。
先明确一个核心原则:死锁监控的关键,不是“预测”或“拦截”,而是“事后精准溯源”。MySQL本身不会主动推送死锁通知,但它会在错误日志里留下最完整的“案发现场”记录。我们的任务,就是设计一个永不掉链子的“现场记录员”。

如何从MySQL错误日志中实时提取死锁事件
MySQL没有提供现成的死锁报警接口,但它会在error.log里白纸黑字地写下“Deadlock found when trying to get lock”。这行记录,就是所有监控方案的唯一可靠源头。它不依赖任何额外的性能模式(Performance Schema)开关,也不需要特殊的数据库权限。
这里的关键在于“实时”和“精准”。一个常见的误区是,用grep “Deadlock”去全量扫描日志文件。这种做法不仅消耗CPU,还存在高延迟,更糟糕的是,它很容易因为忽略死锁信息的跨行特性,而提取出残缺不全的内容。
正确的做法,是使用tail -F持续监听日志尾部,并配合能处理多行文本的工具进行精准匹配:
- 必须处理多行块:一个完整的死锁日志是一个结构化的段落,包含了
*** (1) TRANSACTION、*** (2) TRANSACTION、*** WE ROLL BACK TRANSACTION (2)等多个部分。 - 推荐使用awk命令:像
awk '/^Deadlock/,/^$/'这样的模式,可以完美匹配从“Deadlock”行开始,到下一个空行结束的整个信息块。不过要注意,MySQL 8.0之后的版本默认日志格式可能是JSON,使用前请确认log_error_verbosity设置为3,且未启用log_sink_json这类服务。 - 生产环境保护:务必给
tail -F命令加上timeout保护,比如timeout 30s,防止进程因为日志轮转(rotation)而卡死。
Shell脚本如何构造可执行的死锁告警逻辑
告警不是把日志片段扔进邮件就完事了。一个有用的告警,核心在于“去重”、“限流”和“携带完整上下文”。同一个死锁在短时间内反复触发告警毫无意义,而缺少关键SQL的告警则会让DBA无从下手。
一个可用的最小闭环应该包含三步:捕获信息块 → 提取关键事务SQL → 判重并触发通知。
- 去重判重:对捕获到的完整死锁信息块计算MD5哈希值,并存入一个临时文件(如
/tmp/deadlock.lasthash)。每次捕获后先比对哈希值,可以轻松实现“10分钟内相同死锁只报警一次”的限流策略。 - 提取SQL:使用
awk '/query:/ {print $NF}'来提取每个事务最后执行的那条SQL语句。这里有个细节:MySQL日志中的SQL可能会被截断,优先选取ROLLING BACK标记前最近的那个query:行,通常信息最全。 - 告警封装:将告警动作封装成函数,例如
send_alert() { echo “$1” | mail -s “[DB] Deadlock on $(hostname)” admin@team.com; }。这样设计的好处是,未来想要将邮件报警替换成企业微信、钉钉或Webhook调用时,只需修改这一个函数即可。
为什么不能直接依赖INFORMATION_SCHEMA.INNODB_TRX
很多朋友的第一反应是去查INFORMATION_SCHEMA.INNODB_TRX表。但这条路走不通。这张表只能看到“当前正在运行且持有锁的事务”。而死锁一旦发生,MySQL的引擎会立刻自动回滚其中一个事务来打破僵局。当你查询时,看到的已经是“案发后”的现场,肇事者早已离开,表里大概率空空如也。
这里还有一个更隐蔽的权限问题:查询INNODB_TRX需要PROCESS权限,这在严格管控的生产环境中往往不会授予给监控账号。相反,读取error.log文件只需要操作系统的文件读取权限,而这通常由DBA掌控,灵活度更高。
- 监控盲区:依赖
SELECT * FROM INFORMATION_SCHEMA.INNODB_TRX的脚本,会漏掉超过90%的真实死锁事件。 - 竞态窗口:即使结合
INNODB_LOCK_WAITS表进行轮询,也存在无法避免的竞态条件。从检测到锁等待,到死锁发生、被引擎检测到并回滚,整个过程可能短于100毫秒,监控脚本很难捕捉到这个瞬间。 - 事后溯源:所以,真正有效的思路是“事后溯源”,而非“事中拦截”。错误日志,就是这个过程中唯一完整、异步且持久化的证据源。
实际部署时最容易被忽略的三个细节
脚本在测试环境跑通,只是万&里长征第一步。下面这三个细节如果没处理好,线上环境一周内准出问题。
- 动态获取日志路径:千万不要在脚本里硬编码日志路径。MySQL的
log_error配置可能指向/var/log/mysql/error.log,也可能指向/data/mysql/hostname.err。最稳妥的方式是使用mysql -e “SELECT @@log_error;”命令动态获取。 - 字符集陷阱:如果数据库字段或注释中包含Emoji等UTF-8特殊字符,它们也可能出现在日志里。在默认
LANG=C的环境下,awk等工具可能会错误地截断这些字符。稳妥起见,请在脚本开头显式设置export LANG=en_US.UTF-8。 - 日志轮转(Rotation)丢失:生产环境通常配置了
logrotate来切割日志。当切割发生时,tail -F跟踪的文件描述符可能会失效。一个兜底的方案是使用inotifywait监控日志目录,当检测到moved_to事件(即日志被轮转)时,自动切换到新的日志文件继续跟踪。
说到底,死锁本身并不可怕,它是高并发数据库的常态。真正可怕的是,告警邮件发过来了,里面却没有关键的SQL、没有明确的时间戳、没有完整的堆栈信息——让人根本无从下手。一个日志解析脚本的价值,不在于“有没有”,而在于“能不能让DBA打开邮件的那一刻,就能立刻在脑海中复现出问题现场”。
