Linux 系统检测进程死锁的方法
Linux 系统检测进程死锁的方法
在 Linux 系统中，可以使用多种方法来检测进程是否发生死锁（Deadlock）。
1. 使用 ps + strace 观察进程状态
可以使用 ps 命令查看进程状态：
ps -eo pid,lwp,stat,wchan:30,cmd | grep <进程名或PID>
关键字段：
STAT（状态）：D：不可中断睡眠（通常是 I/O 问题）R：运行态S：可中断睡眠T：暂停（可能被SIGSTOP信号暂停）
WCHAN（等待通道）：如果多个线程在同一个WCHAN挂起，可能是死锁。
如果怀疑死锁，可以使用 strace 附加到进程，查看系统调用是否卡住：
strace -p <PID>
如果进程一直停留在 futex、sem_wait、pthread_mutex_lock，可能是线程死锁。
2. 使用 lsof 检查资源锁定
lsof 可以检查进程打开的文件或锁定的资源：
lsof -p <PID>
如果多个进程/线程对相同资源（如文件或 socket）持有锁，并且都在等待，可能是死锁。
如果要检查进程是否因文件锁（flock/fcntl）死锁：
lsof | grep -i "locked"
3. 使用 pstack 或 gdb 查看线程栈
如果是多线程程序，使用 pstack 或 gdb 查看线程堆栈：
pstack <PID>
或使用 gdb：
gdb -p <PID>
(gdb) thread apply all bt
如果多个线程都卡在 pthread_mutex_lock，可能是死锁。
4. 使用 proc 文件系统检查 futex
如果怀疑进程死锁在 futex（用户态线程锁），可以检查 /proc/<PID>/stack：
cat /proc/<PID>/stack
如果多个线程都在 futex_wait_queue_me，可能是死锁。
5. 使用 perf 观察锁争用
如果怀疑死锁涉及锁争用，可以使用 perf：
perf record -g -p <PID>
perf report
查看 pthread_mutex_lock 或 futex_wait 是否高频出现。
6. 使用 lockstat 监测锁争用
如果是内核级死锁，可以使用 lockstat（部分发行版需要开启 CONFIG_LOCK_STAT）：
echo 1 > /proc/sys/kernel/lock_stat
cat /proc/lock_stat
7. 使用 dmesg 观察内核死锁
某些情况下，内核可能会检测到死锁并输出警告：
dmesg | grep -i deadlock
如果有相关信息，说明系统可能存在死锁。
总结
ps,strace用于分析进程状态和系统调用卡住的位置。lsof用于检查文件或资源锁。pstack,gdb用于分析线程堆栈，判断是否多个线程卡在锁等待上。proc文件系统（/proc/<PID>/stack）可用于检查futex死锁。perf,lockstat用于更深入分析锁争用情况。dmesg可用于检查内核是否检测到死锁。
你可以结合这些方法，具体看进程是否真的发生了死锁。