崩溃无panic日志时,先用dmesg检查OOM killer;core dump无法用dlv打开需构建时加-gcflags="all=-N -l";futex卡住多因goroutine泄漏;早期崩溃可用pprof实时抓取goroutine栈。

崩溃时没有 panic 日志,先检查是否被系统 OOM killer 杀掉
很多 Go 二进制在容器或低内存机器上静默退出,dmesg -T | grep -i "killed process" 能直接看到 OOM killer 的记录,比如:Out of memory: Killed process 1234 (myapp) total-vm:2048000kB, anon-rss:1800000kB。这时不是代码问题,而是 RSS 长期不降 —— 尤其在 Go 1.15 及更早版本中,runtime 默认用 madvise(MADV_FREE) 延迟归还物理内存,top 看 RES 高但 go tool pprof 显示堆内存正常。解决方法只有两个:GODEBUG=madvdontneed=1(慎用,会增加 page fault)或升级到 Go 1.16+(默认改用 MADV_DONTNEED,释放更及时)。
core dump 文件存在但 dlv core 打不开,确认构建时未 strip 符号
Go 默认编译不带调试信息,dlv core ./myapp ./core 会报 could not load symbol table。必须在构建时显式保留:使用 go build -gcflags="all=-N -l" -o myapp .(关掉内联和优化),否则即使有 core dump,dlv 也无法解析 goroutine 栈帧。注意:-ldflags "-s -w" 会彻底删掉符号表,和调试需求互斥;生产环境若需事后调试,建议保留 -gcflags="all=-N",仅去掉 -l 减少体积影响。
用 strace -p $PID 看到卡在 futex,但 dlv attach 后发现 goroutine 数量异常多
这通常是 goroutine 泄漏而非死锁。常见模式包括:time.AfterFunc 创建后未被 cancel、HTTP handler 中启 goroutine 但没加 context 控制、channel 发送未被接收导致永久阻塞。用 dlv attach $PID 进入后执行 goroutines 查看总数,再用 goroutine <id> bt</id> 抽样几个栈,重点找 runtime.gopark + chan send 或 select 挂起点。别只盯着主线程——崩溃前可能已有数百个 goroutine 在等一个永远不关闭的 channel。
使用 uber-go/dig 在 Golang 中实现依赖注入——基于反射容器,提供 Provide/Invoke、dig.In/dig.Out 参数与结果对象,支持命名依赖等
崩溃现场无日志、无 core、strace 也看不到系统调用失败,试试 pprof 实时抓取
有些崩溃发生在启动极早期(如 init 函数里),连日志都来不及输出。此时可在程序入口加一行:go func() { http.ListenAndServe("127.0.0.1:6060", nil) }(),然后用 curl http://localhost:6060/debug/pprof/goroutine?debug=2 直接获取所有 goroutine 的完整栈。如果进程已卡住但未退出,这个 endpoint 仍可访问;若连这个都失败,说明 runtime 已严重异常,大概率是 CGO 调用导致的段错误(比如 net 包在 CGO_ENABLED=1 下链接了不兼容的 libc),此时必须强制设 CGO_ENABLED=0 重建。
立即学习“go语言免费学习笔记(深入)”;
真正难排查的崩溃,往往卡在「既不是 panic、也不是 OOM、又没留下任何可观测痕迹」的缝隙里——这时候要信strace 的系统调用序列、信 dlv 的 goroutine 快照、信 pprof 的运行时快照,而不是信日志里没打印出来的那行 error。

















