故障排查-概览

Coding

多进程 fork 死锁导致的容器 OOM 排查

2026-08-05 · #coding

Prometheus OpenStack Exporter 容器内存持续增长至 OOM，根因是 ForkingMixIn + logging 锁 + Nova API 大规模环境超时三者叠加触发的多进程 fork 死锁。

排查路径 进程树分析 → 内存趋势追踪 → WCHAN 定位阻塞点 → fork 锁继承验证

ForkingMixIn fork 锁继承 WCHAN fork-safe 日志

容器解析 K8s 域名失败

2026-08-05 · #kubernetes

node-exporter Pod 持续 CrashLoopBackOff，逐层排查 CoreDNS → Service → Pod 网络链路，最终定位到容器内 DNS 解析失败导致连接被拒。

排查路径 Pod 状态检查 → 容器日志分析 → DNS 解析链路验证 → CoreDNS 日志关联

CoreDNS DNS 解析链路 Pod 网络排障 CrashLoopBackOff