容器内存 99% 但没有 OOM:可能是页缓存
复盘一次内存告警假阳性:99.45% 的峰值里约 87% 是页缓存,容器顶到 limit 也没有 OOM;同一个容器热缓存下重启只剩 23.70%,最后把告警的分子换成了 RSS。
复盘一次内存告警假阳性:99.45% 的峰值里约 87% 是页缓存,容器顶到 limit 也没有 OOM;同一个容器热缓存下重启只剩 23.70%,最后把告警的分子换成了 RSS。
记录一次夜间备份内存接近 limit 的排查:按每次运行重新对齐数据后,发现书库 pod 重建时 kubelet 对 local PV 执行 fsGroup 权限处理,导致 restic 重读整库。
同事准备用 mutation 修复 ClickHouse 表里写坏了 18 天的一列,我在评审方案的同时用只读连接把表的现状摸了一遍,意见主要提在回滚上。
复盘一次只在生产出现的 Kafka producer 构造失败:fat jar 与 commonPool 的 TCCL 让特定序列化类初始化失败,发送链路只能等实例重启恢复。
记录我把两个 K3s 集群的子域名 DNS 从 Terraform 手改交给 external-dns 的过程,以及既有记录零停机接管时踩到的坑。