日志重启就没了

故障发生时容器已经重启过,里面的日志文件跟着没了。只记得‘刚才报过错’,没有原文。

原因是日志写在容器可写层里。容器一换,层就丢。我们改成把日志打到标准输出,由外面的收集把标准输出存下来。

也试过挂一个目录到容器里。能留住文件,但要自己处理切割和权限。标准输出这条路更少维护。

每条日志带上时间、级别和请求编号。没有编号的话,一次请求的几行会对不到一起。

重启之后再故意触发一次错误,确认收集端能看到。只改配置、不验证,会在下一次故障时才发现还是空的。

现在重启不再等于失去现场。排查从收集端开始,不必赶在容器被换掉之前进去抄日志。

本地能跑和别人能跑是两件事。我现在固定留三样:启动时实际读到的配置名、当前连的库名、监听的端口。这三样打在日志开头,不打密钥和连接串。提交前看差异,示例配置和真实配置分开,锁文件跟清单一起走。干净目录克隆后再装一次,比在自己机器上反复点运行更可信。

给后来的人看,所以写能照着做的步骤,不写感受。每一步写期望看到什么。看不到,就停在这一步,不要继续往下猜。步骤结束以后,用干净环境再做一次。自己的机器上能过,只能说明自己的机器上能过。

复查「日志重启就没了」时按这四步,不靠感觉。用改之前的同一组输入再走一遍,结果要变成预期的那样。在日志里打出实际读到的配置名、端口或库名,确认不是另一个还没关的进程。换一个干净环境再做一次。最后把现象、改动、确认方法写成三行放进仓库。

补充记录。本地构建我现在把它当成一份可以交接的步骤,而不是个人习惯。第一步,在干净目录克隆,不在自己改了一半的目录里证明‘能跑’。第二步,只看三行启动日志:配置名、库名、端口。对不上就停,不继续点页面。第三步,依赖以锁文件为准。清单写着能装,锁文件才决定装到哪一版。第四步,提交前看差异,配置里的地址、密钥、本机路径不要出现。示例文件用明显的假值。第五步,让另一个人按说明走一遍,走不通就改说明,不改口头解释。这五步做完,构建才算从‘我的机器’变成‘这个仓库’。漏掉干净目录或锁文件,问题会在别人那里才出现,而且看起来像环境玄学。

操作顺序。1. 在临时目录克隆一份干净代码,不在日常目录里验证。2. 按说明安装,锁文件和清单必须同时存在。3. 启动后只看三行日志:配置名、库名、端口。任一为空或对不上,就停。4. 用一条最小请求打通,再跑测试。5. 提交前看差异,确认没有地址、密钥、本机路径。6. 换一个同事的机器或一个新目录再走一遍。走不通就改说明,不增加口头步骤。做完把失败过的那一次也留下,只留成功,别人会在同一个地方再摔一次。

8 个赞

日志只留在容器里,重启就没了。打到标准输出,或者挂到外面的目录,二选一写进启动说明。

3 个赞