Prometheus Server Pod突然崩溃（意外故障地址0x7f911b1795d4）

Question

随着流量的增加，Prometheus 服务器 pod 会重新启动并出现以下错误堆栈。当系统有实时流量时会发生这种情况。但无法通过负载测试重现。

Grafana 仪表板用于可视化 Prometheus 服务器数据。

unexpected fault address 0x7f911b1795d4
fatal error: fault
[signal SIGBUS: bus error code=0x2 addr=0x7f911b1795d4 pc=0x23c5989]
{log}
goroutine 17680065 [running]:
runtime.throw({0x30f767a?, 0x6961b5048ab89fa1?})
    /usr/local/go/src/runtime/panic.go:1047 +0x5d fp=0xc08949e8c0 sp=0xc08949e890 pc=0x439e9d
runtime.sigpanic()
    /usr/local/go/src/runtime/signal_unix.go:832 +0x125 fp=0xc08949e910 sp=0xc08949e8c0 pc=0x450505
encoding/binary.bigEndian.Uint64(...)
    /usr/local/go/src/encoding/binary/binary.go:181