RCA Benchmark 创新引入四层结构化真值体系,摒弃传统单一根因标签模式,从以下四层完成标准化定义:故障类型、归一化实体、因果传播链路、关键证据节点。
配套三维加权评分框架(定因、定界、过程),按 40%、30%、30% 权重核算综合得分:
- 近七成评分依托故障类型拓扑语义距离、实体拓扑距离做确定性量化计算。
- 从故障语义匹配、拓扑定位精度、诊断证据与因果逻辑完整性等多维度分级判定。
- 从机制上规避随机命中带来的评估偏差,全程规则透明、结果可复现、流程可审计。
这种设计避免了"仅命中告警周边服务即判正确"的失真问题,确保评估真正衡量 Agent 的完整诊断能力。




