RecodeX 重构消息,CloudOpsBench开发团队在2日发布的官方分析中,将所测试模型在AWS运维任务中的失败原因分为三类:服务知识不足、推理错误和错误操作。其中约80%的失败案例被归类为推理错误,错误操作约占20%,没有任务因不了解服务运作方式而失败。

上述比例仅指该基准测试中失败任务各原因的占比,并不代表所有AI智能体的失败率或云运维自动化的整体表现。CloudOpsBench v1.0由45个AWS运维任务组成,包括13个项目拆除、12个访问安全、7个服务迁移与部署任务。