快讯
Anthropic 提出三项指标,衡量 AI 研发自动化与监督情况
Anthropic 公布追踪前沿 AI 研发的三项度量:AI 承担研发工作的比例、对智能体行动的监督能力,以及算力分配,并提供内部快照及方法说明。
Anthropic 发布前沿 AI 开发度量框架,关注三件事:研发工作中有多少由 AI 完成、能否监督并干预 AI Agent 的行动,以及用于开发更强模型的算力如何分配。
公司提供了自身内部的指标快照与方法说明,并提出由独立第三方验证相关实践。这些度量用于增加研发过程的透明度,不是已经统一执行的行业标准,也不能单凭当前快照预测未来能力增长速度。