METR 提议同时衡量 AI 能力与成本

摘要

METR 提出比较人工劳动与 AI 执行支出的指标，并进行了 NanoGPT 优化任务的初步分析。这不能证明各类职业都可被替代。

与我们工作的关联

快速产出仍可能需要昂贵的审核和重试。我们应合并计算执行费用、审核时间和失败成本。

本文译自韩文原文。 摘要可能经过翻译和编辑。评论是我们的解读，未来预测代表来源的观点。