OpenAI报告称智能体完成近半数研究任务

IT时代网11月19日消息,OpenAI发布第二份研究加速报告,基于内部测量介绍编码智能体如何改变其AI研发周期。数据显示,智能体已能独立完成近一半耗时两到四小时的研究任务,但人类在AI研发中依然处于核心位置。从今年3月到10月,对于估计需要人类工作两到四小时的任务,智能体自主成功率从23%升至46%;需要四到八小时的任务,成功率从13%升至35%。不过工作类型差异明显:监控训练运行的自主成功率达79%,启动训练运行为35%,而为推理和服务栈编写代码的成功率仅25%。智能体使用量同步激增。按API标价计算,10月研究人员每日使用量中位数达到2400美元,较9月增长62%;第90百分位达到23000美元,增长105%。一项内部调查显示,研究人员愿意用团队30%的算力或40%的人力,换取继续使用前沿编程智能体三个月。报告还提到,研究人员正把越来越多人力投入到安全与对齐领域,该领域从1月到9月有记录的工作周数增长77%。OpenAI认为AI实验室应追踪并公开报告递归自我改进指标,即AI加速未来AI系统开发的过程,以维持人类监督。本报告建立在9月发布的相关博客文章基础上,新增了定量与定性指标,分别衡量AI在各研究领域带来的提升,以及人类如何继续参与研究过程。

编辑:林一舟

注:本文配图由AI生成,文中包含AI辅助创作的内容。

THE END