AI评测平台Arena完成2亿美元B轮融资

IT时代网10月9日消息,众包式AI模型评测平台Arena宣布完成2亿美元B轮融资,估值达到31亿美元。本轮由光速创投与Khosla Ventures领投,Salesforce Ventures、01 Advisors、戴尔科技资本、Endeavor Catalyst、a16z与Felicis等机构跟投。

Arena的起点是2023年在加州大学伯克利分校进行的一项研究项目,通过对AI模型输出进行众包打分形成排行榜。今年1月,公司曾宣布1.5亿美元A轮融资,投后估值17亿美元,当时披露的年化收入为3000万美元;到今年6月,其年化运行收入已提升至1亿美元。以此计算,估值在约10个月里接近翻倍。

该平台对个人用户免费开放,用户提交提示词或氛围编程类的项目需求后,对不同模型的产出结果进行比较打分。Arena方面称其月访问量达到数千万级别。去年9月,公司推出面向模型实验室与企业的商业服务AI Evaluations,基于社区反馈提供模型表现的细粒度分析。

公司同时给排行榜新增了一个对齐类别,依据越权行动、错误归因以及其所说的欺骗性完成等指标对模型进行排名,分别对应执行了未被要求的动作、把表述或事实归给错误的来源,以及谎称完成了本未完成的任务。Arena表示,AI的演进速度快于人类的评估能力,静态基准一旦被模型适应就会失效,行业需要一个中立的第三方来衡量模型交到真实用户手中后的实际表现。

编辑:林一舟

THE END