英伟达Cosmos平台开放世界模型训练部署工具
IT时代网10月22日消息,英伟达宣布扩展Cosmos世界模型平台,新增训练工具、仿真检查点与Cosmos Data Factory蓝图,帮助物理AI开发者加速数据管线建设,更高效地训练、评估与优化世界模型,并以更低成本提升精度。
世界模型帮助物理AI系统理解并模拟现实世界。英伟达介绍,Cosmos平台已在六个开源模型榜单上跻身前五,为世界模型开发者提供前沿开源模型以及数据、训练、优化工具与配方,可扩展训练数据、适配模型、测试行为并在部署前优化性能。Cosmos Data Factory现提供五项云原生蓝图,覆盖自动驾驶数据集生成、图像属性增强、事件视频生成、缺陷图像生成与视频数据增强,已通过GitHub、Azure、Nebius和CoreWeave提供。
产业落地方面,大众集团旗下保时捷正基于Cosmos Data Factory在Azure上构建跨品牌共享的自动驾驶数据飞轮,预计可减少最多90%的重复实地测试并缩短最多85%的开发周期;机器人公司ANYbotics用其生成超1500段合成视频训练工业巡检机器人识别液体泄漏等环境变化;计算机视觉公司Ultralytics则用真实图像加定向合成缺陷重训YOLO模型,提升缺陷定位与召回表现。
工具层面,Cosmos Framework作为开源模块化训练优化框架,现已将训练、优化与部署工具以智能体技能形式扩展至GR00T、Alpamayo、QWEN、Pi0.5等更多开源模型,支持微调、强化学习、蒸馏与量化。新增的Cosmos 3 Nano仿真模型变体允许开发者在可复现、难以实拍的多视角多传感器场景中测试自动驾驶策略;更新的Cosmos 3 NIM微服务在已验证配置下推理速度最高提升两倍,基于其构建的视频搜索与摘要蓝图3.3可让同等GPU监控的视频流增加四成。

注:本文配图由AI生成,文中包含AI辅助创作的内容。
编辑:林一舟