本文来源:时代财经
时代财经9月10日获悉,大晓机器人近日联合南洋理工大学S-Lab等机构发布并开源统一多模态世界模型框架Puffin-World。Puffin-World首次在一个统一多模态框架中,将物理、几何和外观定义为三种原生的三维世界状态,这种设计让一个模型即可完成空间仿真、3D生成重建和机器人闭环探索,并预测机器人行动后世界将处于什么状态。目前该模型在四项评测中达到SOTA(最先进水平)。
Puffin-World同步开源代码、模型和Puffin-16M数据集,包括1500万组“视觉—语言—相机”三元组和100万条具有挑战性的旋转轨迹,并开放覆盖28个公开数据集、约4450万张图像的绝对相机位姿标注,为机器人仿真、合成数据生产与具身智能训练提供可复现、可扩展的技术底座。
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.