不只“能看”的3D场景,大晓机器人联手南洋理工发布“能碰撞”的世界模型-热议
2026-10-31 15:19:36 来源: 上观新闻
【资料图】
大晓机器人近日联合南洋理工大学S-Lab发布了面向具体环境构建,可探索、可交互的世界模型——Mundo。Mundo支持与Atlas多模态世界模型类似的场景重建、自由视角探索和时空模拟能力。
简单说,它能用少量照片或视频,搭出一个可以自由走动、换角度看的三维场景,还能让机器人在里面练习导航和操作。
这一能力为机器人进入具体商业场景提供了支持。在大晓机器人以 Kairos 为核心的世界模型技术体系中,Mundo补充环境建模、训练数据生成与仿真训练能力,帮助机器人完成场景适配和策略优化。
少量图像构建专属世界模型,支持跨空间长路径生成
Mundo将少量图片或者视频,拓展为可持续探索的三维空间,同一组参考图像可以支持多条相机路径;面对更大场景,还可动态选择上下文,连续生成数十秒至分钟级的探索画面。
具体来看,Mundo从真实场所的上下文影像出发,先建立三维代理,确定不同视图之间的空间关系,再沿指定相机路径生成新视角。在此次展示的场景中,输入1至12张图像,即可围绕房间中的家具和空间结构展开探索。同一组参考图像可以服务于多条路径,让观察位置和角度自由变化。建模过程中,三维检测器为主要物体提供初始位置与范围,视觉语言模型智能体进一步调整代理场景,通过渲染、比较和修正,让场景结构与输入影像相互对应。
例如,一间办公室可以从桌面旁绕到窗边,一处住宅可以从庭院进入室内。相机移动时,输入图像约束已经拍到的布局、外观和细节,模型则对没有被拍到的区域进行推断补全。增加参考视图,就能为场景提供更多真实依据,减少补全的不确定性。
这种能力也能从一张生成图像或画作开始,将其中的结构和视觉风格延伸到新的视角。面对更大的环境,Mundo使用数十张上下文图像,支持数十秒至分钟级的长路径生成。
物体具备物理属性,推拉碰撞都有可计算的响应
要让机器人在场景中练习,环境必须能够响应动作。抽屉被拉开、椅子被推动、物体落到地面,都需要对应的位置变化和接触关系。
Mundo可以通过代码编辑世界,通过场景程序描述物体的名称、尺寸和位姿,并为其配置质量、摩擦等物理属性。脚本定义动作和施加的力,物理引擎计算物体在重力与接触约束下的响应,得到运动轨迹、接触位置和碰撞力。随后,Mundo 结合环境参考图像,将这些变化渲染到对应场景中。
这让环境拥有了明确的操作入口。用户可以拖动垃圾桶、推动显示器、拉动椅子或打开抽屉,也可以改变物体材料与重力条件,观察不同设置下的响应。物理过程中的速度、接触点和冲击力等状态,还能与生成画面同步展示。
在这一过程中,三维代理与场景程序负责记录“物体在哪里、发生了什么变化”,物理引擎负责计算运动,视频模型负责呈现与环境相符的视觉结果。几何、物理与外观各自承担明确职责,共同构成可交互环境。
让每次交互都有可追踪的状态、可计算的过程,是场景从可观看走向可使用的关键。 Mundo 将物理交互引入重建环境,为机器人练习动作及分析结果提供了具体依据。
在同一环境贯通导航、操作与四维模拟,构建机器人训练场
在同一个定制场景中,Mundo进一步支持机器人移动和操作,将环境重建连接到机器人测试与训练。
导航方面,三维代理提供物体类别、位置、障碍物和可通行区域等信息,路径规划器据此寻找路线。操作方面,Mundo为参与交互的物体建立几何和物理属性,让不同形态的机器人尝试同一任务,例如将苹果放入碗中、将罐子放上托盘或堆叠积木。
Mundo还将空间探索拓展到时间维度。对于多相机记录的动态事件,可以从新视角呈现过程;对于基于图像构建的模拟事件,则通过重力和接触动力学计算运动。
世界模型的产业价值,要由它对真实任务的贡献来体现。 在大晓机器人以 Kairos 为核心的世界模型技术体系中,Mundo 补充具体环境建模与仿真训练能力,连接现场采集、数据生成和策略优化,服务于机器人进入实际工作场景。
标签: 最新资讯
为您推荐
精彩放送
热门文章
-
中国中免(01880)将于12月21日派发第三季度股息每股0.4元-看热讯
-
央视直播英超,曼联落入降级区,阿森纳升上榜首,哪个更容易?
-
今日精选:爆冷逆转骑士!哈登24分难救主!这把真心不背锅...
-
快资讯:10月29日ICE期棉价格小幅上涨
-
鼎际得10月29日回应α-烯烃话题:30万吨/年α-烯烃装置已完成中交|头条焦点
-
西蒙斯:火箭在我心里排第一,他们现在就是能夺冠的球队-新消息
-
生意社PP(拉丝)10月29日均差为103.50元/吨 由正向缩小重新扩大 每日看点
-
四大行总市值盘中突破10万亿元大关 创出历史新高
-
科创中国行|合肥·大V手记:邂逅“梦中情搭”
-
盈趣科技(002925.SZ)新增一起对外投资,被投资公司为厦门北洋瑞恒智慧健康有限公司
-
短讯!沙拉木成队史得分王却遭无视 新疆队这样做原因是什么?
-
【时快讯】赤子城科技(09911.HK)发布公告,于2026年10月28日斥资198.15万港元回购22.4万股
精彩图片
热文
-
中金公司(03908)前三季度归母净利润约132.45亿元 同比增长101.71%|每日消息
-
热议:金风科技(02208)10月30日斥资2473.06万元回购168.91万股A股
-
多点数智(02586)10月30日斥资842.32万港元回购102.2万股
-
动态:我军首型舰载察打一体隐身无人机在四川舰成功起降
-
中国中冶(01618)前三季度新签合同额 5191.7 亿元 同比下降 31.7%
-
沪宜高速、南疏港高速公路两大重点建设项目正式开工-精选
-
每日消息!小区墙砖空鼓脱落多年,业主拒交物业费被起诉!律师:不建议直接拒交物业费
-
填补省内领域空白!淄博市药物警戒中心牵头编制的这项团体标准发布实施
-
【时快讯】PriceSeek提醒:浮法玻璃库存下降相关商品行情分析
-
瑞银方锦聪:市场过度计价AI支出负担 低估潜在上行机会
-
央视直播英超,曼联落入降级区,阿森纳升上榜首,哪个更容易?
-
每日速讯:里维拉:我一直反对拆梅阿查,曾希望用我和马佐拉命名
-
焦点资讯:健全社会组织退出机制 民政部出台注销指引
-
我军首型舰载察打一体隐身无人机在四川舰成功起降 每日精选
-
中国人寿前三季度新业务价值实现较快增长,在上年同期基础上提升13.1% 微头条
-
消息!白酒股绩后异动:三季报陆续落地,利空出尽还是底部确认?
-
播报:东山精密:Q3净利润同比增长401% 环比增长26%
-
【独家焦点】金华市资质齐全的改善房装修公司价格公道不玩套路,延期赔付有保障
-
当前热门:西蒙斯:季前赛我问科尔为什么勇士不要我,他说担心我的健康
-
001伤病速览:奥克兰FC金靴中锋停赛,布里斯班狮吼后防厚度低
-
每日看点!强冷空气来袭,天猫双11加推保暖专场
-
土媒:经双方沟通后,库伊特计划让格林伍德出任10号位 快播
-
星空体育:阿森纳爆冷出局,多特绝杀晋级,拉齐奥登顶意甲
-
骑士不敌老鹰后!东部实力一目了然:S档4队、A档5队! 热闻
-
日经225指数收跌2.1% 受电子股拖累
-
观速讯丨许友华获批担任广东蕉岭农村商业银行董事长
-
今日热搜:万象城与地铁站接驳扶梯停运?并非坏了,是这个原因|融媒问政・问政回访
-
生意社:10月30日江浙地区顺丁橡胶市场继续上涨|新要闻
-
2026年10月30日黄淮农产品股份有限公司价格行情
-
花旗:升渣打集团(02888)目标价至230.8港元 上调盈利预测看好近期动能
-
上市银行对公贷款增速“降档踩刹车” 三季度增量仅为上半年季均一成 多家银行由增转降|每日报道
-
A股三大股指午后全线翻红转涨
-
【焦点热闻】姐姐穿吊带睡衣,弟弟压在身上嬉闹手碰胸口,妈妈拍视频发网上配文"早习惯了",网友怒斥:成何体统
-
今日精选:爆冷逆转骑士!哈登24分难救主!这把真心不背锅...
-
五连胜+71历史第二!申京或迎复出力争6连胜 美记直言不会以交易冲冠 焦点要闻
-
焦点播报:居莱尔童年队友:他自律带饭踢球,如今成球星而我在金店上班
-
关注:龙佰集团钛矿产能恢复在即 钛白粉盈利底部回升
-
午评:也不过如此_报道
-
今日看点:农事“丰”景丨金秋时节,农村都在忙什么?
-
光大期货:矿钢煤焦类日报10.30_当前关注
-
焦点关注:中标 | 198.32万元!绿能慧充获山西公交车充电桩项目
-
南明区2026年前三季度GDP846.04亿元,同比增长4.6%_每日热门
-
每日热讯!花旗:Genie 4推动互动世界模型发展 看好快手-W(01024.HK)可灵AI探索相关机会
-
热点评!洋河的反周期打法:价盘稳住、库存去化、增量慢慢跑
-
东鹏饮料(09980.HK)涨超4%,截至发稿,涨4.29%,报94.8港元,成交额1651.21万港元 头条
-
从北部粮仓到首都餐桌,顺鑫石门市场借国家级平台拓宽源头直采版图
-
快资讯:10月29日ICE期棉价格小幅上涨
-
【报资讯】PriceSeek提醒:利华益上调丙烯腈现货报价行情分析
-
南疆地区首次!喀什二院颈椎内镜手术实现前路、后路全覆盖_快资讯
-
值得买三季报:前三季度AI相关收入占比13%,较去年同期占比大幅提升|今热点