智元机器人又搞大事情!推出首个4D世界模型EnerVerse,引领具身智能技术革新

2025-01-08 17:23:22     来源:

1月8日,智元机器人在具身圈再次掀起波澜,正式推出首个4D世界模型EnerVerse,多视角任意观测,基于未来空间生成引导机器人动作规划,再次加速具身智能进程。

在机器人技术领域中,动作规划始终是一项充满挑战的任务。现有的机器人动作规划方法,往往因为缺乏对动态操作空间的深入理解和长序任务的记忆处理能力不足而表现不佳,而已有的基于2D视频生成的world model又难以准确表达复杂的3D关系。为了解决这一问题,智元机器人提出了机器人领域首个4D世界模型EnerVerse,将生成式空间智能与机器人动作预测相结合,使机器人能够更高效、更准确地完成任务。

图片1.png

智元4D世界模型EnerVerse 的问世,打破了传统人工智能模型局限于三维空间的问题。EnerVerse引入了自由锚定视角(FAV)来表征4D时空,允许机器人动态调整其视角,克服了固定多视角在狭窄或遮挡环境中的局限性。FAV通过光线投射原理和视线方向图作为视角控制条件,时间维+多视角视频生成,确保了生成视频的几何一致性,“上帝视角”任意观测,预测4D未来,从而提升了机器人在复杂环境中的动作规划能力,大幅增加任务成功率。在实验中,EnerVerse在单视角设定下取得平均最优效果,而在三视角设定下效果得到进一步增强。

图片2.png

图片3.png

此外,EnerVerse在LIBERO仿真场景和AgiBotWorld真实场景中生成的多视角视频质量也得到了充分验证,在短程与长程任务视频生成中,EnerVerse均展现出卓越的性能。

图片4.png

图片5.png

最后,EnerVerse构建了一个数据飞轮,通过在仿真数据上训练的4D生成模型(EnerVerse-D)与4D高斯重建交替迭代,为真实场景下的FAV生成提供了伪真值支持。这一创新方法不仅增强了模型的泛化能力,还为机器人在真实世界中的应用奠定了坚实的基础。

图片6.png

智元机器人推出首个 4D 世界模型 EnerVerse ,是一次具有里程碑意义的创新之举,开创了未来具身智能的新方向。通过未来空间生成引导动作规划,EnerVerse不仅突破了机器人任务规划的技术瓶颈,还为多模态、长程任务的研究提供了全新范式。随着 EnerVerse 架构的不断优化和完善,期待它为具身智能行业的发展带来更多的惊喜和变革,引领人工智能技术进入一个崭新的时代。

标签:

猜你喜欢

《2025大中华黑珍珠菜式金奖》备受瞩目
华为乾崑x中国国家地理《穿越中央山脊》正式收官,尽显科技登峰精神
2024全国电力电气装备及工程行业峰会在京成功召开
Dx&Vx,从mRNA疫苗到纳米疫苗:开启新一代疫苗时代
以毛衣为主角,PENNYBLACK 2024 秋冬系列书写温暖与风格
京东发起“我给老家送年货”活动 刘强东送出电动车等超5万件年货
创新驱动发展,国耀融汇持续探索产融合作无限可能
从思凯乐重装徒步全国挑战赛看户外向“重度”体验进阶
诺特兰德捐赠粮油及营养物资紧急驰援西藏日喀则地震灾区
比音勒芬宫廷联名华裳新韵,锦上添花迎接新春
TMGM集团2024年度足迹,数载耕耘收获丰
新年游戏电脑配置推荐 CUDIMM内存发力新平台
赛力斯康波:豪华品牌竞争 赢大型车赢天下
贝因美滋补专场雷峰塔下开张致敬蛇年!赵雅芝现身助阵送上营养搭配
Babycare推出「Baby年货节」:耀目新岁趣味上线
A&F CNY推出新春限定系列,开启新年新时尚
心异动 即行动 欧姆龙携手药店打造房颤风险筛查专区,共启预“房”医疗新未来
松下集团出展CES2025 展示前沿科技为未来赋能
松下集团CEO楠见雄规在 CES 2025 上发表开幕主题演讲
揭秘宠忆生是如何为宠物提供临终关怀服务?
亿维股份发明专利荣获首批公路交通领域高质量专利推介证书
光明村首批年货已送达!京东物流多措并举助力“我给老家送年货”活动
首发经济与谷子经济双轮驱动,名创优品引领兴趣消费新潮流
跨越时空的智能体验 LG电子引领CES 2025情感智能新潮流
年终奖怎么花?TCL C11K大屏电视让游戏与观影更震撼
2024宠物新国货,卫仕筋骨魔方获“年度创新产品”大奖
专注于3C产品技的绿联科技术,一路不断升级开挂
让世界爱上中国味!苏状元佛跳墙荣膺2025国际美味大奖
华润万家50家门店焕新背后
绿联科技CES展会惊艳亮相:AI NAS开启智能存储新时代!