NVIDIA发布Isaac GR00T
机器人需要借助大规模、发布高物理精度且多样化的发布数据集进行训练,才能在复杂环境中进行推理并完成多种任务,发布而目前这些数据难以公开获取。发布
在华盛顿特区举行的发布 NVIDIA GTC 大会上,NVIDIA 发布了基于NVIDIA Cosmos世界基础模型构建的发布IsaacGR00T-Dreams合成数据生成与神经仿真框架,可帮助机器人突破现实经验的发布局限进行学习。通过生成如虚拟世界状态与动作轨迹的发布“梦境”,开发者可为机器人生成不同环境下的发布训练数据与动作指令,使其掌握新技能。发布
传统合成数据生成方法需要开发者耗费大量精力构建虚拟环境,发布而 GR00T-Dreams 框架彻底改变了这一模式:仅需一张图片以及简单的发布自然语言指令,即可“构想”出全新的发布训练场景。
GR00T-Dreams 框架包含两种核心模式:
Passive dreaming模式能够自动生成多样化的发布机器人训练视频场景。开发者只需输入图像和指令,发布例如移动物体或在空间内导航,即可对类似NVIDIA Cosmos Predict等世界模型进行后训练。随后,GR00T-Dreams 仅需文本提示,即可“构想”生成多个合成序列,动态呈现机器人如何在新环境中完成各类任务,同时场景中的物体与背景可以完全通过文本提示进行更换。
Lucid dreaming模式作为一个响应式神经仿真器则更进一步。它可使 AI模型仅凭一张 2D 图像构建出完整的交互式虚拟世界,在这些环境中开发者可以远程精确控制机器人进行复杂机械动作,还可实时测试各种边缘场景。
场景生成后,GR00T-Dreams 会将其送入Cosmos Reason推理模型进行筛选,该模型能够过滤存在缺陷或质量较低的“不好的梦境”。经筛选保留的数据将形成连贯的动作轨迹,为 GR00T N 系列等视觉语言动作模型提供后训练支持。
这些模型集成了视觉感知、自然语言理解与物理控制系统,使机器人能够精准解析指令并在复杂环境中做出自主响应。
- ·禾赛科技荣获四大重磅奖项
- ·杭州西湖景区增新桥 专供鸳鸯宝宝等水鸟自由进出荷区
- ·极海半导体荣获21ic电子网“年度创新驱动奖”
- ·新华微评:“验收合格”不是“天量罚款”挡箭牌
- ·Microchip推出12按钮MTCH2120交钥匙触摸控制器
- ·飞虹MOS管在音响电源中的应用
- ·迷信进口贪便宜 海淘药更好?像假药一样危险!
- ·周岁幼儿反复咳嗽治不好 竟是一葡萄梗嵌进食管壁
- ·实习越来越“卷” 焦虑如何抚平
- ·樱花的果实不要采 泉州西湖公园的树木定期喷洒农药
- ·武大樱花盛放迎客 周末“医护专场”1.3万人已预约
- ·阿姨晒20年前的嫁妆火了!网友惊叹:绝对的大户人家
- ·网红打卡“堵”了厕所 历史建筑要怎么办?
- ·“脸不能随便刷” 让“非必要不刷脸”成为应用前提
- ·四价流感疫苗有望8月进入市场 适用3岁及以上人群
- ·第35届新思科技全球用户大会成功举行
