Nvidia 凭借云辅助的人形机器人技术领先一步

发布时间:2025年5月19日    来源:szf
Nvidia 凭借云辅助的人形机器人技术领先一步

快速阅读: 据《VentureBeat 公司》最新报道,英伟达在台北国际电脑展推出Isaac GR00T N1.5及GR00T-Dreams,加速人形机器人开发。通过生成合成数据和优化模型,解决机器人数据短缺问题,推动AI与机器人技术融合创新。

英伟达表示,正加速推进人形机器人技术的发展,为人类推理提供针对人形推理的定制化基础模型,生成合成运动数据的蓝图,并提供更多加速人形机器人开发的布莱克威尔系统。在2025年台北国际电脑展上,英伟达推出了Isaac GR00T N1.5,这是首个开放、通用且完全可定制的基础模型更新,专门面向人形推理和技能;Isaac GR00T-Dreams,用于生成合成运动数据的蓝图;以及加速人形机器人开发的布莱克威尔系统。

人形机器人及机器人开发者,包括敏捷机器人、波士顿动力、傅里叶、富士康、伽罗博特、门徒机器人、纽拉机器人、通用机器人、斯凯尔德AI和小鹏机器人,正在采用英伟达Isaac平台技术推动人形机器人开发和部署。“物理AI和机器人将引发下一次工业革命,”英伟达首席执行官黄仁勋在一份声明中说。“从机器人AI大脑到模拟世界进行训练,再到训练基础模型的AI超级计算机,英伟达为机器人开发的每个阶段提供了构建模块。”

新的Isaac GR00T数据生成蓝图填补了数据缺口

想拥有人形机器人吗?在黄仁勋的台北国际电脑展主题演讲中展示的Isaac GR00T-Dreams是一个蓝图,帮助生成大量合成运动数据——即神经轨迹,物理AI开发者可以用它来教导机器人新行为,包括如何适应不断变化的环境。开发者首先可以后训练Cosmos预测世界基础模型(WFMs)。然后,以单张图像作为输入,GR00T-Dreams生成机器人在新环境中执行新任务的视频。然后,该蓝图提取动作标记——压缩、易消化的数据片段,用于教导机器人如何执行这些新任务。

GR00T-Dreams蓝图补充了在三月份英伟达GPU技术大会上发布的Isaac GR00T-Mimic蓝图。虽然GR00T-Mimic利用Nvidia Omniverse和Nvidia Cosmos平台增强现有数据,但GR00T-Dreams利用Cosmos生成全新数据。英伟达人工智能和杰出科学家吉姆·范在新闻发布会上说:“英伟达有一个非常强大的机器人战略,它围绕Jensen所说的‘三计算机问题’展开。”他指出公司有OVX计算机,旨在进行模拟和图形模拟物理引擎,用于数据合成与生成。这些数据被DGX计算机消耗,用于训练基础模型。然后部署到HX计算机上,这是边缘平台上的人形机器人运行时。范说,Gr00t是物理AI和机器人工作流的生命周期。“这是三计算机问题的具体实例,”他说。他指出了Project Gr00t的两个进展,Gr00t Dreams和Gr00t N1.5。(他说他对自己给它们起的名字感到相当自豪。)

对于Gr00t Dreams,范说这是一个可以生成视频来训练机器人的模型。他展示了一些视频并说所有视频均由Nvidia Cosmos生成。“我们找到了一种应用像Cosmos这样的先进视频生成模型的方法,帮助人形机器人。从高层次上看,这种方法的工作原理是我们首先在实验室的机器人视频上微调Cosmos,使这个视频模型定制于我们实验室的机器人,然后我们可以使用这个微调后的模型通过以不同方式提示模型来生成无限数量的梦想视频,”范说。“现在这成为合成数据以增强我们的真实机器人数据集。正如你们许多人可能知道的那样,在真实机器人上收集数据非常耗时且昂贵,因为从根本上你每天每台机器人的时间限制为24小时,对吧?这是一个物理系统,但有了Gr00t Dreams,这个新工作流程,这一套新算法,我们现在能够打破这个基本物理限制,并以空前的规模增加数据。”结果是机器人将能够正确拾取物体。你可以告诉它拿起黄瓜或倒一些橙汁或打开笔记本电脑。范说,机器人从未接受过这些特定动作的训练,但由于它已经接受了视频模型的训练,机器人能够“理解这些动词的物理意义和含义”。因此,它学会了如何执行这些动作。

新的Isaac GR00T模型推动人形机器人发展

英伟达GR00T为机器人生成合成数据。英伟达研究团队利用GR00T-Dreams蓝图在短短36小时内生成合成训练数据,开发出GR00T N1.5——对GR00T N1的更新,而没有蓝图则需要近三个月的时间。GR00T N1.5可以更好地适应新环境和工作空间配置,并通过用户指令识别对象。此更新显著提高了模型在常见物料处理和制造任务(如分类或放置物体)中的成功率。GR00T N1.5可以在今年晚些时候推出的Jetson Thor上部署。

Gr00t N1.5基础模型正在将Gr00t Dreams作为合成数据生成管道的一部分。英伟达升级了视觉语言骨干网络,因此Gr00t N1.5将具有更好的适应性和语言指令合规性,范说。Gr00t N1.5将在Computex上发布,并于6月9日开源。至于Gr00t Dreams,英伟达仍在制定时间表。范说,希望尽可能开源。

GR00T N的早期采用者包括爱伊机器人、富士康、光轮和纽拉机器人。爱伊机器人使用该模型使ALICE4能够理解自然语言指令并在工业环境中执行复杂的拾取和放置工作流程。富士康集团正在使用它来提高工业机器人操作器的灵活性和效率,而光轮正在利用它验证合成数据以加快工厂中人形机器人部署。纽拉机器人正在评估该模型以加速其家庭自动化开发。

新的机器人模拟和数据生成框架加速了训练管道

英伟达Isaac GR00T使得设计人形机器人变得更加容易。开发高度熟练的人形机器人需要大量的多样化数据,这在捕捉和处理方面成本高昂。机器人需要在物理世界中进行测试,这可能会带来成本和风险。为了帮助缩小数据和测试差距,英伟达推出了以下仿真技术:

– Nvidia Cosmos Reason,一个新的WFM,使用链式思维推理来帮助为物理AI模型训练生成准确、高质量的合成数据,现在可在Hugging Face上使用。
– Cosmos Predict 2,用于GR00T梦想中,也即将在Hugging Face上推出,性能增强以生成高质量的世界并减少幻觉。
– Nvidia Isaac GR00T-Mimic,一个生成指数级大量合成运动轨迹的蓝图,用于机器人操作,只需少量的人类演示。
– 开源物理AI数据集,现在包括24,000个高质量的人形机器人运动轨迹,用于开发GR00T N模型。
– Nvidia Isaac Sim 5.0,一个仿真和合成数据生成框架,现在在GitHub上公开可用。
– Nvidia Isaac Lab 2.2,一个开源机器人学习框架,将包含新评估环境,以帮助开发人员测试GR00T N模型。

富士康和富士康链接正在使用GR00T-Mimic蓝图来生成合成运动操作,以加速他们的机器人训练管道。敏捷机器人、波士顿动力、傅里叶、门徒机器人、纽拉机器人和小鹏机器人正在使用Nvidia Isaac Sim和Isaac Lab来模拟和训练他们的人形机器人。斯凯尔德AI正在使用仿真框架来开发通用机器人智能,而通用机器人正在将其集成到其机器人智能平台中。

全球系统制造商正在提供单一架构,轻松运行每个机器人开发工作负载,涵盖训练、合成数据生成、机器人学习和仿真。思科、戴尔科技、惠普企业、联想和Supermicro宣布了Nvidia RTX PRO 6000 Blackwell驱动的服务器,而戴尔科技和联想宣布了Nvidia RTX PRO 6000 Blackwell驱动的工作站。当需要更多的计算能力来运行大规模训练或数据生成工作负载时,开发者可以利用Nvidia Blackwell系统,如GB200 NVL72——在领先的云提供商和Nvidia Cloud合作伙伴的Nvidia DGX Cloud上可用——以实现高达18倍的数据处理性能提升。

(以上内容均由Ai生成)

你可能还想读

本周科技大事件:谷歌发布Pixel 10,Gamescom揭晓重磅游戏

本周科技大事件:谷歌发布Pixel 10,Gamescom揭晓重磅游戏

快速阅读: 谷歌推出Pixel 10手机及Pixel Watch 4,新增卫星紧急通讯、可更换电池和屏幕、抬手通话等功能,屏幕亮度达3000尼特,还将与斯蒂芬·库里合作推出AI健康和健身教练服务。 谷歌本周在“由谷歌制造”活动中推出了Pix […]

发布时间:2025年8月23日
SK海力士凭借HBM激增首次超越三星,领跑全球内存市场

SK海力士凭借HBM激增首次超越三星,领跑全球内存市场

快速阅读: 据《《韩国先驱报》》称,7月20日,SK海力士首登全球内存芯片市场榜首,受益于AI产品和HBM芯片领先地位。其季度利润达9.2万亿韩元,远超三星。 据韩联社报道,7月20日,韩国京畿道伊川,SK海力士首次登上全球内存芯片市场榜首 […]

发布时间:2025年8月1日
STAN 从谷歌、万代南梦宫和其他公司筹集了 850 万美元

STAN 从谷歌、万代南梦宫和其他公司筹集了 850 万美元

快速阅读: 据《印度教业务线》称,STAN获850万美元融资,由万代南梦宫等机构投资。计划拓展印度市场,加强AI功能与创作者工具。平台用户超2500万,专注移动端社交游戏。 记者获悉,8月1日,社交游戏平台STAN宣布完成850万美元的新一 […]

发布时间:2025年8月1日
“这改变了一切”:谷歌的人工智能模式迫使品牌重新考虑搜索策略

“这改变了一切”:谷歌的人工智能模式迫使品牌重新考虑搜索策略

快速阅读: 据《营销周》称,谷歌推出AI搜索模式,减少外部链接,提升对话式回答。品牌需调整策略,重视内容质量与品牌权威。此变化影响营销方式,竞争加剧。 据谷歌官方消息,7月29日,谷歌在英国推出了基于人工智能的搜索功能AI模式,此前该功能已 […]

发布时间:2025年8月1日
在 Android 上用更智能的应用程序替换 Google Assistant

在 Android 上用更智能的应用程序替换 Google Assistant

快速阅读: 据《电话竞技场》称,据报道,用户可从Google Play下载Meta AI应用,安装后需检查版本是否为230.0.0.36.164或更高。操作方法:进入设置,选择应用,查看Meta AI信息页底部的版本号。 据媒体报道,用户现 […]

发布时间:2025年8月1日
Xero 的英国董事总经理回击人工智能正在抢走会计工作的说法

Xero 的英国董事总经理回击人工智能正在抢走会计工作的说法

快速阅读: 据《UKTN(英国科技新闻)》称,英国科技媒体UKTN报道,Xero英国总经理凯特·海沃德表示,会计行业无需过度担忧AI自动化。尽管四大事务所裁员,但Xero仍持续投资AI技术,提升效率与服务质量。 据英国科技新闻网站UKTN报 […]

发布时间:2025年8月1日
Reddit 计划在搜索引擎市场大力推动人工智能与谷歌竞争:报告

Reddit 计划在搜索引擎市场大力推动人工智能与谷歌竞争:报告

快速阅读: 据《商业标准》称,Reddit CEO表示,公司正将平台转型为搜索引擎,整合AI功能,提升用户体验。Reddit Answers用户已超600万,计划全球推广。 据《The Verge》报道,7月11日,Reddit首席执行官史 […]

发布时间:2025年8月1日
Meta 超出预期,为“个人超级智能”做准备

Meta 超出预期,为“个人超级智能”做准备

快速阅读: 据《RCR无线》称,Meta二季度营收475.2亿美元,净利润183亿美元。CEO扎克伯格称将打造个人超级智能,但数据中心扩容遇挑战。公司计划2025年支出达1140-1180亿美元。 据媒体报道,7月25日,美国加州,社交媒体 […]

发布时间:2025年8月1日