0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看威廉希尔官方网站 视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

借助NVIDIA OSMO扩展AI机器人开发工作负载

NVIDIA英伟达企业解决方案 来源:NVIDIA英伟达企业解决方案 2024-04-12 11:44 次阅读

自主机器开发是一个数据生成和收集、模型训练和部署的迭代过程,其特点是跨异构计算资源的复杂的多阶段、多容器工作流。

这其中涉及多个团队,每个团队都需要共享和异构计算。此外,团队希望将某些工作负载扩展到云中,这通常需要 DevOps 专业知识,还需要在本地维护其他工作负载。

到目前为止,还没有一个统一的平台可供开发者轻松提交所需计算的工作负载。

在最近的 GTC 大会上,NVIDIA 发布了OSMO,这是一个云原生工作流编排平台,它提供一个单一界面,用于跨异构共享计算环境调度和管理各种自主机器工作负载。这些工作负载包括:

合成数据生成 (SDG)

DNN 训练和验证

强化学习

SIL 或 HIL 中的机器人 (再) 仿真

基于 SIM 或真实数据的感知评估

9d689706-f87d-11ee-a297-92fbcf53809c.gif

跨异构共享计算部署复杂的工作流

借助 OSMO 统一计算资源调度,您可以轻松地在 Kubernetes 集群上部署和协调多阶段工作负载。这包括共享的异构多节点计算资源,例如 aarch64 和 x86-64,可确保跨不同架构的灵活性和兼容性。

您可以轻松设置基于 YAML 的多阶段、多节点任务,并简化从 SDG 、训练到模型验证的端到端开发流程。OSMO 还可以集成到现有的 CI/CD 工作流中,动态调度夜间回归测试、基准测试和模型验证等任务。

该服务还利用 OIDC 等开放标准进行身份验证,并支持通过一键式密钥轮换实现凭据和数据集安全性的最佳实践。在合规性方面,团队可以通过开发中的版本管理和追踪用于模型训练的所有数据。这一功能对于可重复性来说也非常有价值。

协调本地部署和云 SDG 工作负载

合成数据生成尤其受益于分布式环境,因为它通常从本地开始生成较小批量的数据,但当需要生成大量数据时,则需要利用云来进行规模的扩展。OSMO 使用弹性资源调配,在降低 SDG 等离线批量流程的成本方面发挥着关键作用,从而实现高效且经济的大规模数据生成。

高效运行 SIL 和 HIL 测试

OSMO 支持的另一个重要工作负载是软件在环 (SIL) 机器人测试,涉及仿真多传感器和多机器人场景,或是一系列测试场景。这些场景最适合易于访问计算资源的云环境。OSMO 能够跨分布式环境调度和管理工作负载,确保利用云资源的可扩展性和可访问性,从而高效地执行 SIL 测试。

另一方面,由于特定机器人或机器硬件的可用性,硬件在环 (HIL) 测试需要本地部署。

异构计算对于 HIL 测试来说是必需的,因为仿真和调试等工作负载需要 x86,并且需要在 aarch64 上运行针对测试的软件,以提供其他方式无法提供的准确性能和硬件功能。直接在目标硬件上运行 HIL 还可以减少对昂贵的仿真器的需求。

同时生成和训练基础模型

OSMO 支持GR00T这种基础模型,该模型需要在 NVIDIA DGX 上进行模型训练,同时在 OVX 上进行实时强化学习。该工作负载包括在一个循环中以迭代方式生成和训练模型。

OSMO 可以跨分布式环境管理和调度工作负载,从而实现 DGX 和 OVX 系统的无缝协调,从而实现高效的迭代模型开发。

9d7a4be0-f87d-11ee-a297-92fbcf53809c.jpg

图 1. NVIDIA OSMO 用于 GR00T 基础模型

跟踪数据沿袭

数据沿袭和管理对于模型审计和确保整个开发过程的可追溯性来说至关重要。借助 OSMO,您可以追溯从来源到经过训练的模型的数据沿袭,从而提供透明性和可靠性。

借助 OSMO,您还可以轻松地管理大型数据集和创建数据集,从而实现高效的数据组织和分类。这包括管理真实数据集、合成数据集或混合数据集的能力,从而灵活地控制用于模型训练和评估的数据集。



审核编辑:刘清

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 传感器
    +关注

    关注

    2550

    文章

    51039

    浏览量

    753088
  • 机器人
    +关注

    关注

    211

    文章

    28384

    浏览量

    206919
  • NVIDIA
    +关注

    关注

    14

    文章

    4979

    浏览量

    102994
  • 仿真器
    +关注

    关注

    14

    文章

    1017

    浏览量

    83723

原文标题:借助 NVIDIA OSMO 扩展 AI 机器人开发工作负载

文章出处:【微信号:NVIDIA-Enterprise,微信公众号:NVIDIA英伟达企业解决方案】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    NVIDIA通过加速AWS上的机器人仿真推进物理AI的发展

    NVIDIA Isaac Sim 现在可在 Amazon EC2 G6e 实例中的 NVIDIA GPU 云实例上使用,将机器人仿真的扩展速度提高了 2 倍并加快了
    的头像 发表于 12-09 11:50 284次阅读

    使用NVIDIA Jetson打造机器人导盲犬

    Selin Alara Ornek 是一名富有远见的高中生。她使用机器学习和 NVIDIA Jetson边缘 AI机器人平台,为视障人士打造了
    的头像 发表于 11-09 13:51 240次阅读

    NVIDIA发布全新AI和仿真工具以及工作

    NVIDIA 在本周于德国慕尼黑举行的机器人学习大会(CoRL)上发布了全新 AI 和仿真工具以及工作流。机器人
    的头像 发表于 11-09 11:52 262次阅读

    利用NVIDIA Isaac平台构建、设计并部署机器人应用

    机器人在智能制造设施、商业厨房、医院、仓库物流和农业领域等不同环境中的应用正在迅速扩展。该行业正在向智能自动化转变,这需要增强的机器人功能来执行感知、地图构建、导航、负载处理、物体抓取
    的头像 发表于 11-09 11:41 702次阅读
    利用<b class='flag-5'>NVIDIA</b> Isaac平台构建、设计并部署<b class='flag-5'>机器人</b>应用

    NVIDIA提供一套服务、模型以及计算平台 加速人形机器人发展

    的发展,NVIDIA 于今日宣布,为全球领先的机器人制造商、AI 模型开发者和软件制造商提供一套服务、模型以及计算平台,以开发、训练和构建下
    的头像 发表于 07-31 10:41 651次阅读

    NVIDIA 加速人形机器人发展

    开发者可以访问新的 NVIDIA NIM 微服务,用于 Isaac Lab 和 Isaac Sim 中的机器人仿真、OSMO 机器人云计算编
    发表于 07-30 09:15 739次阅读
    <b class='flag-5'>NVIDIA</b> 加速人形<b class='flag-5'>机器人</b>发展

    谷歌借助Gemini AI系统深化对机器人的训练

    7月12日,国际科技界传来新动态,谷歌正借助其先进的Gemini AI系统,深化对旗下机器人的训练,旨在显著提升它们的导航能力和任务执行能力。DeepMind机器人团队最新发布的研究论
    的头像 发表于 07-12 16:29 628次阅读

    Al大模型机器人

    金航标kinghelm萨科微slkor总经理宋仕强介绍说,萨科微Al大模型机器人有哪些的优势?萨科微AI大模型机器人由清华大学毕业的天才少年N博士和王博士团队开发,与同行相比具有许多优
    发表于 07-05 08:52

    NVIDIA发布几项新功能来帮助机器人专家和工程师打造智能机器人

    、复杂装配任务等功能。 AI 由于能够增强机器人的性能,因此在这一发展演进过程中起到了举足轻重的作用。通过集成 NVIDIA AI 加速功能,机器人
    的头像 发表于 06-29 15:14 1108次阅读
    <b class='flag-5'>NVIDIA</b>发布几项新功能来帮助<b class='flag-5'>机器人</b>专家和工程师打造智能<b class='flag-5'>机器人</b>

    NVIDIA Isaac 机器人平台利用最新的生成式 AI 和先进的仿真威廉希尔官方网站 ,加速 AI 机器人威廉希尔官方网站 的发展

    机器人AI。 黄仁勋表示:“开发通用人形机器人基础模型是当今 AI 领域中最令人兴奋的课题之一。世界各地的
    的头像 发表于 06-04 18:00 7694次阅读
    <b class='flag-5'>NVIDIA</b> Isaac <b class='flag-5'>机器人</b>平台利用最新的生成式 <b class='flag-5'>AI</b> 和先进的仿真威廉希尔官方网站
,加速 <b class='flag-5'>AI</b> <b class='flag-5'>机器人</b>威廉希尔官方网站
的发展

    全球机器人开发领域采用NVIDIA 机器人开发和生产

    机器人开发领域的领先企业正在采用NVIDIA Isaac机器人平台来研究、开发和生产下一代 AI
    的头像 发表于 06-03 18:25 1228次阅读

    使用NVIDIA Isaac Manipulator生成抓取姿势和机器人运动

    NVIDIA 宣布与 Intrinsic.ai 就工业机器人任务的基础技能模型学习展开合作。
    的头像 发表于 05-17 10:33 1251次阅读
    使用<b class='flag-5'>NVIDIA</b> Isaac Manipulator生成抓取姿势和<b class='flag-5'>机器人</b>运动

    NVIDIA Isaac机器人平台升级,加速AI机器人威廉希尔官方网站 革新

    NVIDIA Isaac机器人平台近期实现重大升级,通过引入最新的生成式AI威廉希尔官方网站 和先进的仿真威廉希尔官方网站 ,显著加速了AI机器人威廉希尔官方网站 的发展步伐。该平台
    的头像 发表于 03-27 10:36 672次阅读

    NVIDIA Isaac平台为AI机器人开发提供支持

    在今日的CES特别演讲中,NVIDIA机器人和边缘计算副总裁Deepu Talla揭示了NVIDIA及其合作伙伴如何将生成式AI机器人威廉希尔官方网站
    的头像 发表于 01-09 15:00 1081次阅读

    生成式AI通过NVIDIA Isaac平台提高机器人的智能化水平

    今日,NVIDIA 机器人和边缘计算副总裁 Deepu Talla 在 CES 上的特别演讲中,详细介绍了 NVIDIA 及合作伙伴是如何将生成式 AI
    的头像 发表于 01-09 10:27 1134次阅读
    生成式<b class='flag-5'>AI</b>通过<b class='flag-5'>NVIDIA</b> Isaac平台提高<b class='flag-5'>机器人</b>的智能化水平