0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看威廉希尔官方网站 视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

Azure AI 基础设施强势升级!进一步扩展人工智能能力

微软科技 来源:未知 2023-11-21 08:15 次阅读

微软 Azure AI 基础设施是微软扩展产品和服务的核心支柱,为开发人员提供在 Azure 平台上构建下一代 AI 驱动的应用程序所需的系统、工具和资源。

微软在硬件和 AI 基础设施上的早期投资,正在帮助客户将 AI 的高效和创新变现为业务价值。借力 AI,用户可以创造更丰富的用户体验,推动创新,提高业务生产力。

微软 Azure AI 基础设施能够支持全球可扩展,且未来微软仍将对其进行持续投资与扩展。现在,微软推出了 ND H100 v5 虚拟机系列,这款虚拟机配备了 NVIDIA H100 Tensor Core 图形处理单元(GPU)和低延迟网络,推动企业步入 AI 应用新时代。

wKgZomVb97OAfJeeAABHOin8TBw980.png

前所未有的 AI 处理和规模

ND H100 v5 虚拟机系列发布

微软全新发布Azure ND H100 v5 虚拟机(VM)系列,现已在美国东部和美国中南部 Azure 区域提供。该系列配备了最新的 NVIDIA H100 Tensor Core GPU 和 NVIDIA Quantum-2 InfiniBand 网络。凭借在超级计算性能和规模方面的丰富经验,微软精心设计的 ND H100 v5 系列虚拟机,用于应对先进的 AI 工作负载带来的日益增加的复杂性。作为微软在 AI 领域深入和持续投资的一部分,微软正在利用一个 AI 优化的 4K GPU 集群,并将在明年将其扩展到数十万个全新的 GPU。

ND H100 v5 VM 虚拟机系列具有以下特性:

  • AI 超级计算 GPU:配备了八个 NVIDIA H100 Tensor Core GPU。比起上一代虚拟机,该系列可让 AI 模型显著提速,为企业提供无与伦比的计算能力。

  • 新一代计算机处理单元(CPU):CPU 性能对于 AI 的训练和推理至关重要,微软选择了第四代 Intel Xeon Scalable 处理器,确保虚拟机达到最佳的处理速度。

  • 低延迟网络:采用 NVIDIA Quantum-2 ConnectX-7 InfiniBand,每个 GPU 拥有 400Gb/s、每个 VM 拥有 3.2 Tb/s 的跨节点带宽,确保 GPU 间的无缝性能,堪称全球顶级的超级计算机。

  • 优化主机到 GPU 的性能:通过PCIe Gen5提供每个GPU 64GB/s的带宽,Azure在CPU和GPU之间具有显著的性能优势。

  • 大规模的内存和内存带宽:DDR5 内存是该系列虚拟机的核心,提供更高的数据传输速度和效率,使它们成为处理大规模数据集工作负载的理想选择。

该系列虚拟机已经证明了它们的性能优势,使用新的8位 FP8 浮点数据类型进行矩阵乘法操作时,速度提升了六倍,比前一代的 FP16 更快。ND H100 v5 VM 帮助大型语言模型(如 BLOOM 175B 端到端模型)实现了最高两倍的推理速度提升,验证了它们进一步优化 AI 应用的潜力。

由 Azure AI 基础设施支持的人工智能,具有推动从制造到零售、从金融服务到医疗保健等各行各业发展的潜力。


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 微软
    +关注

    关注

    4

    文章

    6591

    浏览量

    104044

原文标题:Azure AI 基础设施强势升级!进一步扩展人工智能能力

文章出处:【微信号:mstech2014,微信公众号:微软科技】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    微软发布Azure AI Foundry,推动云服务增长

    Azure AI Foundry为用户提供了个更为便捷的平台,使得在支持人工智能的大型语言模型之间切换变得轻松自如。这创新工具的发布
    的头像 发表于 11-21 11:32 417次阅读

    英伟达与软银携手共建日本AI基础设施

    近日,英伟达创始人兼CEO黄仁勋宣布,英伟达将与软银集团合作,在日本共同建设AI基础设施,其中包括日本最大的AI工厂。这合作标志着英伟达和软银在
    的头像 发表于 11-13 14:41 351次阅读

    智能驾驶所需的基础设施

    以及路侧基础设施之间的实时通信。未来,随着6G网络的发展,通信性能将进一步提升。 车联网平台 :车联网平台是连接车辆、云端和路侧基础设施的桥梁。它负责收集、处理和分析来自车辆和路侧基础设施
    的头像 发表于 10-23 16:05 745次阅读

    AI for Science:人工智能驱动科学创新》第6章人AI与能源科学读后感

    幸得好书,特此来分享。感谢平台,感谢作者。受益匪浅。 在阅读《AI for Science:人工智能驱动科学创新》的第6章后,我深刻感受到人工智能在能源科学领域中的巨大潜力和广泛应
    发表于 10-14 09:27

    AI for Science:人工智能驱动科学创新》第4章-AI与生命科学读后感

    很幸运社区给我个阅读此书的机会,感谢平台。 《AI for Science:人工智能驱动科学创新》第4章关于AI与生命科学的部分,为我们揭示了人工
    发表于 10-14 09:21

    AI for Science:人工智能驱动科学创新》第人工智能驱动的科学创新学习心得

    周末收到本新书,非常高兴,也非常感谢平台提供阅读机会。 这是本挺好的书,包装精美,内容详实,干活满满。 《AI for Science:人工智能驱动科学创新》这本书的第
    发表于 10-14 09:12

    人工智能ai4s试读申请

    目前人工智能在绘画对话等大模型领域应用广阔,ai4s也是方兴未艾。但是如何有效利用ai4s工具助力科研是个需要研究的课题,本书对ai4s基本原理和原则,方法进行描诉,有利于总结经验,拟
    发表于 09-09 15:36

    名单公布!【书籍评测活动NO.44】AI for Science:人工智能驱动科学创新

    ! 《AI for Science:人工智能驱动科学创新》 这本书便将为读者徐徐展开AI for Science的美丽图景,与大家起去了解: 人工
    发表于 09-09 13:54

    通过展频进一步优化EMI

    电子发烧友网站提供《通过展频进一步优化EMI.pdf》资料免费下载
    发表于 09-04 09:32 1次下载
    通过展频<b class='flag-5'>进一步</b>优化EMI

    西门子与微软进一步扩展战略合作关系

    近日,西门子数字化工业软件与微软宣布进一步扩展双方的战略合作关系。通过微软Azure云服务,西门子正式推出Xcelerator as a Service工业软件解决方案,为客户提供更灵活、高效的服务体验。
    的头像 发表于 05-21 10:47 677次阅读

    进一步解读英伟达 Blackwell 架构、NVlink及GB200 超级芯片

    新的标准。Blackwell架构和GB200 超级芯片有望推动英伟达在人工智能领域更进一步,巩固其在高性能计算和人工智能威廉希尔官方网站 领域的领先地位。随着亚马逊网络服务、谷歌云和微软 Azure
    发表于 05-13 17:16

    英伟达拟收购以色列人工智能初创公司Run:AI

    据最新消息,英伟达正在与以色列的人工智能初创公司Run:AI进行深入谈判,计划收购这专注于AI基础设施编排和管理平台的公司。据悉,此笔交易
    的头像 发表于 03-19 11:25 694次阅读

    英飞凌重组销售与营销组织,进一步提升以客户为中心的服务及领先的应用支持能力

    团队将围绕三个以客户为中心的业务领域进行组织和重建:“汽车业务”、“工业与基础设施业务”以及“消费、计算与通讯业务”。分销商和电子制造服务管理(DEM)销售组织将继续负责分销商和电子制造服务(EMS)领域。新的组织结构将以客户的应用需求为中心,进一步发挥英飞
    发表于 03-01 16:31 455次阅读
      英飞凌重组销售与营销组织,<b class='flag-5'>进一步</b>提升以客户为中心的服务及领先的应用支持<b class='flag-5'>能力</b>

    嵌入式人工智能的就业方向有哪些?

    嵌入式人工智能的就业方向有哪些? 在新轮科技革命与产业变革的时代背景下,嵌入式人工智能成为国家新型基础建设与传统产业升级的核心驱动力。同时在此背景驱动下,众多名企也纷纷在嵌入式
    发表于 02-26 10:17

    微软计划投资21亿美元加强西班牙AI与云基础设施

    微软副董事长兼总裁Brad Smith近日在社交媒体上透露,微软计划在接下来的两年内斥资21亿美元,以扩大其在西班牙的人工智能AI)和云基础设施。这战略举措旨在
    的头像 发表于 02-20 14:18 403次阅读