0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看威廉希尔官方网站 视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

IBM的新型模拟内存芯片能否证明AI操作的性能和能源效率呢?

半导体产业纵横 来源:半导体产业纵横 2023-12-18 10:09 次阅读

IBM 的新型interwetten与威廉的赔率体系 内存芯片证明了 AI 操作的性能和能源效率都是可能的。

8 月,由 30 名 IBM 研究科学家组成的团队推出了一款全新芯片,旨在大幅提高耗电深度学习推理的能源效率,同时保持运算精度。这款名为 Hermes 的模拟内存芯片将数字电路与相变内存 (PCM) 相结合,因此神经网络计算可以在内存电路内进行。

这种处理器和内存配对消除了在内存和处理单元之间无休止地洗牌大量数据的需要,就像典型的人工智能加速器芯片中发生的那样。重要的是,分析表明该芯片与计算机视觉人工智能任务的数字芯片一样擅长,而且功耗却低得多。

率先推出该芯片的 IBM 欧洲研究院团队负责人 Abu Sebastian 及其同事 Manuel Le Gallo-Bourdeau 和 Vijay Narayanan 在最近的博客中明确表示,他们现在已经展示了实现快速、低功耗模拟AI芯片的架构愿景所需的许多构建模块。正如该团队的一位 IBM 科学家所言,“我们的芯片仍处于研究阶段,但我们现在将构建尽可能多的硬件,以准确了解它的功能并了解它的性能。”

耗电的人工智能

人工智能功耗问题的根源在于冯·诺依曼瓶颈,该瓶颈以现代计算机架构的先驱约翰·冯·诺依曼的名字命名。在这里,CPU 和内存是独立的实体,因此数据和计算必须不断地在两者之间来回穿梭。此过程会产生瓶颈,因为处理速度通常比检索数据或将数据写入内存的速度更快。

长期以来,设计人员一直在使用内存缓存、流水线和分层内存方案等解决方法来应对瓶颈。最近,芯片巨头专门开发了加速器芯片来承担新兴的人工智能处理任务。例如,英伟达已经从其 GPU 威廉希尔官方网站 中取得了长足的进步。谷歌开发了张量处理单元;英特尔提供多种解决方案,包括可针对人工智能计算进行编程FPGA高通则为移动设备设计了人工智能加速器芯片。

尽管如此,人工智能的高能耗需求及其不断增加的操作数量,需要一种更节能的方法,而这正是模拟内存计算似乎将发挥关键作用的地方。

模拟内存芯片可以通过直接在内存内执行计算来规避冯·诺依曼瓶颈。模拟计算方案只需要几个电阻电容器,因此可以将它们重新定位到存储器中,消除了存储器和处理器之间的分离,从而提高了能源效率,远远超过了数字芯片。

IBM 在其最新的模拟人工智能芯片中采用了这种方法。该芯片采用 14 nm CMOS 设计和制造,包含 64 个计算核心,每个核心都有自己的 PCM 阵列以及用于额外神经网络操作(例如激活和累加)的轻型数字处理器。片上通信网络将核心连接在一起,芯片中心的进一步数字处理单元可以处理更苛刻的神经网络计算。

尽管使用 PCM 威廉希尔官方网站 使其与众不同,但 IBM 并不是唯一一家致力于模拟 AI 芯片的公司。例如,英特尔实验室的研究人员一直在研究静态随机存取存储器和其他威廉希尔官方网站 ;美国初创公司Mythic专注于多级闪存;来自斯坦福大学、圣母大学、加州大学圣地亚哥分校和清华大学的研究人员开发了一种神经形态芯片,称为 NeuRRAM,它使用电阻式随机存取存储器。

PCM 是 IBM 的合理选择,因为该公司至少花了十年时间开发这些用于存储应用的材料,包括多级 PCM 芯片。PCM 本身是一种非易失性随机存取存储器,加热时会在低导电非晶相和高导电晶相之间切换。基于这些材料的设备可以利用相变,将电导的变化编码为突触权重,然后用于计算操作。

正如 IBM 的最新结果所示,这种连续的值(而不仅仅是数字设备中的 1 或 0)非常适合深度神经网络操作。

当与基于类似威廉希尔官方网站 的其他芯片(包括 NeuRRAM 以及 Mythic 和 TSMC 开发的芯片)进行基准测试时,IBM 的威廉希尔官方网站 可以执行矩阵向量乘法(这是人工智能运算的基础),速度至少提高 15 倍,并且能效相当。值得注意的是,在使用人工智能训练彩色图像数据库 CIFAR-10 进行测试时,该芯片还被证明在图像识别方面比其他芯片更准确,挑战了模拟内存计算虽然节能但容易出现计算错误的观念。

“相变存储器的优势在于它足够稳定,可以进行一些相对准确的计算,”IBM 科学家说。“我们开发了精确编程的威廉希尔官方网站 ,并且还详细描述了错误的特征。我们的精度对于神经网络来说已经足够了。”

英特尔实验室研究科学家 Hechen Wang 也多年来一直致力于模拟内存计算,他同意该方法可以实现卓越的能源效率。“研究人员大约五年前开始研究模拟内存,现在 IBM、imec、GlobalFoundries、台积电、三星和其他公司和学术团体开始研究这项威廉希尔官方网站 ,”他说。“如果我们想要进行非常高效的AI计算,我们需要将处理单元放入内存阵列,甚至内存单元中。”

Hechen Wang说,英特尔实验室正在寻求内存计算的多种途径,并探索一系列内存威廉希尔官方网站 。“对于哪种记忆才是正确的方向,我们还没有得出结论。”

尽管如此, Hechen Wang相信 IBM 和其他公司的最新模拟内存开发正在对这个“热门”领域产生积极影响。“IBM 的研究成果已经发表在 Nature 论文上,说实话,我从来没想过会发生这种事,”他说。“很多人阅读了这些出版物,我希望这些结果能够开阔他们的视野,并吸引更多人对该领域的关注。”

下一步

自从在《自然电子》杂志上发表研究结果以来,IBM 欧洲研究人员明确表示,他们的工作证明模拟 AI 可以提供与传统数字加速器相媲美的必要计算精度,而且能效更高。随着基于人工智能的威廉希尔官方网站 的兴起,节能且准确的推理硬件变得至关重要,研究人员的目标是创建能够执行端到端推理操作的模拟内存芯片。

与此同时,IBM 欧洲研究院表示,它打算利用 PCM 设备可达到的高突触密度,构建更大的芯片,能够比竞争对手的数字加速器运行整个网络操作。

IBM 科学家表示:“一旦我们真正展示了这项威廉希尔官方网站 的前景,并且更多的人想要投资(该领域),那么我们就可以组建由数百名研究人员组成的团队来从事这项工作,这样我们就可以将芯片投入生产模式。”







审核编辑:刘清

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 处理器
    +关注

    关注

    68

    文章

    19265

    浏览量

    229675
  • PCM
    PCM
    +关注

    关注

    1

    文章

    195

    浏览量

    53208
  • 人工智能
    +关注

    关注

    1791

    文章

    47208

    浏览量

    238291
  • 计算机视觉
    +关注

    关注

    8

    文章

    1698

    浏览量

    45982
  • AI芯片
    +关注

    关注

    17

    文章

    1882

    浏览量

    34996

原文标题:IBM 的AI芯片能否重塑深度学习推理?

文章出处:【微信号:ICViews,微信公众号:半导体产业纵横】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    IBM光学威廉希尔官方网站 新进展:光电共封装提升AI模型效率

    近日,据最新报道,IBM在光学威廉希尔官方网站 领域取得了新突破,这一进展有望大幅提升数据中心训练和运行生成式AI模型的效率。 为了实现这一目标,IBM推出了新一代光电共封装(CPO)工艺。这一创新
    的头像 发表于 12-18 14:26 290次阅读

    虚拟内存对计算机性能的影响

    ,它允许计算机使用硬盘空间来模拟物理内存。当物理内存(RAM)不足以容纳当前所有活动的程序和数据时,操作系统会将部分数据从RAM移动到硬盘上的一个特殊区域,称为交换空间(swap sp
    的头像 发表于 12-04 09:17 558次阅读

    DDR内存频率对性能的影响

    DDR内存频率对性能的影响主要体现在以下几个方面: 一、数据传输速度 内存条的频率(MHz)代表每秒的传输速度,即内存每秒能够执行操作的次数
    的头像 发表于 11-20 14:25 625次阅读

    IBM推出高性能AI模型Granite 3.0

    在近日举行的IBM年度TechXchange大会上,IBM正式推出了其最先进的AI模型家族——Granite 3.0。这款旗舰级语言模型代表了IBM
    的头像 发表于 10-28 17:39 450次阅读

    AI for Science:人工智能驱动科学创新》第6章人AI能源科学读后感

    不仅提高了能源的生产效率和管理水平,还为未来的可持续发展提供了有力保障。随着威廉希尔官方网站 的不断进步和应用场景的不断拓展,人工智能将在能源科学领域发挥更加重要的作用。 总结 《AI for Sc
    发表于 10-14 09:27

    IBM Cloud将部署英特尔Gaudi 3 AI芯片

    近日,科技巨头IBM与英特尔宣布了一项重大合作计划,双方将共同在IBM Cloud平台上部署英特尔最新的Gaudi 3 AI芯片,预计该服务将于2025年初正式上线。此次合作标志着两家
    的头像 发表于 09-03 15:52 384次阅读

    HDS-6智能型模拟断路器使用说明

    HDS-6智能型模拟断路器的原理HDS-6智能型模拟断路器采用全数字电路,时间为数字拨码设置,可实现模拟断路器跳合闸时间设置、三相/分相操作选择、输入信号逻辑控制等功能,从而
    的头像 发表于 08-02 16:15 612次阅读
    HDS-6智能<b class='flag-5'>型模拟</b>断路器使用说明

    威廉希尔官方网站 巅峰!探秘国内高性能模拟芯片的未来发展

    随着科技的飞速发展和数字化转型的深入推进,高性能模拟芯片作为连接现实世界与数字世界的桥梁,其重要性日益凸显。国内高性能模拟
    的头像 发表于 06-22 09:47 481次阅读
    威廉希尔官方网站
巅峰!探秘国内高<b class='flag-5'>性能</b><b class='flag-5'>模拟</b><b class='flag-5'>芯片</b>的未来发展

    先进的半导体功率元器件和模拟IC助力工业用能源设备节能

    随着向无碳社会的推进以及能源的短缺,全球对可再生能源寄予厚望,对不断提高能源利用效率并改进逆变器威廉希尔官方网站 (节能的关键)提出了更高要求。 而功率元器件和
    的头像 发表于 06-03 11:18 363次阅读
    先进的半导体功率元器件和<b class='flag-5'>模拟</b>IC助力工业用<b class='flag-5'>能源</b>设备节能

    能否建议通过内存映射提高aur性能

    内存映射显示的。 问题:当我们映射到不同的内存单元时,ISR 函数的时序性能没有任何改善。您能否建议通过内存映射提高 aur
    发表于 05-29 07:39

    知存科技助力AI应用落地:WTMDK2101-ZT1评估板实地评测与性能揭秘

    一、前言 随着当今数据迅速增长,传统的冯诺依曼架构内存墙正在成为计算性能进一步提升的阻碍。新一代的存内计算(IMC)和近存计算(NMC)架构有望突破这一瓶颈,显著提升计算能力和能源效率
    发表于 05-16 16:38

    进一步解读英伟达 Blackwell 架构、NVlink及GB200 超级芯片

    GB200 超级芯片模块组合而成,通过 Nvlink 链接,提供了超大规模的并行计算能力和极高的内存带宽,适用于大规模的 AI 训练、推理和高性能计算任务。 **3. **大模型训练
    发表于 05-13 17:16

    risc-v多核芯片AI方面的应用

    得RISC-V多核芯片能够更好地适应AI算法的不同需求,包括深度学习、神经网络等,从而提高芯片性能效率,降低成本,使
    发表于 04-28 09:20

    微软正在研发新型网卡,旨在提升自研AI芯片性能

    微软近日被曝正在秘密研发一款高性能新型网卡,这一创新旨在增强其自研的Maia AI服务器芯片的功能,并可能大幅度降低对外部芯片设计厂商如英
    的头像 发表于 02-21 11:01 740次阅读

    荷兰AI芯片设计公司Axelera计划推出新型汽车芯粒AI架构

    荷兰边缘人工智能(AI芯片设计领域的领军企业Axelera AI Solutions正在积极开发一款新型的汽车芯粒(chiplet)内存
    的头像 发表于 01-18 18:24 1811次阅读