0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看威廉希尔官方网站 视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

人工智能从大脑“读出”语言

OaXG_jingzhengl 来源:工程师李察 2019-04-30 10:36 次阅读

对于许多瘫痪且无法说话的人来说,他们想要表达的语音信号隐藏在大脑中。但没有人能够直接破译这些信号。

不过,最近有3个研究小组在将植入大脑的电极数据转化为计算机生成的语音方面取得了进展,他们通过被称为神经网络的计算模型,重建了可以被人类听众理解的单词和句子。

最近几个月以来,正如在bioRxiv上发布的多篇论文描述的那样,研究人员仍无法完全重建仅仅存在于人们大脑里的语音信息。但另一方面,研究人员在人们大声朗读、轻声细语,或者听录音的时候,监视了大脑的部分活动。

未参与该研究的瑞士日内瓦大学神经工程师Stephanie Martin表示,重新演绎人们脑海中的语音信息这一做法“令人兴奋不已”。

中风或疾病后失去说话能力的人可以用眼睛或其他小动作控制光标或选择屏幕上的字母。但如果大脑—计算机界面能够直接重建语言,他们可能会重新获得更多,例如,控制语调或者在节奏较快的对话中插话。

但将这一想法付诸实践却困难重重。“我们试图找出在不同时间点打开和关闭的神经元模式,以此推断语言信息。”美国哥伦比亚大学计算机科学家Nima Mesgarani说,“从一个映射到另一个映射的过程非常复杂。”

这些信号转换为语音的情况因人而异,因此必须对计算机模型“因材施教”。这些模型需要非常精确的数据支持,而这需要打开头骨。

研究人员只能在极少数情况下进行此类侵入性研究。一种是在切除脑瘤的过程中,暴露在外的大脑发出的电信号帮助外科医生定位并避开关键的语言和运动区域。另一种则是当癫痫患者植入电极以确定手术前癫痫发作的起因时。Mesgarani表示,在收集数据的过程中,“我们的操作时间最多只有20至30分钟,时间非常宝贵”。

研究人员通过将信息提供给神经网络获取了大部分宝贵数据,神经网络通过将信息传递到计算“节点”层处理复杂模式。神经网络也能通过调整节点之间的连接来学习。在实验中,神经网络接触了一个人发出或听到的语音记录以及同步的大脑活动的数据。

Mesgarani团队使用了5名癫痫患者的数据。该网络分析了听觉皮层(在语音和听力过程中都很活跃)在他们听到故事录音和人们从0读到9的录音后的记录活动。然后,计算机仅利用神经数据重建了录音中的数字。计算机“读出”人们脑海中数字的准确度高达75%。

德国不来梅大学神经科学家Miguel Angrick和荷兰马斯特里赫特大学神经科学家Christian Herff领导的另一个团队,则采用了6名接受脑肿瘤手术志愿者的数据。他们捕捉到这些患者朗读单音节词的声音,同时电极还记录下大脑的语音规划区域和运动区域活动。神经网络将电极读数映射到音频记录,然后根据先前的脑数据重建单词。根据计算机化的评分系统,大约40%的生成单词能够被理解。

最后,加州大学旧金山分校神经外科医生Edward Chang和他的团队重建了3名癫痫患者大声朗读时,在他们的语言和运动区域捕获的完整句子。在测试中,166人需要从10个书面语句中选择出一句他们听过的句子,识别句子的正确率达到了80%。

研究人员还进一步改善了模型:通过人们默读时记录的数据重建句子。Herff表示,这是一个重要的研究成果,“使得识别语音威廉希尔官方网站 又进一步”。

然而,加州圣地亚哥州立大学研究语言生成的神经科学家StephanieRiès表示,“我们真正需要解决的问题是当患者不能说话时,以上这些方法的表现如何。”当一个人安静地“说话”或“听到”自己的声音时,大脑发出的信号与说话或听到的信号并不相同。如果没有与大脑活动相匹配的外部声音,计算机甚至可能很难分辨出内部语言的开始和结束。

纽约州卫生局国家适应神经威廉希尔官方网站 中心神经工程师Gerwin Schalk表示,解码想象中的语音需要“一个巨大的飞跃,我们真的不清楚该怎么做”。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 语音
    +关注

    关注

    3

    文章

    385

    浏览量

    38033
  • 信号
    +关注

    关注

    11

    文章

    2791

    浏览量

    76746
  • 人工智能
    +关注

    关注

    1791

    文章

    47244

    浏览量

    238377

原文标题:人工智能从大脑“读出”语言

文章出处:【微信号:jingzhenglizixun,微信公众号:机器人博览】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    嵌入式和人工智能究竟是什么关系?

    、连接主义和深度学习等不同的阶段。目前,人工智能已经广泛应用于各种领域,如自然语言处理、计算机视觉、智能推荐等。 嵌入式系统和人工智能在许多方面都存在密切的关联性。首先,嵌入式系统可
    发表于 11-14 16:39

    《AI for Science:人工智能驱动科学创新》第6章人AI与能源科学读后感

    探讨了人工智能如何通过威廉希尔官方网站 创新推动能源科学的进步,为未来的可持续发展提供了强大的支持。 首先,书中通过深入浅出的语言,介绍了人工智能在能源领域的基本概念和威廉希尔官方网站 原理。这使得我对人工智能
    发表于 10-14 09:27

    AI for Science:人工智能驱动科学创新》第4章-AI与生命科学读后感

    很幸运社区给我一个阅读此书的机会,感谢平台。 《AI for Science:人工智能驱动科学创新》第4章关于AI与生命科学的部分,为我们揭示了人工智能威廉希尔官方网站 在生命科学领域中的广泛应用和深远影响。在
    发表于 10-14 09:21

    《AI for Science:人工智能驱动科学创新》第一章人工智能驱动的科学创新学习心得

    周末收到一本新书,非常高兴,也非常感谢平台提供阅读机会。 这是一本挺好的书,包装精美,内容详实,干活满满。 《AI for Science:人工智能驱动科学创新》这本书的第一章,作为整个著作的开篇
    发表于 10-14 09:12

    risc-v在人工智能图像处理应用前景分析

    RISC-V在人工智能图像处理领域的应用前景十分广阔,这主要得益于其开源性、灵活性和低功耗等特点。以下是对RISC-V在人工智能图像处理应用前景的详细分析: 一、RISC-V的基本特点 RISC-V
    发表于 09-28 11:00

    人工智能ai 数电 模电 模拟集成电路原理 电路分析

    人工智能ai 数电 模电 模拟集成电路原理 电路分析 想问下哪些比较容易学 不过好像都是要学的
    发表于 09-26 15:24

    人工智能ai4s试读申请

    目前人工智能在绘画对话等大模型领域应用广阔,ai4s也是方兴未艾。但是如何有效利用ai4s工具助力科研是个需要研究的课题,本书对ai4s基本原理和原则,方法进行描诉,有利于总结经验,拟按照要求准备相关体会材料。看能否有助于入门和提高ss
    发表于 09-09 15:36

    名单公布!【书籍评测活动NO.44】AI for Science:人工智能驱动科学创新

    活的世界? 编辑推荐 《AI for Science:人工智能驱动科学创新》聚焦于人工智能与材料科学、生命科学、电子科学、能源科学、环境科学五大领域的交叉融合,通过深入浅出的语言和诸多实际应用案例,介绍了
    发表于 09-09 13:54

    人工智能从何而来

    当大家都在讨论人工智能的时候,有一个问题似乎很少有人关注,即:人工智能从何而来?
    的头像 发表于 09-06 09:27 621次阅读

    报名开启!深圳(国际)通用人工智能大会将启幕,国内外大咖齐聚话AI

    8月28日至30日,2024深圳(国际)通用人工智能大会暨深圳(国际)通用人工智能产业博览会将在深圳国际会展中心(宝安)举办。大会以“魅力AI·无限未来”为主题,致力于打造全球通用人工智能领域集产品
    发表于 08-22 15:00

    FPGA在人工智能中的应用有哪些?

    FPGA(现场可编程门阵列)在人工智能领域的应用非常广泛,主要体现在以下几个方面: 一、深度学习加速 训练和推理过程加速:FPGA可以用来加速深度学习的训练和推理过程。由于其高并行性和低延迟特性
    发表于 07-29 17:05

    自然语言处理属于人工智能的哪个领域

    自然语言处理(Natural Language Processing,简称NLP)是人工智能(Artificial Intelligence,简称AI)领域的一个重要分支。它涉及到计算机与人类语言
    的头像 发表于 07-03 14:09 1320次阅读

    5G智能物联网课程之Aidlux下人工智能开发(SC171开发套件V2)

    5G智能物联网课程之Aidlux下人工智能开发(SC171开发套件V2) 课程类别 课程名称 视频课程时长 视频课程链接 课件链接 人工智能 参赛基础知识指引 14分50秒 https
    发表于 05-10 16:46

    5G智能物联网课程之Aidlux下人工智能开发(SC171开发套件V1)

    课程类别 课程名称 视频课程时长 视频课程链接 课件链接 人工智能 参赛基础知识指引 14分50秒 https://t.elecfans.com/v/25508.html *附件:参赛基础知识指引
    发表于 04-01 10:40

    嵌入式人工智能的就业方向有哪些?

    嵌入式人工智能的就业方向有哪些? 在新一轮科技革命与产业变革的时代背景下,嵌入式人工智能成为国家新型基础建设与传统产业升级的核心驱动力。同时在此背景驱动下,众多名企也纷纷在嵌入式人工智能领域布局
    发表于 02-26 10:17