0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看威廉希尔官方网站 视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

一种可以超越传统方法捕捉微小的面部表情,并更好的测量人类情绪的机器学习模型

nlfO_thejiangme 来源:未知 作者:李倩 2018-08-01 09:48 次阅读

在情感计算发展的过程中,机器人和计算机逐渐发展出分析人类面部表情、识别情绪并基于此进行应答的能力。相关的应用除了检测个体的健康状态和学生的注意力外,也在帮助医生更好的捕捉疾病的信号、让机器人成为我们更好的陪伴。

但目前的威廉希尔官方网站 对于复杂多变的人类情绪表达还面临着一系列复杂的问题。除了如文化、性别、年龄等通常的差别外、还包括更细粒度的差异,包括:所处的时刻、睡眠状态、甚至是对话对象间的熟悉程度都会微妙地影响着我们对于情绪状态的表达。这些对于机器来说千头万绪的问题于人类大脑来看却是本能的反应。近年来深度学习威廉希尔官方网站 逐渐学会了捕捉人类面部微妙表情的能力,但精确性和跨人群的适应性需要很长的路要走。

为了解决情感计算中面临的问题,来自麻省理工媒体实验室情感计算研究组提出了一种可以超越传统方法捕捉微小的面部表情,并更好的测量人类情绪的机器学习模型。除此之外,通过额外的小规模数据可以将模型高效的迁移到不同的人群中去,在保持精度效率的同时提高了模型的适应性。

精准的个性化情绪识别

传统的情感计算模型利用一刀切的思想来训练模型,将在某一数据集上训练描绘不同表情的优化特征作为通用特征用于整个全新的新数据集。与过去较为单一的方式不同的是,MIT的研究人员提出了一种模型个性化威廉希尔官方网站 ,称为"混合专家(mixture of experts MoE)"的模型。这种模型可以从个体中发掘出更为细粒度的表情数据。

上图是研究中提出的模型架构,其中研究人员首先利用Faster R-CNN从视频帧中提取出面部区域,随后利用ResNet-50学习出面部的深度特征,并将这些特征馈入个性化专家网络(personalizedexpert network PEN)中,用于自动估计主体的预约和兴奋程度。同时还包括了门网络(gating network CN),在推断新图像时为PEN中不同的专家分配权重。

在MoEs中,一系列被称为“专家”的神经网络模型被训练来独立地处理特定的任务并生成单一的结果。同时研究人员还利用了被称为“门网络”结构来计算不同神经网络对于未知主体情绪的检测概率,从而找出对于给定图像最合适的专家检测器。

利用情感计算数据集RECOLA中的18个独立视频,研究人员们将MoEs中的每一个专家网络与其中的一个视频进行匹配训练。在训练时将所有的视频分解为独立的帧,在其中9个上做训练,并在另外9个上做验证。

每一个专家网络和门网络一起负责跟踪每一个个体面部表情。模型会根据每一帧中面部表情的愉悦程度和兴奋状态打分。而在训练时,这些打分的标签由6位人类专家完成,分值从-1(low)到+1(high)之间。

随后研究人员测试的模型的个性化能力。在训练完模型后,利用余下被测者的部分视频帧进一步训练模型,而后用模型从未见过的帧来进行测试。结果表明,对于新的人群只需要5%~10%的数据,模型就可以大幅度超过传统方法,在对于面部表情的愉悦和兴奋程度解读更接近于人类专家的水平。

这一结果显示出了模型利用少数数据,具有人群和个体间迁移能力的潜力,而这也是处理这一问题的关键。我们通常会在某一人群上训练出一个较好的算法,但当面临完全不一样的人群时,算法的表现就会降低很多。但只要从新的人群中进行少数采样来优化模型,模型就会适应新的人群特征得到较好的结果。这是模型个性化最为重要的优势。

虽然目前的训练数据在肤色上缺乏多样性,但研究人员表示一旦有适合的数据集,模型将在更具多样性的人口数据上进行训练以适应更加多样性的文化。

更好的人机交互

训练个性化模型的另一个重要原因在于,这会为机器人和计算机带来强大的学习能力,可以通过很少的数据就能训练并学习会如何感受我们人类情绪的微妙变化,从而更好的为人类服务。这会为很多应用场景带来完全不同的便捷体验。

例如它可以在电脑或移动设备的后台运行来跟踪用户的视频对话从而学习用户在不同情形下面部表情的微妙变化。利用web威廉希尔官方网站 或者app可以识别出用户的焦虑、痛苦、紧张、沮丧等负面情绪,并为用户及时提供相应的建议。通过情绪识别还可以计算出用户日常情绪的偏离状况,并作为健康和幸福指数的度量来描述用户的状态。

这在人机交互中十分重要。机器人需要识别不同个体的心理状态,并根据识别出的情绪提供相应的响应。例如在教育机器人中可以利用情绪识别来判断学生的专注程度,从而及时调整授课的方式和内容。甚至这也是识别儿童孤独症的有效手段。

个性化的情绪识别将为为情感认知提供更好的保证。通过训练多个专家并对结果进行聚合优于训练单个超级专家的情况,结合个性化的能力使得情感识别的准确性和通用性大幅提高。通过情绪识别,在未来得以将许多人机交互场景变为现实。也许更懂你的机器人、陪你彻夜长谈的mate、默契的好伙伴将在不远的将来走进我们的生活中。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 人机交互
    +关注

    关注

    12

    文章

    1206

    浏览量

    55384
  • 机器学习
    +关注

    关注

    66

    文章

    8408

    浏览量

    132572
  • 数据集
    +关注

    关注

    4

    文章

    1208

    浏览量

    24690

原文标题:​MIT研究人员提出个性化机器学习模型,可捕捉细微的面部表情、更好地感知人类情绪变化

文章出处:【微信号:thejiangmen,微信公众号:将门创投】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    科技进步不思议:现电脑确已可检测人类情绪

    人类的激励因素。它的算法着眼于微小的、几乎无法察觉的人类活动,计算出这个人的感受。它可以在给定的语境中理解“
    发表于 11-08 14:40

    基于深度学习和计算机视觉的面部表情分析

    作者:Gordon Cooper,Synopsys嵌入式视觉产品营销经理识别面部表情情绪人类社交初期阶段的项基本且非常重要的技能。
    发表于 07-17 07:31

    【威廉希尔官方网站 杂谈】用AI读懂人心?情感科学专家:靠表情识别情绪不靠谱

    `AI 能否识别人类感情?原则上来说,AI 可以通过语音识别、视觉识别、文字识别、表情识别等数据,结合深度学习,再加上人工的标记,从而具备识别情绪
    发表于 07-30 04:30

    一种识别细微面部表情方法,扫描脸部观察是否有欺骗的迹象

    近年来,科技公司已经开始使用艾克曼(Ekman)的方法来训练从面部表情中检测情感的算法,些开发人员声称,自动情绪检测系统不仅比
    的头像 发表于 03-11 10:56 6980次阅读

    利用机器视觉可分辨小鼠5情绪

    近日,发表于《科学》杂志的项新研究首次利用机器视觉识别小鼠的面部表情,不仅能区分出小鼠高兴、厌恶、恶心、疼痛和恐惧五
    的头像 发表于 04-08 16:43 2317次阅读

    基于机器学习威廉希尔官方网站 的人工智能算法 人类面部表情可以超越地域和文化

    尽管人类的悲欢并不相同相通,但人类面部表情可以超越地域和文化。
    的头像 发表于 12-24 12:02 917次阅读

    以色列推出一种绕过障碍物以清除面部表情面部识别方案

    以色列初创公司Corsight AI已推出了一种面部识别解决方案,该解决方案能够快速,准确地识别人员,绕过障碍物以清除面部表情(例如面部遮盖
    的头像 发表于 11-21 09:33 1665次阅读

    基于条件生成式对抗网络的面部表情迁移模型

    面部表情迁移是计算机视觉角色动画领域的关键威廉希尔官方网站 ,但现有面部表情迁移方法存在生成表情不自然、缺乏真
    发表于 05-13 15:31 6次下载

    基于数据驱动的面部表情识别方法

    存在定的相关性,这种相关性也通常会导致样本的表情标签呈现多样性。也就是说,每个样本的表情状况与潜在的情绪标签分布相关联。为此,提岀了一种
    发表于 06-10 11:09 7次下载

    面部表情识别应用方法

    面部表情识别是指通过计算机威廉希尔官方网站 和图像处理威廉希尔官方网站 来识别人脸表情的过程。面部表情人类情感表达的重要方
    的头像 发表于 04-20 18:16 3271次阅读

    面部表情识别在教育领域的应用

    面部表情识别在教育领域有着广泛的应用,可以帮助教师更好地理解和关注学生的学习状态和需求,从而提高教学质量和效果。本文将探讨
    的头像 发表于 08-04 17:48 889次阅读

    面部表情识别在社交媒体中的应用

    面部表情识别在社交媒体中有着广泛的应用,可以帮助人们更好地理解和处理社交媒体信息,从而提高社交媒体的交互性和用户体验。本文将探讨面部
    的头像 发表于 08-09 16:04 642次阅读

    面部表情识别威廉希尔官方网站 的挑战与前景

    面部表情识别在教育领域具有广泛的应用前景。通过识别学生的面部表情和情感状态,教师可以更好地理解学
    的头像 发表于 08-09 17:16 570次阅读

    面部表情识别研究:解读情绪的密码

    一种通过计算机算法分析面部表情,从而理解人类情绪的威廉希尔官方网站 。它结合了图像处理、机器
    的头像 发表于 08-14 18:09 911次阅读

    面部表情识别:从实验室到现实世界的应用

    面部表情识别威廉希尔官方网站 通过分析面部肌肉的运动和面部特征的变化来推断人的情绪和意图。这种威廉希尔官方网站 可以提供
    的头像 发表于 08-17 18:27 629次阅读