0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

如何利用AI分析蒙娜丽莎面部情绪?

KSiH_idg_capita 来源:我是科学家iScientist 作者:孙晓 2021-04-12 11:18 次阅读

日常生活中,我们可以通过观察人的说话方式和脸色来揣摩别人的心思,因为每个人的音容相貌都隐藏着巨大的信息和内涵。研究表明,人的面部有44块肌肉,可以组合成一万多种表情,目前已知至少有3000多种是具有情感意义的。

在艺术作品里,名画《蒙娜丽莎》留下的似笑非笑的表情,是五百多年来达·芬奇留下的神奇谜团,并衍生出无数解读。在这份耐人寻味的情感空间里,人们众说纷纭,争论不休。

可不可以用科学的方法来作出解释呢?合肥工业大学计算机与信息学院教授、情感计算研究所所长的孙晓在演讲中表示,他们利用面部表情识别程序对蒙娜丽莎的表情进行分析,得出了一个令人意外的答案。如果这样的技术变得更加成熟,也许我们将对人类情绪的探究将更进一步。

AI 分析了蒙娜丽莎,识别出这些情绪

大家好,我叫孙晓,来自合肥工业大学。我是一名计算机科学家,我的工作是教计算机识别人心。

人心非常复杂,且我不是心理学家,那我怎么能去教计算机去识别人心?我想先请你来看一幅经典画作。

长久以来,科学家们都试图解密蒙娜丽莎的秘密

蒙娜丽莎的表情非常微妙。

不同背景和不同知识领域的人都对她的表情进行过一些解读:有人说她看起来非常温柔,有人说她面带严肃,也有人说她这是吃过巧克力后露出的微笑,甚至有人说她这是刚怀孕后的微笑……

大家都想尝试发现蒙娜丽莎的内心到底在想什么。

9f578980-9aa9-11eb-8b86-12bb97331649.png

我们也通过面部表情识别程序对蒙娜丽莎的表情做了一个简单识别,结果非常有趣,我们发现:蒙娜丽莎的表情有 62% 的可能性是中性;悲哀和高兴不是主要成分,分别只占 19% 和 12%,但同时存在她的表情中。

这里的计算机面部表情识别程序,实际就是我们在教计算机去简单地识别人的表情。

猜一猜上图中哪一位的表情中,带有惊讶情绪?该数据来源于多媒体技术会议 ICIP2020

做个小测验:我这里有三个动图,其中,有一个动图里的人做了一个非常微小的惊讶表情。

你是否能看出是哪一位做出了这个表情?下面来公布一下正确答案。

中间这位,露出了一个非常短暂的惊讶表情,其他两位则分别出现了短暂的积极和消极。

这其实是我们参加世界表情识别大赛时的数据。我们用人工智能算法参加了这个比赛,很荣幸地获得了第一名。

通过社交网络,也能监测到微妙的心理波动

看起来,人工智能算法完全可以准确识别出那些瞬间即逝的微妙表情。那么,我们能否说它可以识别内心?

这让我想起十几年前在日本留学时参与的一些工作。

当时,我们团队关注到了一些国家和地区的自杀现象,这些自杀现象的背后有一些非常深层的心理问题。

于是我们的团队就开始去做数据收集工作,获取了一些自杀者生前的数据,包括他们的生理健康数据。

我们发现,他们的生理没有什么明显问题,但他们又的确在自己的博客或微博里记录了非常灰暗的心路历程。

于是我们团队又开始大量收集一些博客和微博的公开数据,然后请求心理学家的帮助,对这些博客和微博内容字里行间蕴含的情感进行非常细致的标注。

a2537b4e-9aa9-11eb-8b86-12bb97331649.png

上图就是我们已经标注后的样子。大家可能看不太清,这也说明标注得非常细致。从篇章段落到字里行间,甚至是每一个字里面所蕴含的心理状态,都进行了标注。我们将这些教给计算机,于是计算机也学会了从文字中去探讨人的心理状态。

这项工作目前我们还在持续进行中。

我们用算法对微博内容做了一些简单分析,发现在半年时间内,他们的微博心理波动出现了一些非常明显的特征,比如,发微博的总量已经非常低,尤其是一些正向的情感明显降低,而且负向情感也逐渐增多。

这些特征都体现出他们可能有非常大的心理压力,心里也非常痛苦。这些都可以通过字里行间体现出来。

我们用微博监测心理波动,也发现了一些有意思的事。这是我们实验室的两位同学,一位男生,一位女生,他们疫情在家的半年时间里微博中体现的情感波动情况。

a2b04b6c-9aa9-11eb-8b86-12bb97331649.png

绿色曲线代表开心情绪,橙色代表悲伤

先看男生的微博,大部分时间都很高兴,很少出现负面情绪。基本上能脑补出来,这个男生每天笑呵呵地生活,这或许也可以从数据上支撑我们俗话说的「男人的快乐很简单」。

再看女生,各种情绪的波动错综复杂,这或许也侧面体现了「女生的心思很细腻」。

所以,我们可以通过面部表情和社交网络内容,似乎可以去对人的心理进行一些简单探测了。

普适心理计算:更复杂的心理评估

那么,我们能不能在一些更复杂的情况下,对人的心理进行更复杂的评估?

除了社交网络内容和面部表情,心理的内部状态也可以体现在眼神、行走姿态和一些生理信号,比如心率、呼吸。

如果能综合这些信息,那我们就可以更准确地发现人的内部心理状态,或者说,通过心理的外在表现去挖掘人的心理内部状态,去发现人的性格特质。

这也是我目前所从事的研究工作,叫「普适心理计算」。它是情感计算的一个分支,属于人工智能和心理学的一个交叉,人工智能借用心理学知识来探测人的心理状态。

这个视频就是我们实验室的研究成果之一。

我们综合了面部表情、语音语调、说话的内容,还有他眼睛的视角、视野以及他身体整个上半身的姿态,甚至包括他的心率,呼吸等等,判断出了他目前的心理状态。

视频里可以看到,我交给他这个任务以后,他表现得非常兴奋,数据中也能看出来他「兴奋」这一栏的值非常高;视频快结束的时候,他听说我不能带他来现场观摩,还表现出了些许失望。

既然可以通过一些心理的外在表现去探测人的内部心理,那我们能不能再深一步去探测他的性格特质?

来看这两张图片。

我安排实验室里的一位男生和一位女生分别去观察这个蒙娜丽莎的画像,同时用算法去记录他们的眼神。

越亮的地方,表示他们眼神落在这个地方的时间越久。

可能大家能比较容易猜到,右面图像的观察者是「喜欢看脸」的男生,而左边的观察者是喜欢看穿着、看各种细节的女生。

性别差异包括随之而来的性格特质差异,会让人在处理外部信息的时候产生明显的差异,这些差异也会有一些规律。那反过来,我能不能通过这些规律,倒推出你的性格特质,进行一些分析呢?

让技术从「心」开始,帮助人类

「情感计算」是二十几年前提出的概念,它的初衷实际上是帮助那些自闭症儿童,让他们去识别自己的情绪并能控制自己的情绪,也包括对他人情绪的认知。

我刚才分享的,无论是面部表情的情感计算,还是文本的情感计算,或者更复杂的心理探测甚至包括人格的探测,都是希望利用人工智能和情感计算技术,从「心」为人提供服务。

到现在,情感计算实际上已经慢慢在落地了,在一些领域中,比如机器人自动驾驶领域,都会或多或少应用到情感计算。我们也希望通过我们的技术手段,让情感计算在更多领域里为我们提供服务。

当然,技术为我们提供便利的同时,也会面对质疑。和其他的人工智能技术一样,大家可能对情感计算技术也抱有一些顾虑,比如可能会侵犯我们的隐私。

我觉得,我们完全可以怀抱一种开放的态度,来共同建设和完善,让技术更好地服务于人类。

从「心」开始,未来可期。

原文标题:用AI分析蒙娜丽莎的微笑,发现她其实没那么高兴

文章出处:【微信公众号:IDG资本】欢迎添加关注!文章转载请注明出处。

责任编辑:haq

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • AI
    AI
    +关注

    关注

    87

    文章

    30237

    浏览量

    268467
  • 人工智能
    +关注

    关注

    1791

    文章

    46894

    浏览量

    237650

原文标题:用AI分析蒙娜丽莎的微笑,发现她其实没那么高兴

文章出处:【微信号:idg_capital,微信公众号:IDG资本】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    云端AI开发环境分析

    当今,云端AI开发环境作为支撑AI技术快速迭代与应用部署的关键基础设施,扮演着至关重要的角色。下面,AI部落小编为您分析云端AI开发环境。
    的头像 发表于 11-25 10:27 91次阅读

    AI模型托管原理分析

    AI模型托管是指将训练好的AI模型部署在云端或边缘服务器上,由第三方平台提供模型运行、管理和优化等服务。以下,AI部落小编将对AI模型托管的原理进行详细
    的头像 发表于 11-07 09:33 120次阅读

    AI模型市场分析

    随着人工智能技术的快速发展,AI模型已成为全球科技竞争的新高地、未来产业的新赛道以及经济发展的新引擎。下面,AI部落小编分析了当前AI模型市场。
    的头像 发表于 11-01 09:51 121次阅读

    人工智能ai 数电 模电 模拟集成电路原理 电路分析

    人工智能ai 数电 模电 模拟集成电路原理 电路分析 想问下哪些比较容易学 不过好像都是要学的
    发表于 09-26 15:24

    如何利用AI进行提升自我呢?

    利用AI进行学习是一个高效且富有创新性的过程。以下是一些建议,帮助你充分利用AI进行学习: 选择适合的AI学习工具 : 深度学习框架 :如飞
    的头像 发表于 07-19 10:46 498次阅读

    德国科学家借助AI揭秘网球运动员情绪

    在人工智能和体育科学的交汇点上,一项前沿研究正为我们揭示运动员内心世界的新篇章。6月21日,ScienceDaily报道了德国卡尔斯鲁厄理工学院与杜伊斯堡-埃森大学联合开展的一项突破性研究,该团队成功利用计算机辅助神经网络,准确识别了网球运动员在激烈比赛中的肢体语言所表达的情绪
    的头像 发表于 06-21 16:26 459次阅读

    STM CUBE AI错误导入onnx模型报错的原因?

    使用cube-AI分析模型时报错,该模型是pytorch的cnn转化成onnx ``` Neural Network Tools for STM32AI v1.7.0 (STM.ai
    发表于 05-27 07:15

    为什么用CubeIDE导入AI模型进行分析会报错?

    python已经安装好了,但是在用CubeAI的时候,导入模型进行分析会报错,无法分析。有知道为什么会报[AI:persondetection][12152] Failed to execute
    发表于 05-22 06:38

    使用cube-AI分析模型时报错的原因有哪些?

    使用cube-AI分析模型时报错,该模型是pytorch的cnn转化成onnx ``` Neural Network Tools for STM32AI v1.7.0 (STM.ai
    发表于 03-14 07:09

    蒙娜丽莎出资1000万元投资集成电路、半导体等科技产业

    2024年3月6日,晶科能源首席供应链官CPO郭亦桓、丽豪半导体营销总监段智文代表双方于上海晶科中心签署长期战略合作协议。
    的头像 发表于 03-08 10:09 754次阅读
    <b class='flag-5'>蒙娜丽莎</b>出资1000万元投资集成电路、半导体等科技产业

    【RISC-V开放架构设计之道|阅读体验】+ 阅读初体验

    收到书的时候,感觉很不错,因为封面是传奇人物——蒙娜丽莎,感觉自己拿到一本宝典一样? 通过这本书,我才了解到“一生一芯”计划,这个是由中国科学院大学发起的公益性人才培养计划,完全免费,我被震惊了
    发表于 03-05 20:54

    【RISC-V开放架构设计之道|阅读体验】一本别出心裁的RISC-V架构之书(第一章)

    的计算机体系架构专 别出心裁地按照RISC-V模块化的指令来组织内容 对比x86、ARM 和MIPS 的设计,通过对比分析,突显RISC-V 的优势 可以作为从业者随时翻阅的案头参考书 开头的蒙娜丽莎像让
    发表于 01-24 19:06

    【RISC-V开放架构设计之道|阅读体验】先睹为快-学习RISC-V的案头好书

    蒙娜丽莎让人想到的就是优雅,这也契合RISC-V的设计哲学。本书从电子发烧友申请到,扉页有电子发烧友的签名。 前面附录了RISC-V的指令集参考卡,这个比较有用,有时看下汇编代码可以参考。参考卡
    发表于 01-20 22:37

    智慧社区建设中应用AI边缘智能分析设备、边缘设备可以解决哪些问题?

    “智慧社区”的建设除了可以安装监控摄像头、AI面部摄像机等智能设备来守护社区居民的安全,还可以引入AI边缘智能分析设备。例如安装布置在社区围墙、大门口、走廊等区域的视频监控场景中,通过
    的头像 发表于 01-15 15:05 527次阅读
    智慧社区建设中应用<b class='flag-5'>AI</b>边缘智能<b class='flag-5'>分析</b>设备、边缘设备可以解决哪些问题?