美教授以Youtube视频为素材研究计算机情感识别

当Louis-Philippe Morency还在南加州大学教授人类行为学的分析课程时，他就已经不遗余力地寻找人们之间彼此交谈和表达观点的优秀视频了，直到他灵光一闪，想到了YouTube。忽然之间就有数百万充满个人观点的视频以供分析，这些例子涵盖的话题包罗万象，从美容乳液到棒球，而且都是免费的。忘掉那些不自然且呆板的采访吧，“最棒的是，即使采访环境有些嘈杂，在摄像机面前，所有人都是如此直接地描述了自己的感受和自己的喜好。”Morency解释道。

Morency是美国南加州大学科技创新技术学院的一名科学家，主要工作是教计算机识别和理解人类传达感情的方式，对他而言，YouTube上的宝贵资源不仅仅为他的学生提供了巨大的数据资料，同时也具有提升日益增长的观点挖掘产业的潜力，这远远领先于对只有文字的亚马逊产品评论和Facebook状态更新的深入研究。 “通过集中精力研究在线视频，我们在这个领域领先了一步，因为在线视频可以提供语言和非语言的交流线索，而不仅仅是话语。”Morency说道。

美国南加州大学教授 Morency

为了进行研究，Morency和他的同事们对上百个来自Youtube的视频进行了梳理，这些视频充满了各种抱怨和诽谤，比方其中包括来自20个愤世嫉俗者各种各样的抱怨吐槽，从小型鸟类到火气大的司机等等。Morency将一份具有50个视频资料分析结果的验证类数据资料输入自己开发的计算机程序中进行分析，该程序可以将说话人的语言、说话模式和面部表情等以图像的形式进行覆盖，用以判断说话者想要表达观点的类型。

“这个对样本分析的小方法胜过单独的文本分析。”Morency说道，“因此这种方法可以提供交流沟通中哪怕是最不明显细枝末节的线索。”Morency还发现，除了明显愉悦时，人们在自己的观点得到认同的时候会更多地看着镜头，同时声调也会变得更高。当人们持中立态度的时候，人们说话更容易停顿。“眼中的微笑最为真实。”他补充道，“在很多例子中会出现一个完美的表情，但是如果这个表情消失的很快，那么有可能就不是真实的。”

对人造情感的检测和分辨带来了更多的启示和思考，Fast Company邀请Morency对《甜蜜布朗》新闻录影带的片段进行分析。她对从失火公寓中艰难逃生戏剧般的讲述不仅让摄影师为之动容，同时也引发了无数网民的观看（目前已有三百七十万浏览量，这个数字还在继续上升），随后这一事件演变成了使用电子合声器而走红的互联网快速传播事件。但是布朗当时真的是没有穿鞋而逃命的吗?

Morency承认自己并非是一个欺骗高手，不过从他的角度来说，布朗女士是一个老练的(或者是天生的)讲故事高手。 “她从一开始就牢牢抓住了采访者的注意力，接着通过不断的摇头和扬眉毛强调自己故事的重要线索，并且这些身体语言和她的话语很一致。同时她通过时不时的具有目的性的微笑将这个本该是难过的故事讲述成了一个有趣的故事。”Morency说他需要亲自和她见面会谈才能做出更准确的判断，不过根据另一份来自 KFOR的报告表明Morency的看法是对的，布朗女士确实是这样的人。

Morency将他的模型带到了在西班牙举行的多模态交互国际会议，之后宣布他已经将自己的数据资料库扩展到包含了接近500个视频的规模，并将在今年年底宣布从这个更大的样本库得出的分析结果。

除了学术界，Morency的发现还吸引了YouTube和谷歌高层人员的兴趣，目前Morency正在准备一份和搜索引擎巨头合作的提议，并重申是出于“科学研究和创造技术”的动机。一旦提议得到许可，那么公司将金额他的团队一起工作，“用行动影响世界”。

除了研究内容让热爱科学的Morency心潮澎湃以外，他还看到了在各领域中巨大的实际应用，包括为心理学家提供分析解释行为的新工具，以及为企业和消费者提供更好的众包方式等等。“当人们想要尝试一家新餐馆或者看一部电影的时候，多多少少都会受到网络上人们的影响。”他解释道：“增加视频分析可以将最真实的意见和看法放到首位，不然用户看到的不仅是通过关键词还有正面负面评价得到的网络搜索结果。”

企业测试版本最迟也会在3年内完成，不过科技创新技术学院已经在他们的虚拟人研究中运用了该技术，该技术可以改进虚拟人和真实人的交流方式。

作为法裔加拿大人，Morency同时希望研究非英语讲话者的视频。

从西班牙语入手，Morency研究了基于不同文化背景下的来自不同国家的人们是如何表达观点的，“我们可以将视频结合语境进行分析，同时对视频进行分类，然后找寻天生行为中的差异。”跨文化领导训练，有人愿意参加吗？

说道领导力和协同工作，Morency的工作也帮助学生在集体中认清具有领导力的人，同时也分辨学生是融入其中、充满困惑还是不断学习。评估这些不确定因素可以创造更好的培训系统以便在需要的时候提供更多建议和积极的影响，Morency相信这项技术能够将家庭作业更加互动同时鼓励学生之间的合作。

“我们正在培养下一代，”Morency说道：“好的学校应该尽早在课程体系中安排类似的课程，我非常希望和更多的公司合作以便将其付诸实践。

更多相关新闻请关注：21ic计算机与外设频道