新的 AI 检测到您的 Zoom 通话何时会变得尴尬

发布时间:2025年3月17日    来源:szf
新的 AI 检测到您的 Zoom 通话何时会变得尴尬

快速阅读: 《AZoAI》消息,纽约大学团队研发了一种AI模型,可通过分析视频会议中的音频和视频信号,预测对话流畅度和满意度。研究显示,“尴尬的沉默”比混乱的对话更影响会议质量。此技术有望改善虚拟会议体验。

纽约大学 2025年3月16日

一种新的人工智能模型能预测你的Zoom会议何时可能出现问题——在尴尬的沉默和笨拙的对话发生之前就察觉到这些问题,从而让未来的虚拟会议更加顺畅、自然,甚至让人感到愉悦。

**研究:多模态机器学习能够预测视频会议的流畅性和满意度**
图片来源:Ground Picture / Shutterstock

自新冠疫情爆发以来,工作人员花费了无数小时在视频会议上,如今这已成为办公室生活的一部分。随着越来越多的人远程工作和生活,Zoom、微软Teams、苹果FaceTime、Slack和Discord等视频会议平台也成为家人和朋友社交的重要组成部分。有些交流比其他交流更愉快且更流畅,这引发了关于如何改进在线会议方式以提高效率和工作满意度的问题。纽约大学的一组科学家开发了一种AI模型,该模型能够识别视频会议中的人类行为方面,例如对话轮次转换和面部动作,并实时预测这些会议是否被视为愉快、流畅、舒适和自然,而不是由于笨拙的轮次转换而显得尴尬。

“我们的机器学习模型通过解析视频会议基本音频和视频信号中的细微模式,揭示了高层次社会互动的复杂动态,”该论文的主要作者、纽约大学心理学系博士后研究员张安德(Andrew Chang)说道,该论文发表于IEEE国际声学、语音与信号处理会议(ICASSP)。

“这一突破代表了朝着动态增强视频会议体验迈出的重要一步,展示出如何在问题出现之前避免对话偏离轨道。”

为了开发这个机器学习模型,研究者利用超过100人小时的Zoom会议录音作为训练数据,输入数据包括语音、面部表情及肢体动作。随后,该模型识别出对话变得不流畅或不愉快的关键时刻。更具体地说,科学家们训练模型区分破坏虚拟会议流畅性的不流畅时刻与更流畅的交流。值得注意的是,该模型认为,在轮次转换中出现异常长时间空白的对话,相比参与者互相打断的对话,显得更不流畅且不愉快。换句话说,“尴尬的沉默”比热烈辩论中混乱但充满热情的动态更具破坏性。

为验证模型评估的准确性,一个由300多名人类评委组成的独立小组观看了相同的视频会议片段样本,对对话的流畅度以及会议参与者对交流的喜欢程度进行了评分。总体而言,人类评分者的打分与机器学习模型的评估结果高度吻合。

“视频会议如今已成为我们生活中不可或缺的一部分,因此,理解和解决其负面时刻对于促进更好的人际沟通和联系至关重要,同时也对于提升会议效率和员工的工作满意度意义重大,”纽约大学心理学系访问学者达斯汀·弗里曼(Dustin Freeman)说道,他是该论文的资深作者。

“通过预测对话破裂的时刻,这项工作可以为视频会议系统提供途径,通过隐式调整信号延迟来适应需求或显式向用户提供提示来缓解这些破裂并使对话更加顺畅,这是我们当前正在试验的内容。”

该论文的其他作者包括当时在纽约大学坦登工程学院攻读研究生的维斯瓦德鲁特·阿克贾鲁(Viswadruth Akkaraju)和雷·麦考尔·科格利阿诺(Ray McFadden Cogliano),纽约大学心理学系访问学者达斯汀·弗里曼(Dustin Freeman),以及纽约大学心理学系教授大卫·波佩尔(David Poeppel),同时他也是德国慕尼黑马克思普朗克学会的成员。

该研究部分得到了纽约大学人类健康发现研究基金、美国国立卫生研究院下属的国家耳聋及其他交流障碍研究所,以及利昂·列维神经科学奖学金的资助。

来源:纽约大学
期刊参考:A. Chang, V. Akkaraju, R. M. Cogliano, D. Poeppel and D. Freeman, “多模态机器学习可预测视频会议流畅性和享受度”, ICASSP 2025 – 2025 IEEE国际声学、语音与信号处理会议(ICASSP),海得拉巴,印度,2025年,第1-5页,doi: 10.1109/ICASSP49660.2025.10889480,https://ieeexplore.ieee.org/document/10889480

(以上内容均由Ai生成)

你可能还想读

本周科技大事件:谷歌发布Pixel 10,Gamescom揭晓重磅游戏

本周科技大事件:谷歌发布Pixel 10,Gamescom揭晓重磅游戏

快速阅读: 谷歌推出Pixel 10手机及Pixel Watch 4,新增卫星紧急通讯、可更换电池和屏幕、抬手通话等功能,屏幕亮度达3000尼特,还将与斯蒂芬·库里合作推出AI健康和健身教练服务。 谷歌本周在“由谷歌制造”活动中推出了Pix […]

发布时间:2025年8月23日
SK海力士凭借HBM激增首次超越三星,领跑全球内存市场

SK海力士凭借HBM激增首次超越三星,领跑全球内存市场

快速阅读: 据《《韩国先驱报》》称,7月20日,SK海力士首登全球内存芯片市场榜首,受益于AI产品和HBM芯片领先地位。其季度利润达9.2万亿韩元,远超三星。 据韩联社报道,7月20日,韩国京畿道伊川,SK海力士首次登上全球内存芯片市场榜首 […]

发布时间:2025年8月1日
STAN 从谷歌、万代南梦宫和其他公司筹集了 850 万美元

STAN 从谷歌、万代南梦宫和其他公司筹集了 850 万美元

快速阅读: 据《印度教业务线》称,STAN获850万美元融资,由万代南梦宫等机构投资。计划拓展印度市场,加强AI功能与创作者工具。平台用户超2500万,专注移动端社交游戏。 记者获悉,8月1日,社交游戏平台STAN宣布完成850万美元的新一 […]

发布时间:2025年8月1日
“这改变了一切”:谷歌的人工智能模式迫使品牌重新考虑搜索策略

“这改变了一切”:谷歌的人工智能模式迫使品牌重新考虑搜索策略

快速阅读: 据《营销周》称,谷歌推出AI搜索模式,减少外部链接,提升对话式回答。品牌需调整策略,重视内容质量与品牌权威。此变化影响营销方式,竞争加剧。 据谷歌官方消息,7月29日,谷歌在英国推出了基于人工智能的搜索功能AI模式,此前该功能已 […]

发布时间:2025年8月1日
在 Android 上用更智能的应用程序替换 Google Assistant

在 Android 上用更智能的应用程序替换 Google Assistant

快速阅读: 据《电话竞技场》称,据报道,用户可从Google Play下载Meta AI应用,安装后需检查版本是否为230.0.0.36.164或更高。操作方法:进入设置,选择应用,查看Meta AI信息页底部的版本号。 据媒体报道,用户现 […]

发布时间:2025年8月1日
Xero 的英国董事总经理回击人工智能正在抢走会计工作的说法

Xero 的英国董事总经理回击人工智能正在抢走会计工作的说法

快速阅读: 据《UKTN(英国科技新闻)》称,英国科技媒体UKTN报道,Xero英国总经理凯特·海沃德表示,会计行业无需过度担忧AI自动化。尽管四大事务所裁员,但Xero仍持续投资AI技术,提升效率与服务质量。 据英国科技新闻网站UKTN报 […]

发布时间:2025年8月1日
Reddit 计划在搜索引擎市场大力推动人工智能与谷歌竞争:报告

Reddit 计划在搜索引擎市场大力推动人工智能与谷歌竞争:报告

快速阅读: 据《商业标准》称,Reddit CEO表示,公司正将平台转型为搜索引擎,整合AI功能,提升用户体验。Reddit Answers用户已超600万,计划全球推广。 据《The Verge》报道,7月11日,Reddit首席执行官史 […]

发布时间:2025年8月1日
Meta 超出预期,为“个人超级智能”做准备

Meta 超出预期,为“个人超级智能”做准备

快速阅读: 据《RCR无线》称,Meta二季度营收475.2亿美元,净利润183亿美元。CEO扎克伯格称将打造个人超级智能,但数据中心扩容遇挑战。公司计划2025年支出达1140-1180亿美元。 据媒体报道,7月25日,美国加州,社交媒体 […]

发布时间:2025年8月1日