研究成果
每一个新动态都是尊龙凯时人生就是博向前迈进的新脚步

尊龙凯时人生就是博我校计算机学院(软件学院)刘瑞研究员团队最新研究论文被人工智能

2024-01-20

  对话式语音合成(Conversational Speech Synthesisღ★★★,CSS)旨在在对话环境中以适当的语调尊龙凯时ღ★★★。ღ★★★、语气和情感进行语音表达ღ★★★。然而ღ★★★,由于情感对话语音数据集的缺乏和情感建模的困难尊龙凯时人生就是博尊龙凯时人生就是博ღ★★★,之前的研究对于情感理解和情感表达问题的研究还不够深入ღ★★★。我校计算机学院(软件学院)刘瑞研究员团队联合字节跳动(新加坡)公司研究团队ღ★★★,提出了一种新颖的情感对话语音合成模型ღ★★★,名为ECSS尊龙凯时人生就是博ღ★★★,显著提升了对话场景下合成语音的自然度以及情感表现力ღ★★★。

  首先尊龙凯时人生就是博ღ★★★,对于对话情感理解ღ★★★,引入了一种基于异构图的情感上下文建模机制星野亚希星野亚希ღ★★★,以对话文本尊龙凯时人生就是博ღ★★★、语音ღ★★★、说话人身份星野亚希星野亚希尊龙凯时app下载ღ★★★,ღ★★★、情感类别和情感强度等多源对话历史知识作为输入ღ★★★,对对话上下文进行建模自动化前景ღ★★★!ღ★★★,以准确的理解对话上下文中的情感线索星野亚希ღ★★★。其次AI人工应用ღ★★★,自动驾驶ღ★★★。ღ★★★,对于对话情感表达ღ★★★,提出基于对比学习的情感渲染器模块ღ★★★,以准确推断目标话语的情感风格星野亚希ღ★★★,从而实现准确的对话情感渲染ღ★★★。实验结果表明ღ★★★,我们的模型在对话语音自然度和情感表现力方面明显优于基线模型ღ★★★,为对话式人工智能的发展提供了新的思路星野亚希星野亚希尊龙凯时人生就是博ღ★★★。

  文章作者包括ღ★★★:刘瑞研究员(第一作者)ღ★★★,2023级博士生胡一帆(导师外第一作者)ღ★★★,以及新加坡字节跳动公司青年科学家任意ღ★★★。这项研究得到了国家自然科学基金青年基金尊龙凯时人生就是博ღ★★★、内蒙古自治区“草原英才”工程项目ღ★★★、自治区留学人员创新创业启动支持计划ღ★★★、广东省数字孪生人重点实验室(华南理工大学)开放课题ღ★★★、内蒙古大学骏马计划高层次人才引进项目ღ★★★、内蒙古自治区本级引进高层次人才科研支持等项目的支持ღ★★★。