上传者: 38722193
|
上传时间: 2025-07-08 16:14:49
|
文件大小: 286KB
|
文件类型: PDF
根据传统语音唇动分析模型容易忽略唇动帧间时变信息从而影响一致性判别结果的问题,提出一种基于平移不变学习字典的一致性判定方法。该方法将平移不变稀疏表示约会语音唇动一致性分析,通过音视频联合字典学习算法训练出时空平移不变的音视频字典,并采用新的数据映射方式对学习算法中的稀疏编码部分进行改进;利用字典中的音视频联合原子作为描述不同音节或短语最佳时音频与唇形同步变化关系的模板,最后根据这种模板编制出语音唇动一致性分数判定指标。对四类音视频替代数据的实验结果表明:本方法与传统统计类方法索引,对于少音节语料,总体等错误率(EER)平均从23.6%下降到11.3%;对于多音节语句,总体EER平均从22.1%下降到15.9%。