唇读技术在角色动画交互中的研究与应用
2017-04-28朱妹丽罗江林王青青
数据与计算发展前沿 2017年5期
朱妹丽,罗江林,王青青
1. 吉林动画学院科研与技术创新中心,吉林 长春 130000
2. 吉林动画学院,吉林 长春 130000
3. 长春理工大学 光电信息学院,吉林 长春 130000
前言
在三维角色动画制作中,面部动画最为关键,只有当表情、口型、声音三者一致时,角色动画看起来才会更加真实自然。在欧美的动画中,为了做到表情、口型、声音的对应,传统的方法先请配音演员录音,然后让动画师捕捉配音演员说话时的表情神采与口型,并以此设定角色形象。随着计算机图形图像技术的快速发展,可以通过建立标准口型发音系统的方法能来创作口型动画。而在国内,则基本上采用关键帧制作法,只把台词中夸张的口型部分做出来,其他部分则含糊带过,这使得国内动画中的角色口型与台词的契合度很低,角色面部动画生。
目前,动作捕捉技术日臻成熟,通过 Marker (标记点) 实时捕捉嘴部肌肉的运动轨迹,能够让角色的口型与配音匹配得更加完美。但是,动作捕捉系统[1]的价格通常较为昂贵,并且后续数据的处理与计算繁杂。在本文中,为了能够让动画制作人员快捷、轻松的制作出高品质的口型动画,本文提出了一种基于唇读技术的交互式角色面部动画制作方法的设计方案,借助唇读技术,实现与角色的实时交互,实现口型与配音的一致。

图1 唇读技术与其应用Fig. 1 Application of lip-reading
1 唇读技术
唇读 (lip-reading/speech-reading),是指通过观察说话者的口型变化,“读出”或“部分读出”其所说的内容[2]。唇动作为一种重要的视觉信息通道,可作为语音的理解源,有着人的情感状况和所要表达的意义。……
登录APP查看全文
