针对汉语的发音习惯以及语音可视化技术中对口型动画自然、连续的要求，提出了一种基于肌肉模型与协同发音模型的与语音保持同步的口型动画的方法。首先，根据汉语发音时的口型视位特征将声、韵母音素归类，并用数据映射的方式合成与之对应的口型关键帧。通过分析输入的文本信息，合成与语音保持同步的三维人脸口型动画。为了解决汉语发音习惯的问题，设计了一种基于微分几何学描述的协同发音建模的方法，该方法通过分析相邻音子间视素的影响权重，可以产生符合汉语发音习惯的口型动画。最后，通过实验对比和分析，该方法产生的口型动画更为逼真，且符合汉语发音的习惯。
2022-09-01 18:29:13
986KB
1
LipSync是什么？
LipSync是一个基于Unity的独立，轻量化口型匹配解决方案。它可以帮助开发者在Unityy上，用相对少的时间效应实现效果相对令人满意的“口型匹配”功能。的人物模型，口型动画以及语音资源，实现即时的口型匹配功能。您只需要告诉LipSync语音数据的来源，带有口型BlendShape的目标对象以及BlendShape属性名，并进行简单的设置，就能够让你的人物转换语音的播放动起他/她/它的嘴巴。
不过LipSync不是万能的。为了能够愉快而有效地使用LipSync，你需要知道它目前做得到的事情有：
实时地分析语音数据，运用语音识别的一些理论，识别出时间时间帧中这段语音
2022-02-25 14:04:09
20.99MB
1