Oculus发布的Oculus Lipsync，它是一款优秀的唇同步技术支持组件，可以通过任何口语来实时驱动面部动画。Oculus Lipsync是一种Unity集成，将语音内容同步至虚拟角色的唇部动作。提供离线和实时分析音频输入两个部分，Oculus Lipsync选定了15个视觉音素sil，PP，FF，TH，DD，kk，CH，SS，nn，RR，aa，E，ih，oh和ou。

在Unity中基于语音的唇形同步实现 使用4个混合形状。可以使用麦克风输入和音频片段。适用于3D模型。它不是完美或非常精确的，但对于卡通风格的角色而言效果相当不错。 只提供了2D示例，但相同的方法和设置也可以用于3D模型。

面部表情动作迁移+唇形同步Jupyter源码(需安装docker，附演示视频)+操作说明.zip 面部表情动作迁移+唇形同步Jupyter源码(需安装docker，附演示视频)+操作说明.zip 面部表情动作迁移+唇形同步Jupyter源码(需安装docker，附演示视频)+操作说明.zip 假设你已经熟悉 docker 并且已经正确安装 docker，执行以下步骤，开箱即用(浏览器输入：http://localhost:8899) # 1. pull image & run container ./start_dev.sh # 2. 进入 container 运行时环境 docker exec -it dev bash # 3. 启动 notebook ./start_jupyterlab.sh 在浏览器中打开 jupyterlab http://localhost:8899

本文件是 开源项目 https://github.com/Rudrabha/Wav2Lip 唇形同步的例子 所需的 模型文件。 作者放在 google 网盘里， 国内下载很不方便。 于是我提供了一份在这儿。