新出的一款唇形同步工具:KeySync,核心能力是解决了表情泄漏以及遮挡问题,唇部动作不会受到原始视频人物表情,或是嘴部被遮挡而影响同步效果

能处理高分辨率视频,可以准确的把生成的唇部动作与新音频对齐,避免音画不同步
它的两阶段框架设计,能使时间连贯性保持的较好,使得嘴型变化自然流畅
可以通过调整参数控制动画的生成过程,比如指定遮挡物体的位置
https://github.com/antonibigata/keysync