三花快讯 · 2024, 5月12日

AniTalker 肖像生成谈话动画

AniTalker 将单一静态肖像和输入音频转换成自然流畅的谈话视频动画,同时能产生不同的面部表情和姿势。

AniTalker 将单一静态肖像和输入音频转换成自然流畅的谈话视频动画,同时能产生不同的面部表情和姿势。

通过两种自监督学习策略增强运动描述:

  • 从同一身份的源帧重建目标视频帧,学习微妙的运动表示。
  • 使用度量学习开发身份编码器,同时积极最小化身份和运动编码器之间的互信息。

商业转载请联系三花微信公众号获得授权,非商业转载请注明本文出处及文章链接,您可以自由地在任何媒体以任何形式复制和分发作品,也可以修改和创作,但是分发衍生作品时必须采用相同的许可协议。

本文采用 CC BY-NC-SA 4.0 - 非商业性使用 - 相同方式共享 4.0 国际 进行许可。