FantasyTalking是由Fantasy-AMAP团队开发的一款开源工具，专注于通过人工智能技术生成高度逼真的说话肖像视频。该项目基于先进的视频扩散模型Wan2.1，结合Wav2Vec音频编码器和专用模型权重，能够根据输入的图像和音频自动生成唇部动作和面部表情完美同步的说话视频。
Its main functions include:
- 生成真实感说话视频，实现音频与唇部动作的精准同步
- 支持多种视角生成（特写/半身/全身）和多风格支持（真实人物/卡通形象）
- 通过提示词控制角色表情和肢体动作
- 支持720P高分辨率输出
- 特有的面部专注交叉注意力模块确保面部特征一致性
- 运动强度调制模块控制表情和动作幅度
这项技术可广泛应用于虚拟主播、动画制作、教育培训等多个领域。
This answer comes from the articleFantasyTalking: an open-source tool for generating realistic speaking portraitsThe
May not be reproduced without permission:AI productivity tools " 什么是FantasyTalking？它能实现哪些主要功能？
English 
简体中文 
日本語 
Deutsch 
Português do Brasil