LivePortrait
高效的人像动画生成工具
- 从静态图像生成不同风格（现实、油画、雕塑、3D渲染）的人像动画
- 通过Kling生成的源视频进行人像视频编辑
- 基于给定的标量控制眼睛和嘴唇的开合程度
- 通过微调动物数据，实现对猫、狗和熊猫的精确驱动
- 在RTX 4090 GPU上以PyTorch实现12.8ms的生成速度
产品详情
LivePortrait是一个基于隐式关键点框架的人像动画生成模型，它通过使用单一源图像作为外观参考，并从驱动视频、音频、文本或生成中获取动作（如面部表情和头部姿势），来合成逼真的视频。该模型不仅在计算效率和可控性之间取得了有效平衡，而且通过扩展训练数据、采用混合图像-视频训练策略、升级网络架构以及设计更好的运动转换和优化目标，显著提高了生成质量和泛化能力。
