AniDoc
动画创作辅助工具，简化线稿上色流程。
0
- 自动化线稿上色：利用视频扩散模型自动化线稿上色过程。
- 显式对应机制：通过注入模块将参考图像的颜色信息对齐到输入草图，增强颜色准确性。
- 两阶段训练策略：学习关键帧之间的插值，减少绘制中间帧的需求。
- 二值化草图和数据增强：提高训练稳定性，改善上色效果。
- 支持不同姿势和比例的一致性上色：即使在不同视频剪辑中，也能保持一致的颜色效果。
- 适应不同参考图像的细微差别：即使同一草图序列使用不同的参考图像，也能保持角色身份的同时适应不同的风格。
- 支持稀疏草图的动画制作：使用起始和结束草图，有效生成平滑连贯的动画。
- 多角色自动识别和上色：即使参考图像包含多个角色，也能自动区分并正确上色。
- 不同背景风格的参考图像：能够将参考图像的风格转移到生成的背景中。
产品详情
AniDoc是一个自动化线稿上色模型，旨在简化动画制作工作流程并降低劳动成本。该模型利用视频扩散模型的先验知识，通过显式对应机制和注入模块将参考图像的颜色信息对齐到输入草图中，提高颜色准确性。采用两阶段训练策略，减少绘制中间帧的需求。通过二值化草图和数据增强技术，提高训练稳定性。AniDoc在定量和定性结果上均表现出色，为自动线稿视频上色提供了有效的解决方案，提高了动画生产的效率。
