【科技新闻】 – 在AI技术日益成熟与普及的当下，一项由腾讯与香港城市大学联合研发的AI框架LVCD（Large Video Color Diffusion）引起了业界的广泛关注。该框架旨在为动漫视频线稿自动上色，通过其先进的视频扩散模型，LVCD能够处理整个视频序列，确保每一帧的颜色连贯，即使在角色快速移动时也能保持颜色一致性。LVCD的推出不仅提高了动画制作的效率，也展示了AI在艺术创作领域的巨大潜力。
LVCD的主要功能
LVCD的亮点功能包括自动上色、长视频生成、大动作场景处理以及Sketch-guided ControlNet。自动上色功能能够将黑白线稿转化为彩色动画视频，大幅提高了动画制作的效率。长视频生成能力则突破了模型固定长度的限制，支持生成长时间的视频，适合复杂的动画序列制作。在处理大动作场景时，LVCD能够确保颜色一致性，避免色彩错位，提升了动画的质量和观赏性。
技术原理
LVCD的核心技术包括视频扩散框架、Sketch-guided ControlNet、Reference Attention机制以及顺序采样方案。视频扩散框架通过预训练模型，逐步去噪，从噪声数据中恢复出清晰的视频帧。Sketch-guided ControlNet作为一种扩展的控制网络，确保生成的视频内容与线稿的结构和布局相匹配。Reference Attention机制则在生成过程中参考特定帧，传递颜色和其他视觉特征到其他帧，对于保持视频中快速运动场景的颜色一致性至关重要。顺序采样方案结合重叠混合模块和前参考注意力，使模型能生成超出原始固定长度限制的长视频，同时保持时间上的连贯性。
应用场景
LVCD的应用场景广泛，不仅能够应用于动漫制作，提高动画制作效率，减少人工上色的时间和成本，还可以在游戏开发中快速生成游戏角色和场景的彩色动画，加速游戏的视觉效果实现。在影视行业，LVCD能为动画电影、短片和系列剧的制作提供高质量的线稿上色解决方案。此外，在教育与培训领域，LVCD可以作为教学工具，帮助学生理解线稿到动画的转换过程，提升创作能力。艺术家同样可以利用LVCD将自己的手绘线稿快速转化为彩色作品，激发创作灵感。
项目地址与更多信息
LVCD的项目官网为：luckyhzt.github.io/lvcd，技术论文可在arXiv上找到：https://arxiv.org/pdf/2409.12960。演示链接为：https://luckyhzt.github.io/lvcd/supplementary/supplementary.html。LVCD的推出标志着AI技术在动画制作领域的又一重要进展，其在提高创作效率和艺术表现力方面展现出的潜力，无疑将为相关行业带来深远影响。
Views: 0