北京 – 2月18日，中国人工智能领域迎来重要突破，昆仑万维正式开源国内首个面向AI短剧创作的视频生成模型SkyReels-V1，以及中国首个SOTA（State-of-the-Art，即当前最佳）级别基于视频基座模型的表情动作可控算法SkyReels-A1。这一举措被业界视为AI短剧创作领域的一次革命，有望大幅降低短剧制作门槛，加速内容生产。
开源地址：
- SkyReels-V1：https://github.com/SkyworkAI/SkyReels-V1
- SkyReels-A1：https://github.com/SkyworkAI/SkyReels-A1
- 技术报告：https://skyworkai.github.io/skyreels-a1.github.io/report.pdf
- SkyReels 官方地址：skyreels.ai
打破行业壁垒，普惠AI短剧创作
面对当前全球AI视频生成模型普遍存在的“不开源、用不到、费用高、不好用”等问题，昆仑万维此次开源行动无疑是一剂强心针。SkyReels-V1和SkyReels-A1的开源，将技术成果回馈给开源社区和AIGC（AI Generated Content）用户，降低了短剧创作的技术门槛和成本，让更多人有机会参与到AI短剧的创作中来。昆仑万维方面表示，这仅仅是其在AI视频方向开源道路上的起点，未来还将陆续开源更多面向AI短剧的优秀研究成果。
技术创新：精细化表情动作控制，电影级光影美学
SkyReels-V1的核心优势在于其“Human-Centric”的设计理念。针对AI短剧对人物表情和肢体动作精细控制的迫切需求，该模型不仅对表演细节进行了深度打标，还对情绪、场景、表演诉求等因素进行了处理，并利用千万级别的高质量好莱坞级别数据进行训练微调。
- 影视级人物微表情表演生成： SkyReels-V1支持33种细腻的人物表情与400+种自然动作组合，能够高度还原真人情感表达，例如大笑、怒吼、惊讶、哭泣等。即使在大幅度肢体动作下，微表情也能完美贴合人物表演。
- 电影级光影美学： 基于好莱坞级的高质量影视数据训练，SkyReels-V1生成的每一帧画面在构图、演员站位、相机角度等方面都具备电影级的质感。无论是单人镜头表演细节，还是多人构图，都能实现精准的表情控制和高质感画面。
- 文生视频与图生视频： SkyReels-V1不仅支持文生视频，还支持图生视频，是开源视频生成模型中参数最大的支持图生视频的模型，在同等分辨率下各项指标实现开源SOTA。这意味着用户可以通过文字描述或上传图片，快速生成高质量的短剧视频片段。
背后的技术支撑：高质量数据与人物智能解析系统
SkyReels-V1之所以能够实现如此卓越的性能，离不开昆仑万维SkyReels团队在数据和技术上的深厚积累。
- 千万级高质量数据： 团队基于自研的高质量数据清洗和人工标注管线，构建了千万级的高质量电影、电视剧和纪录片数据，为模型的训练提供了坚实的基础。
- “Human-Centric”视频理解多模态大模型： 依托团队自研的“Human-Centric”视频理解多模态大模型，大幅提升了视频中人物相关的理解能力，尤其是自研的人物智能解析系统，能够实现：
- 影视化表情识别体系： 能够理解11种针对影视戏剧中的人物表情，如不屑、不耐烦、无助、厌恶等。
- 人物空间位置感知： 基于人体三维重建技术，实现对视频中多人的空间相互关系进行精准感知。
商业前景：AI短剧创作平台SkyReels的未来
昆仑万维在AI视频和短剧生产形式上的布局早已展开。2024年8月上线的AI短剧创作平台SkyReels，旨在让用户以更低成本体验线上拍剧，利用AI能力解决传统短剧内容供给的难题。SkyReels能够助力解决传统短剧制作流程中面临的挑战，如线下拍剧流程复杂、耗费人力多、制作成本贵、周期长等。此次SkyReels-V1和SkyReels-A1的开源，无疑将为SkyReels平台注入更强大的技术动力，加速其商业化进程。
行业影响与展望
昆仑万维此次开源行动，不仅为AI短剧创作领域带来了新的技术工具，也为整个AIGC行业树立了开放合作的榜样。随着技术的不断进步和应用场景的不断拓展，AI短剧有望成为一种全新的内容生产和消费模式，为用户带来更加丰富和个性化的娱乐体验。未来，我们期待看到更多企业和开发者加入到AI短剧的创作中来，共同推动这一新兴产业的蓬勃发展。
参考文献：
- SkyReels-V1 GitHub 仓库: https://github.com/SkyworkAI/SkyReels-V1
- SkyReels-A1 GitHub 仓库: https://github.com/SkyworkAI/SkyReels-A1
- SkyReels-A1 技术报告: https://skyworkai.github.io/skyreels-a1.github.io/report.pdf
- SkyReels 官方网站: skyreels.ai
Views: 0