2025云栖大会:⻁鲸⽂娱AI影视⼤模型已覆盖创意、拍摄、后期全流程
【环球网科技报道 记者 李文瑶】“⻁鲸⽂娱与通义万相协同研发的 AI 影视⼤模型系列,已覆盖‘前期创意—中期拍摄—后期制作’全流程,助⼒主创团队推出更优质内容。”9 ⽉ 25 ⽇,在杭州举办的云栖⼤会 AIGC 创新发展论坛上,⻁鲸⽂娱集团 AI影视⼯业化算法负责⼈镜⼀发表《影视产业中的⼤模型应⽤探索》演讲,⾸次对外介绍⽬前⻁鲸⽂娱在 AI影视⼤模型中的技术进展。
据了解, ⻁鲸⽂娱的这套 AI 影视⼤模型,包括运镜模型 CameraWeaver、⽆穿戴 AI ⾯部动捕技术、AI 表情增强等技术上的突破,能够帮助影视主创团队在创意阶段快速落地分镜构想、拍摄期间⾼效⽣成 3D 场景、动漫后期制作⾃动模拟优化微表情。

在影视⾏业的内容创意阶段,主创团队通常需要⽤语⾔描述结合⼿绘的⽅式将预想中的场景画⾯呈现出来,往往耗费较多时间。“尽管⽬前市⾯上已有多个⽂⽣图模型能够相对精细地⽣成图⽚,但在主创更关注的景别、构图视⻆等⽅⾯仍⽆法达到要求。”镜⼀说,针对这⼀难题,⻁鲸⽂娱研发的“影视级⽂⽣图”⼤模型,区别于市⾯通⽤模型追求“视觉发散”,在影视级要求的精准控制上做了针对性调试,精准解决了主创“创意画⾯难落地”的⾏业痛点。
“我们希望模型能够精准执⾏主创团队的⽂字指令,所以对模型在景别、构图、视⻆、空间关系等维度设置了严苛的标准,从⽽精准还原创作意图,形成帮助主创的可视化参考,⼤幅提升前期沟通与分镜效率。“镜⼀表示。
镜⼀介绍,在中期拍摄阶段,⻁鲸⽂娱研发了图⽣ 3D 场景技术模型,可⽀持快速⽣成多机位分镜参考图。主创若想查看其他视⻆的分镜效果,⽆需重新绘制 2D 分镜或搭建 3D 场景,模型能基于单张图⽚重构3D 空间,同步⽣成多视⻆画⾯,还⽀持任意⻆度推拉摇移运镜,帮助主创快速确认空间布局。
相较传统⽅法需数周搭建的 UE 虚拟场景,该技术模型 2 分钟内即可⽣成⾼精度 3D 空间场景,实现数百倍效率跃升,且空间透视零误差,满⾜影视⼯业严苛标准,⽬前已应⽤于内部项⽬的分镜与虚拟拍摄预演协同。镜⼀透露,此前在内部测试时,该模型在 WorldScore 的分数已经成为榜单第⼀。
在后期层⾯,⻁鲸⽂娱针对动漫还推出了⽆穿戴⾯捕+AI 精雕创新⽅案,弥补了⾯部设备⽆法捕捉微表情的缺陷。该方案通过⾃研表情⽣成模型,能够精准还原补全演员微表情与⼝型细节。 “我们把过去可能需要动画师花费⼏周⼿ K(动画师⼿动调整关键帧)的⼯作,升级为通过表情⽣成模型⾃动⽣成微表情,⽽且质量达到了影视级标准。”镜⼀介绍,有了该模型之后,⼿ K 修帧效率⼤幅提⾼,并且该技术已在今年上半年成功应⽤于项⽬中,成为提升微表情精度与制作效率的关键⼯具。
“AI 不是替代创作者,⽽是解放创作者。”镜⼀表示,“⻁鲸⽂娱的⽬标,是让创作者从繁琐技术中抽⾝,专注故事本⾝——正如计算器没有替代会计,AI 也不会替代导演,⽽是将成为创作者的好帮⼿,共同为观众打造更优质的内容。”