索尼电影发布了一支由AI制作的水墨风宣传片《毒液：最后一舞》，引发业内外热议。
02该宣传片由导演杨晟与北京生数科技有限公司产品总监张旭东合作完成，利用AI模型Vidu进行创作。
03Vidu是国内首个长时长、高一致性、高动态性的视频大模型，可支持文生视频、图生视频等功能。
04事实上，Vidu在宣传片制作的步骤中，节省了近90%的后期投入，提高了工作效率和产出效率。
05未来，AI有望在更多领域发挥作用，如绿幕特效、视频补全等，但现阶段仍不能完全替代人类的创造性劳动。
这是好莱坞“五大”首次在华拥抱AI，不仅自破了曾经公开AI的宣言，而且扶持了本土创作者和技术公司，是全球头部电影公司合作国内科技文化人才和成果的一次成功尝试。
随着一点墨迹晕染整个屏幕，毒液以自由灵动之姿变幻为战马、鱼、鹤等形态，肆意穿梭于海陆空，更能化身“毒液孔明灯”露出顽皮笑容，最后以本姿态落在中式楼阁的屋顶上，傲视周围。
10月23日，正值《毒液：最后一舞》登陆全国院线，索尼电影官微发布了一支由AI制作的水墨风宣传片，引发了业内外的剧烈热议。
一方面在内容画面维度，众人惊叹于AI创作的精细度和丝滑度，另一方面在行业趋势维度，这是
，邀请他们各自从内容和技术的角度，分享了宣传片的制作的步骤、相关难点和所用的AI模型Vidu，以及AI应用于影视行业的趋势观点。
最开始，索尼的要求是制作一支足够具有东方元素和中国特色的视频，但是不能透露太多剧情，方式则不限定。
生数科技是一家成立于2023年3月的新兴科技公司，核心成员来自清华大学人工智能研究院，其自研的
是国内首个长时长、高一致性、高动态性的视频大模型，支持文生视频、图生视频、主体参照等功能，
据杨晟透露，索尼曾专门派人到生数科技，用一张2018年出圈的水墨风海报去检验Vidu的能力。
现场，张旭东演示了数个版本的效果，得到了索尼的认可，合作得以继续推进。
特别要提的是，考虑到合规性，索尼直接购买了艺术家与杨晟团队所使用的200余张水墨风原稿，然后再授权给杨晟团队基于Vidu创作。”
承制方创作画稿→索尼购买画稿→索尼授权画稿→承制方使用画稿生成视频→索尼验收并发布
整个流程类似于动画制作，而且是结合了日式和欧美式的动画生产方式，形成了一种新的工作流。
使用的过程里，Vidu相当于摄影机、手机、PS或者Premiere，是创意实现的高效生产力工具。
这样一来，索尼获得了所需的创意效果，承制方则得到了实际操作的空间和自由度。
不过相关过程并非一蹴而就，在实际执行环节里，杨晟与生数科技曾遇到过一个巨大挑战，
即艺术家与AI 技术人员在创作逻辑、主观审美和工作方式等方面的理解差异
张旭东回忆，开始他不能对齐艺术家的需求和标准，比如什么样的效果是导演更想要的。直到资深动画导演凯伦坐在工位旁，从艺术的角度下讲解后，他逐渐理解了导演的艺术偏好，并和内部美学专家讨论后，转译成相应的指令输入给模型。
Vidu 作为一个通用模型，能够理解和表达很多风格，但如何写出合适的 prompt 和生成模型进行“沟通”，调动起模型的能力来生成出艺术家想要的东西，确实需要懂模型技术的人和艺术家来共同完成。
双方深入沟通理解后，自然会促进效能快速提升，张旭东分享到，根据策划和原稿，Vidu仅用半个工作日就生成了上千支视频，供给艺术家挑选和优化，再从中选出最优质的作品。
这种合作模式使得双方都能充分的发挥各自优势，极大节省了时间成本，提高了工作效率和产出效率，
用传统影视的方式，制作一支30s的预告片大约需要30天，但是用Vidu只需要10个工作日。
这种作用特别体现在IP图像的一致性上，比如经常会看到这样一种AI创作的情景，一个老爷爷牵着小女孩过马路，一辆车驶过，下一秒老爷爷换了一个人。
首尾帧功能正好能尽力降低偏差率，以开头和结尾的图片约束和纠正影像细节，
众所周知，索尼在IP图像上有严谨的要求，一丝一毫都不能有差错，而Vidu有很大成效避免了图变bug，这是国内AI技术的一大进步，也是AI应用于影视IP的重大突破口。
数据规格上，Vidu能够同时支持中英文指令输入；时长方面，模型最长可支持一键32s视频的生成，产品端开放了4s/8s的视频时长；画面质感方面，最高可输出1080p分辨率。
的概念，希望Vidu可以借鉴相对多的物体，现在它能够参考单个物体，例如用一双鞋，模拟人穿鞋在月球上，生成一支广告片；或者提供一个“怪兽”的形象，安排怪兽做一些事情，都能保持很好的一致性。
未来，据生数科技介绍，Vidu也将补充风格参考能力，提升生成视频的品质感和艺术性，并且在同种风格呈现中，同并保持人物、场景、道具等多个物体的一致性。
本来只是给了Vidu一个很大概的想法，做一个中式屋顶，但是Vidu既做出了合理性的补全预测和3D模型，也自动生出了很惊艳的运镜和各类细节。
这能更直观地表达创作意图，减少误解，可以让承制方更好地控制视频的质量和效果。
我们都在说影视工业化，真的到了那一天，就是创作者和科技公司紧密协作。宣传片的艺术家团队都说，只有跟科技公司结合才有未来。
大导演詹姆斯·卡梅隆（James Cameron）官宣加入Stability AI公司
，这家公司的开源模型Stable Diffusion在图像生成领域有着举足轻重的地位。
詹姆斯·卡梅隆，面对生成式AI技术的崛起，他看到了AI与影像创作交汇的巨大潜力。
这两种完全不同的创作引擎的融合，将为艺术家开启全新的讲故事方式，这是他们从未想象过的。
他已经精选十余位AI人才，组成AI小组，将运用“中国制造”的新科技、新观念开展创作。
随着詹姆斯·卡梅隆和张艺谋的公开支持，影视行业将会加速AI应用的进程。反之，这也会驱动AI科技公司快速精进技术，全世界内皆是如此。
就现在的AI水平，张旭东和杨晟说到，如果将AI模型的发展阶段比作电影学院的学生，ChatGPT3.5相当于初中生，能够理解部分内容；GPT4相当于研究生，思考较为全面；OpenAI o1则更进一步，具有独特的思维方式。
现在，AI能够记住更多的专业词汇，理解并执行复杂的微调任务，如3D动态故事板着色；
其学习能力使得它在不同场景中的应用灵活性更好，能够准确的通过具体需求来做定制化训练，来提升工作效率和效果。
通过AI的这些能力，能够更好的降低对上层构造数据的训练难度，使整一个流程更加智能化和高效。
细分到镜头运动，AI通过学习和训练，能够理解和应用镜头运动的基础原理，如推拉摇移等，从而提升视频的视觉效果。
以及，通过对大量电影和视频的分析，AI能够学习到镜头运动的基本规律，并在实际应用中加以运用。
这种对镜头运动的理解和应用，使得AI在视频制作中的应用更广泛和深入，提升了整体的视觉体验和艺术效果。
而鉴于AI模型规模的扩大和技术的升级，其性能和应用场景范围将得到进一步提升。
然而，尽管效能在一直升级，但是现阶段AI并不能完全替代人类的创造性劳动，而是作为
预计在未来，AI可以帮助更多有创意的人实现他们的想法，诞生更多优秀的作品。