房子起源于奥飞寺
量子比特 |公众号QbitAI
人工智能视频的风潮已经蔓延到著名影视导演圈子。
使用全球最流行的AI视频工具:快手克灵。
与中国九位最知名的影视工作者合作:李少红(《大明宫词》)、贾樟柯(《三峡》)、叶锦添(《英雄本色》)、薛晓路(《英雄本色》) 《不要和陌生人说话》)、于白梅(《战狼2》)、董润年(《年会停不下来!》)、张驰宇(《独行侠》)月亮》)、王子川(《朱童三年级失去超能力》)、王卯卯(《兔斯基》原作者)。
大家与AIGC创作者合作,用科灵为每个AIGC创作了一部3-5分钟的短片,涵盖奇幻、奇幻、亲情、动画等多种类型。
抛开剧本,我们来看看著名导演敢于制作的AI图形的风格和质量。
中国漫画风格:
科幻风格:
少儿频道卡通动画风格:
写实风格的人物+猫狗(?):
贾樟柯的硅基公路电影《小麦丰收》也利用开云集团的口型同步功能,成功让片中的人形机器人说山西汾阳话。
香港,这9部纯AI短片有的剧本设计创意十足,有的动作极其流畅,还有的巧妙地避免了AI生成的真人还是有点“A”的bug。
但是朋友们,量子比特还记得自己是一个关注前沿科技的账号(严肃脸),所以我这篇推文想跟大家分享的不是电影好不好,故事好不好有趣的是,剧本是否有创意,而是我想与大家分享的内容。一些答案。
有的冲到第一梯队的影视工作者和AIGC创作者面前面对面提问,得到的答案是:
(部分内容已记下,不改变发言者原意)
传统影视从业者最想用AI视频做什么?
余白梅:我们最想探索的是AI与动作的结合,无论是传统AI视频中的制作方式,还是文生图片的方式……其实我们知道AI的局限性,规定镜头移动并不是AI的强项——虽然历史悠久,也才一年多一点,但AI在现实生活中的行动似乎并不是最出色的。
所以这次我们特别想尝试一下,结合一些电影制作技术,然后更多地使用AI作为工具,将两者融合起来,看看我们是否可以创建一些我们以前没有见过的动作序列。
李少红:我觉得人工智能运用到影视中,应该能够帮助创作者在图像中开启想象的可能性。
薛晓璐:我们在制作这个AI短片时,想测试两个方面。
一方面,我想看看AI能如何还原真实环境。因为AI在一些虚拟环境的表达和构建上有其独特的优势,但在表达一些真实环境的真实性上能达到什么程度的一致呢?
另一个测试是动物的表达和表现的一致性,能够达到什么水平。影片中的动物(小猫)并不是AI随机生成的。我们对动物的生成有非常明确的要求。我们从现实生活中提取一张宠物的照片和大量的视频内容,然后将其喂给AI并要求它生成一个与真实猫非常接近的动态视频,并且必须在所有图像中保持一致。
贾樟柯:我希望通过可灵的运用,探索AI本身目前的可能性。所以我可能不会回避科灵目前发展阶段需要改进的一些东西,或者整个AI技术面临的一些挑战。
我们的(人形机器人)主角贯穿始终。了解AI的人都应该知道它有多难。
使用AI真的能省事吗?
徐静杰(AIGC与张驰宇联合创作者):驰宇导演制作的是一部机甲题材的短片。以前需要大规模制作的炫酷镜头,现在只需一台电脑和一个科灵账号,秒级就能生成。 。
最适合AI制作的镜头无疑是第38个镜头,这是一个大尺度俯拍+机库停放的机甲推进镜头。在传统的CG流程中,即使是实时UE5,建模、布景、灯光设置也需要两三天的时间。
现在一张图就可以达到80%的效果,而且灯光和烟雾氛围都相当自然。
影片中的第22个镜头需要慢动作来捕捉掉在地上的报纸,这是一个非常典型的细节镜头。我用的是科灵,只需要简单的提示文字就可以营造出非常合适的暗雨场景和氛围;如果我使用CG处理,雨水和地面反射会有点假;如果我使用现实生活中的拍摄流程,创建这个小场景也会是额外的。需要花费很多时间——AI创作非常适合。
陈流芳(AIGC与薛小璐联合创作者):训练动物演员很难,训练猫更是一个坎。对于猫主人来说,像狗一样听话配合并不容易。这次薛晓路导演要拍一部以猫为主角的电影,其实非常适合用AI来呈现。
行走、躲衣柜、与女主角互动等动作细节都由AI实现得惟妙惟肖、细致入微,整个“拍摄”过程也是可预测、可控的。
Vicky(董润年AIGC联合创始人):就看拍什么样的镜头了。比如那些怪物猖獗的场景,用传统的拍摄方式可能很难拍出来,但借助AI的创造力,可以更精准地呈现怪物。由远及近的视觉效果、怪物的动态效果也能自然流畅。
此外,AI还非常适合想象和完成超现实的场景。
比如一个镜头中,城市远处发生爆炸,然后一颗陨石升上天空。这样现实生活中不存在的超现实场景,可以通过灵能很好的模拟出来,因为视频的帧率比较高,物体的运动轨迹和动态效果也会显得更加真实。
宋东欢(AIGC于白梅联合主创):我有一些影视制作的经验。与传统的电影制作流程相比,人工智能制作有一个很大的优势,就是可以边制作边修改,制作风险降低很多。
例如,传统真人影视剧的制作周期非常严格,重拍成本非常高。春夏秋冬的场景是统一的,就连一个小道具的摆放也很容易混乱。
但对于AIGC来说,增加一个镜头并不会增加太多的成本,并且可以立即进行调整。甚至到了剧情的中后期,还可以回去进行调整。依托AIGC衍生出的全新影视制作流程,修改成本和难度大幅降低。
哪些功能/功能最实用?
徐静杰:第54镜头是机甲从远景冲向近景的最后一个镜头。这也是AI创造的一个很好的例子。
这样的特效镜头如果通过CG来实现,会消耗大量的时间和金钱。现在可以通过提示词+首尾帧快速实现,效果还是很震撼的。
艾甜甜(AIGC与张驰宇联合创作者):首尾帧和负面提示词也是提高质量和效率的好工具。
例如,如果用原始AE制作“隧道内的灯光由近到远逐渐亮起”的镜头,则需要使用2D传统动画制作方法逐帧调整画面素材遮罩层,但现在可以通过第一帧和最后一帧来完成。实现甚至意外地展现出隧道内光线影响环境光的自然效果,真是令人惊叹。
Derek Wen(李少红AIGC联合创始人):人物或者物体变化平滑的镜头其实非常适合使用AI首尾帧功能。
例如,短片《花满竹》中,“风筝”变成“白鸽”的镜头,不仅实现了主体时空顺序和逻辑的平滑变化,而且背景也可以跟随“风筝”变化。 ”和“白鸽子”同时出现。两个拍摄对象实现飞行动作,达到实拍无法展现的效果。而如果这个变化过程能够更加稳定,相信能够展现出更加惊人的效果。
在人物场景中,通过AI功能的开发,我还可以利用科灵AI实现流畅的变装、一镜到底、一步一步的场景变换、自然的镜头切换等,让人惊叹不已。创作者。
AI的拍照技巧/光影/景深表现如何?
贾樟柯:每个场景我们都用了传统的分镜方法,包括前后打斗,包括一些场景调度和演员之间的动作。我们还用到了很多传统的胶片方法,比如我们讲一下胶片的放大、推拉、平移等技巧。
文伟思(AIGC 与王子川联合创始人):原来的提示只提到了前向运动镜像,没有太多描述,但科灵 AI 生成的结果让我非常满意。爆炸效果和镜头移动都恰到好处。
而在爆炸发生的那一瞬间,镜头巧妙地与晃动和平移结合起来,不仅捕捉到了爆炸的紧张与混乱,还无缝衔接到了下一个场景,营造出紧张气氛的延续和过渡。这种镜头移动技术不仅增强了画面的动态感,也加深了沉浸式体验。
Jade Wu(AIGC与贾樟柯联合主创):公路电影就比较适合,也需要利用景深和焦点切换来展现空间感、营造场景感。焦点的切换可以巧妙地加深影片的叙事层次和情感表达。
在镜头生成阶段,科灵AI提供了“人物-背景”对焦切换,非常精彩。当镜头聚焦在人物身上时,可以清晰地观察到人物的表情和动作;当焦点切换到背景时,华北的辽阔和空旷被充分展现,增添了浓郁的地域色彩和人文情调。
AI脑补分镜/片段的效果如何?
Jason(AIGC与王卯卯联合创作人):我们的《再见兔子》讲述了一个小男孩面对学业压力和焦虑时的心理挣扎的故事。
当我创建其中一个框架时,我输入了“一个小男孩情绪低落时的幻觉”作为提示。说实话,就算这个提示词交给一个普通人,他也未必能够想象出一个具体的场景来体现这种幻觉。
而柯灵则生成了“从小男孩身上分裂出来的四个蓝色小人”。叙事逻辑、表演张力,甚至元素漂浮叠加的视觉形式,都与主题完美契合。虽然这个镜头最终没有被使用,但如此恰当的想象却带来了超出剧组预期的惊喜。
当小男孩踏上楼梯并融化时,也会产生意想不到的令人惊讶的效果。科灵不仅高效地完成了原本耗时较长的流体动力效果,达到了预期效果的90%,更令人惊喜的是它对场景的智能理解——自然地展现出脚步融化、人物被淹没和恐慌反应。一幅连贯的画面。
从效果呈现来看,我觉得AI在一定程度上表现出了独特的想象力和创造力。
时硕(叶锦添AIGC联合创始人):AI不仅是思想的接受者,它还能主动为剧组提供灵感的火花。
当我拿到剧本并开始进行镜头测试时,我无意中生成了一个“月球表面塌陷并收缩”的镜头。当时我非常惊讶——AI在展示月球的塌陷和收缩时还添加了表面流动,非常细致。同时,摄像机根据飞船的方向动态变化,给你近距离观看飞船的身临其境的感觉。 。
叶导演也非常喜欢这个镜头,为了在正片中使用这个镜头,特意调整了剧本。
您第一次使用AI拍摄电影是什么体验?
叶锦添:这是一件非常有趣的事情,它会让人上瘾。
于白眉:这个尝试是非常困难的,但是这个尝试也很有趣。整个创作过程很难描述,我认为结果充其量也不能令人满意。
但回想起来,有很多乐趣,我们每个人都学到了很多东西。
王子川:反正这次做完之后我觉得很好玩。
而事实上,整个过程会比预想的顺利,因为我之前从来没有任何知识——更不用说与人工智能打交道了——很难有计算机基础。这实际上让我感到非常惊讶。
薛晓璐:从目前的完成情况来看,我认为AI给了我们一个很大的惊喜。但不得不说,里面还是有一些镜头感觉还有改进的空间。这也让我对AI的未来充满期待。
贾樟柯:整个制作完成后,我对AI非常满意,因为我觉得人物的连贯性基本上达到了令人满意的程度。
科灵已经基本可以在生成内容的同时具备清晰的空间识别能力了。也就是说,空间层次信息在生成过程中不会丢失。我认为这正是当前AI技术需要进一步完善的方向,也是科灵目前做得非常好的事情之一。
王卯卯:这部影片是我和我在北京的动画团队以及我在海外的AI影视团队合作完成的。科灵是我们用过的整体体验最好、分辨率最好、动态性能最好的AI视频工具。
张驰宇:在传统的电影制作流程中,虽然可以实现这样的镜头,但要么需要花很多钱去搭建场景,要么需要在后期制作中用绿幕重新制作。科灵AI只需一条命令即可生成图像,其精确度超乎想象。
还有一件事
说实话,9位影视工作者都愿意用AI来拍摄短片(甚至是实验性的),其实已经在一定程度上表明了他们的偏好:
接受或者至少愿意尝试人工智能。
但我还是想问,置身于强大的AI视频中是什么感觉? ——
李少红:其实电影和技术是密不可分的。每一次技术革命都会带来新的升级,都是影像新时代的开始。
我们这一代导演经历了从电影到数字时代的转变,当下的电影从业者正在经历AI技术的变革,学习如何处理与AI的关系。 “如何让AI为我们服务”是下一代电影人在职业生涯中注定要与世界各地的电影人共同面对的问题。
叶锦添:人工智能正在创造一个再生的世界,在复制的世界中再现全面的视野和历史长河中不断出现的现象。多少作家、科学家、哲学家以各种不同的解释在我们的意识中流传着它。
这些东西经过人工智能的整理后,会重新出现在我们的面前,甚至可能取代我们的真实经历。回归本色,冷静应对这突如其来的变化。
贾樟柯:我一直对人工智能很感兴趣,但一直没有机会去尝试。我一直关注AI的进展,因为它进入行业后引起了很多讨论,包括好莱坞的反应非常激烈。
我个人认为,在过去的100年里,电影迎来了各种新技术的诞生,而当一些新技术诞生的时候,就会有人认为对传统电影产业构成威胁,也有人会认为这是对传统电影业的威胁。感觉它将作为一个新工具添加进来。不管怎样,风风雨雨,电影艺术一直在吸收和接受新技术,不断前行,为观众创作出更多更新的电影,增加了很多表现方式。
我想人工智能未来一定会成为电影行业的平等伙伴。无论是导演还是编剧,也许我们都会有一个新的合作者,那就是AI。未来,某个AI可能会出现在片头和片尾字幕中。
最后我想强调的是,(在这个短片中)我们没有使用特效,所有的问题都是由AI解决的。
王子川:首先,我个人对AI生成视频的第一印象是它具有很强的破坏性。
可能是各种意义上的损害,感性认知、技术障碍或者资源障碍……或者各种损害。它的产生方式也是,它吃掉各种材料,形成新的形象。这个形象不是真实物质世界的形象,而是一个综合的象征形象。
对于我这种“墙外”的人(不是导演专业)来说,破坏是我潜意识里的某个主题。传统影像的技术、氛围、人力资源、资源的门槛非常非常高,存在着各种与创作无关的怪异壁垒和难以逾越的鸿沟。
但有了AI这样的工具,可以帮助创作者快速完成一切想象和创作,它就是一个“武器”。这种“武器”必定具有破坏性。这种破坏性是针对某种既定秩序或传统工业文化的破坏。
我不认为这是一个贬义词,这对我来说是一个非常积极的词。
——联系作者——
- 超过-