技术提炼与总结
来自豆瓣 · 完整原文
豆瓣原文 ↗一些难控制的镜头,仍是用image2固帧后生成,因而噪点问题严重。
一些对话戏的后景与人物有轻微的割裂感(光线、图层),应该是控图时强行限制加入图片为后景,而没有进行2.0色调与质感适配,导致割裂。
避免方法:人物资产与场景资产改光。
影片的光影控制很棒(例如雾气、带密度的空气、人物在林间脸上的树影叶隙)。皮肤轻微油感属于2.0正常影调。
仍然存在视频模型直出的同机位跳切、或跳轴等问题。少数因遮瑕而快切的镜头实在有点过碎(例如蝶衣接阿朱的花竟然切了不同轴线的3刀)。
避免方法:生成时控制某些镜头的时长,加入时长限制的提示词。(例如,拿花的近景我需要3秒时长,不切镜,人物B的手从画右下角入画,将一束花递给画左上角在画面中的人物A的手。)
贴近传统影视的视听语言、摄影机调度,并且加上真人配音,可以极大程度削弱ai感。
表演上一些AI演员的“轻微惊讶”,“轻微怜悯”之类的表情(小情绪戏、微表情),通过迁移后仍难以达到真人质感,总显得夸张,还得精修。
AI做周星驰类无厘头喜剧的表演难度极大(比如里面的高僧角色)。
目前测试下来,表情做提示词需要下大功夫,需要写清楚面部哪一块肌肉在动。
梦境满是蝴蝶的戏份的对话戏质感与光影控制很棒,应当是进行了人物与场景资产控光。
少数镜头帧率不一致,有概率是模型直出帧率为30(2.0大多影片都会出30帧,剪映的序列条也默认是30帧),影片制作时导出帧率为24,所以某些远景、人物在后景中的运动有轻微掉帧。
避免方法:剪辑时注意导出的限制固定位24帧。可以在生成端提示词限制帧率为24。
例如蝴蝶、鸟类翅膀震动,这一类物理运动的帧率与速度不好控制,2.0仍有僵硬感。(比如汽车的轮胎旋转)2.5略微改善。
避免方法:加入一些真实的物理效果、现实物理质感限制提示词。
一些模拟真实摄影机的光斑、手持质感、耀斑,实拍的一些光带来的技术缺陷,以及空气中的一些飞灰、颗粒,都在AI影像里能大幅度提高真实度。
比如使用手指在手心画符这类东西,需要写清楚,是哪根手指,从哪里画到哪里,不然微距镜头生成期间会穿帮。
环境部分过于3D,场景资产控制出了问题。
夕阳决战,最好每个镜头都写光线提示词进行控光,某些镜头中人物在夕阳下身上与面部的光线不对。如果需要讲求效率,则在提示词中写光线的来源最好是从何处而来。