快手、抖音加码AIGC短剧赛道 影视制作行业迎来新机遇?
21世纪经济报道记者周慧北京报道
7月份,抖音和快手各自的首部AIGC+短剧作品上线。
7月6日,依托快手视频大模型可灵AI的技术支持的《山海奇镜之劈波斩浪》对外发布预告片。7月8日,抖音的视频大模型即梦支持的AIGC科幻短剧集《三星堆:未来启示录》上线。
快手和抖音在支持AIGC作品方面开启同题竞赛。当视频大模型,越来越多地应用到短剧以及广告作品中,对短剧、电影以及广告行业带来哪些影响?演员有没可能被AI替代?未来商业化应用有哪些可能?
21世纪经济报道记者专访了《山海奇镜之劈波斩浪》导演陈坤以及清华大学新闻与传播学院和人工智能学院双聘教授沈阳,以及部分影视制作行业的从业者。
在行业人士看来,目前AIGC在短剧以及一些广告片领域的商业化应用,已经开始热起来,技术水平目前还存在AI幻觉的问题,比如角色“AI感”依旧存在,但参与者对未来技术水平的提升持乐观态度,未来穿帮镜头会越来越少。
AIGC在短剧制作中参与度几成?
陈坤是一名80后导演,网名“闲人一坤”,有20余年的电影行业从业经历,《山海奇镜之劈波斩浪》是他用AIGC创作的第一部短剧作品。对于AIGC在短剧制作的参与度,陈坤告诉21世纪经济报道记者,并非从剧本创作到最后剪辑都是AIGC完成的,AIGC主要应用在中期的创作阶段。前期的剧本策划,以及后期的剪辑,都是需要复杂的人工来完成的。
“未来不需要再担心我们的演员会塌房了。”陈坤说,中期创作阶段,没有任何一个镜头是拍摄完成的,全部是文生视频和图生视频的工作流程生成出来的素材。
影视制造行业,过去常用的绿幕、CG技术,主要体现在做背景、特效辅助上,而AIGC在影视制作行业的参与度更高,对于行业提高效率和降低成本的作用更明显。
以降低人员成本为例,传统影视制作行业涉及庞大的人员团队,比如一个剧组可能会有上百人,如果用到AIGC技术,主要包括前期剧本创作,中期的“提示师”,以及后期的剪辑人员,人员数量上能减少超过三分之二。
陈坤还提到“提示师”这个工作,工作人员需要用精准的词句提示加上图片,在大模型上生成视频,这应该是AIGC时代的一个新工种。
21世纪经济报道记者尝试在某视频大模型上创作短视频,多次尝试,效果一般,提示词的使用还是相当需要技巧。
沈阳教授告诉世纪经济报道记者,AI提示词的使用,是有一定复杂度的,也是一门技术和学问。他总结了五项做一个好的“提示师”的素养,首先写提示语的人要理解语言哲学,二是要理解检索语言,三是要理解自然语言,四是要理解编程语言,五是要能理解人工智能大模型的基本原理。
陈坤介绍,目前从他的AIGC短剧制作经验来看,普通人在使用提示词不太顺利的原因,包括没有受过视听语言的训练,比如要了解远景、特写这些各是什么状况,另外操作者对画面风格的描述不够准确。
对于成片效果,陈坤表示,在制作过程中,可灵生成的有些镜头的效果让他感到惊喜。但不可否认的是,AIGC在影视行业的应用还处在初级阶段,未来还有一个爬坡的过程,现在可能只是爬到半山腰,未来半年到一年时间,应该会有更大的技术突破。
目前技术还存在的短板,他总结为四个方面的短板,一是人物的一致性,二是场景一致性,三是人物表演,四是动作交互。比如,人物角色戴一个细边的红色眼镜,下一镜头中该角色可能又戴上了宽边的眼镜。
现在大家诟病的比较多的是表情,比如,AIGC作品中,一个人说话只有嘴在动,口型和面部的动态匹配度不那么高;比如一个拳头打到脸上,面部的反应和动作交互还不是特别好。
“作品完美吗?不完美,还是能看出‘AI感’的。”陈坤直言,但是他相信技术层面的问题,是可以通过技术迭代去解决,目前不管是大模型的训练量,还是其对现实世界的理解,都还需要时间积累。但可预期的是,AIGC在影视作品中的应用,就跟人们用PPT和EXCEL一样的普及,成为常见的工具。
AIGC在影视行业热度升温
在微短剧《山海奇镜之劈波斩浪》的制作过程,快手视频生产大模型可灵提供深度技术支持。陈坤没有透露这部快手定制的微短剧的合作细节。
在成本投入方面,陈坤介绍,相对传统的短剧制作成本,这部分AIGC短剧的成本是前者的三分之一到四分之一的水平,工作人员的参与人数是传统剧组的十分之一,可以肯定的是,降本增效明显。
至于商业化收益,陈坤表示,目前这部短剧的尝试是一个探索,在快手上播放也是不收费的,暂时不考虑挣钱。未来如果和快手的可灵合作第二部、第三部微短剧的话,可能会去一起去探索一些新的商业化的路径。
值得注意的是,短视频头部平台已经在AIGC短剧领域开始了同题竞赛。7月份上线的AIGC科幻短剧集《三星堆:未来启示录》是由即梦AI作为首席技术支持主要负责其中的图生视频,即梦AI是抖音旗下生成式人工智能创作平台。同样在7月份上线的《山海奇镜之劈波斩浪》是由快手视频生产大模型可灵支持。
陈坤告诉记者,从他接触的投资方来看,目前影视行业不太景气,但和AIGC相关的影视剧项目,受到资方的关注度还是更高一些。近些年影视行业也“卷”入一个瓶颈阶段,“拼演员”比较严重,AIGC技术或给行业带来一些新变化。
沈阳教授日常在朋友圈持续更新通过AIGC创作的作品,对国内外的视频大模型都有应用实践。沈阳介绍,在大模型领域,视频大模型是中国和全球水平差距最小的一个领域。目前AI幻觉在视频生成过程中都还不能做到百分之百的消失,但是会越来越少,也就是说穿帮镜头会越来越少。整体而言,人工智能技术将成为提升视听内容生产力的重要工具,人工智能与人类智慧的交织融合正在重塑视听艺术的边界。
在沈阳教授的团队近期创作的200余条AI视频中,人工智能辅助生成的选题方案已涵盖文史、科技、美食、旅行、教育等多个垂直领域,人工智能帮助策划者快速获取灵感、系统化拓展思路,为视听内容策划与制作的“想什么”赋能,当人工智能技术进一步成熟之后,视听内容创作效率将提升百倍千倍。沈阳透露,目前已经稳定的效益产出,覆盖一些文旅单位和企业事业单位。
21世纪经济报道记者采访了多位短剧和电影行业的从业者,大多数对AIGC技术还处在观望阶段,暂未参与AIGC影视作品的计划。相对竖屏短剧来说,电影对视频质量要求更高,未来电影行业是否有可能用到AIGC技术?
7月11日,一位在美国洛杉矶的华人电影导演告诉记者,在美国的同行也有关于生成式人工智能的讨论,但还没有产生一些现象级的AIGC作品。也有业内人士透露,国内某知名导演已经有专门的覆盖AIGC技术应用的团队,在开始探索生成式人工智能在电影行业的应用。