当即梦把剧本、导演和剪辑放进同一个工作室,我们看到了视频生成的下一步
在日常创作中,一个新的人物设定、一段有冲突的情节,甚至刷到的一条社会新闻,都可能成为下一部短剧的起点。
但短剧行业的生产节奏越来越快。团队可能同时推进多个项目,既要保证已有剧集的更新,又要不断寻找新题材、开发新故事;好创意从提出到真正变成作品,中间还需要经历剧本创作、人物设定、分镜设计、视频生成和后期剪辑等一系列环节。
如果有个工具,能够直接从 idea 出发,把后续的制作流程串联起来,会怎么样?
从一个故事灵感出发,即梦可以辅助完善人物设定、剧情冲突和剧本,并自动拆解分镜;进入制作阶段,创作者可以像导演一样安排人物站位、运镜,并在正式生成前预演整场戏;视频生成后,还能局部修改镜头、复用人物与场景资产,持续制作后续剧集。
这些,是即梦在 10 月 26 日上线的「短剧工作室」想要实现的体验——即梦将剧本创作、角色与场景资产管理、分镜设计、视频生成和后期编辑串联起来。
这两年,AI 视频模型的激烈竞争,让生成一段高质量视频逐渐成为日常。当视频生成质量已经能够满足越来越多影视创作场景的需求,竞争的焦点也开始转向创作工具,持续完善创作流程,进一步缩短从一个想法到一部完整作品的距离。
今年以来,随着视频生成模型的飞速进化,用 AI 完成一部剧集不再是空话,也是越来越多内容创作者尝试的方向。据媒体援引中国网络视听协会的数据,今年上半年,各平台上线的微短剧中,AI 内容占比已经超过 74%。换句话说,每上线四部短剧,就有接近三部涉及 AI 内容。
对于创作者来说,想用 AI 制作一部短剧,依旧并不简单:先用大语言模型写剧本,再整理人物设定、生成角色参考图,接着将故事拆解成几十甚至上百个分镜。等到视频素材准备完毕,还要导入剪辑软件,重新调整节奏、完成配音和后期制作。
AI 固然能够生成质量很高的画面,创作者仍然需要花费大量精力,将这些分散的素材和工作组织起来。
而这恰好是「即梦短剧工作室」最想要解决的问题,让创作者能够在同一个项目中完成从剧本到视频的制作。
从最开始的创作起点出发,即梦提供了三种:从一句话灵感开始创作、将小说等已有 IP 改编为短剧,或者直接导入完整剧本。
如果只有初步想法,可以交给 DreamScript 剧本模型继续完善。它能够围绕故事设定,辅助生成角色小传、人物关系、故事大纲和剧本正文,并进一步梳理剧情冲突与叙事节奏。
比如,你想拍一部关于职场的短剧,最初可能只有一个设定:「一个刚入职的年轻人,发现自己的直属领导竟然是十年前失联的父亲。」接下来,创作者可以让 AI 补充两个人的背景、设计他们重逢时的冲突,再逐步扩展成包含具体场景、人物动作和对白的剧本。
这意味着,即使创作者手里只有初步的故事想法,也可以直接开始创作。把想法变成剧本,往往是创作最难迈出的第一步,而借助「即梦短剧工作室」,就这样被解决了。
当然,如果创作者本身就是编剧,或者手里已经有成熟的小说 IP,也可以直接上传文本,让 AI 提取其中的人物关系、场景和故事结构,进一步完成短剧化改编。
剧本完成后,「即梦短剧工作室」会自动识别其中的人物背景、关系设定和场景描述,整理出角色设定及对应的生成提示词,供创作者确认;之后便会生成整部短剧所需的角色和场景资产,并关联到相应的分镜。
任何影视作品中都包含大量反复出现的人物和场景,但 AI 生成却很难保持一致。比如,一部古装短剧的女主角,可能上一场戏还在宫殿中与人对峙,下一场就出现在街道上,随后又回到书房。如果每个镜头都独立生成,很容易出现人物五官、发型、服装前后不一致,甚至同一个房间的布局也发生变化的情况。
为了减少这些问题,之前的做法是,创作者通常需要反复上传人物参考图、补充场景描述,再逐一检查生成结果。
更重要的是,这些资产还可以在后续剧集中继续使用。对于需要连续更新的短剧来说,创作者可以沿用上一集的人物、场景和故事设定,在已有项目的基础上继续制作下一集。
至此,一部短剧从最初的故事灵感,逐渐形成了完整的剧本、分镜,以及可以反复调用的人物和场景资产。大量原本需要手动整理、跨工具协调的前期工作,现在可以在同一个项目中完成。
对于用过 AI 视频生成工具的人来说,应该都遇到过这样的情况:脑海里明明已经有了非常清晰的画面,但无论怎么调整提示词,生成结果总是差了那么一点意思。
比如,一场男女主角对话的戏,希望镜头先从女主角背后拍摄男主角,再缓缓推进,最后停留在男主角的面部特写上。
在真人拍摄时,导演可以直接告诉摄影师,演员应该站在哪里、摄影机应该怎么运动。但在 AI 视频创作中,这些要求只能尽量通过文字提示词表达,即使再详细,AI 也未必能准确理解人物的空间关系和运镜方式。
于是,创作者只能反复修改提示词、重新生成,然后进入一种循环:人物站位对了,运镜却不对;运镜对了,人物动作又出了问题。
这也是 AI 视频创作者常说的「抽卡」。新一次的生成有带来惊喜的概率,但也意味着时间和算力的消耗。
「即梦短剧工作室」提供的解决思路是,把一部分原本需要在生成过程中反复尝试的创作决策,提前到正式生成之前。
其中有个功能,叫作「短剧导演台」。创作者可以进入 3D 空间,安排演员站位、道具位置、摄影机角度,以及镜头的运动轨迹。还是前面那场男女主角对话的戏,创作者可以先把两个人放到指定位置,再调整摄影机的机位,让镜头从女主角身后开始拍摄,随后设置摄影机向男主角推进的路径。如果觉得构图不够好,可以直接调整机位;如果人物之间的距离不合适,也可以重新安排站位。确定好的构图和运镜信息,还可以提供给视频生成模型,作为正式生成时的参考。
下一个难题是,创作者需要考虑多个镜头连接起来之后的整体效果。
经常出现的情况是,单独看每个镜头都没有问题,但把它们连接起来之后,可能会发现人物反应太慢、镜头切换太频繁,或者剧情的情绪没有达到预期。如果等到所有视频都生成完毕才发现这些问题,修改起来就会比较麻烦。
为此,「即梦短剧工作室」提供了「智能预演」功能。创作者可以在正式生成高质量视频之前,先将多个分镜串联起来,预览整场戏的剧情节奏、人物动作和镜头衔接,再决定哪些地方需要调整。