Tezign 特赞
2024-03-29
春节还未结束时，Sora的横空出世引发全民关注，热度不亚于去年GPT-3.5的发布时刻。其逼真的效果、专业的镜头语言和多模态生视频的能力均成为大家讨论的热点。
但实际上，在Sora发布之前，已有不少模型和相关工具辅助AI视频生成。许多品牌和AIGC创作者也成功运用这些工具，制作出可商用的AI视频，在多个社媒渠道取得了不俗的传播效果。
今天这篇文章将从 AI视频相关工具、AI视频工作流拆解、AI视频趋势 & 典型案例 3个板块讲解。与大家分享现阶段AI视频的能力优势和边界、适用场景，以及未来一段时间内可见的应用方式。
我们将AI视频相关的模型/工具，按照视频生成的步骤做拆分和归类：（以下仅列举了部分主流、应用度高的模型/工具）
部分模型/工具展示
图像生成类
我们通常会利用图像生成类模型，通过“输入提示词-内容生成-调整提示词-重新生成”的工作流，来生成视频中的分镜画面。
最为常见的3种模型/工具包括：Midjourney、Stable Diffusion、DALL-E 3，三者各有所长：
相对来说，Midjourney更重创意，生成图像更具氛围感、创意美感和想象力；
Stable Diffusion重视控制，能够对生成的图像风格、主体、服饰、动作、深度等做出强有力的控制，结构造型明确。适合批量生成相同风格类型图片、超级符号等；
DALL-E 3更重逻辑，对语义的理解和把控更加精准。
AI视频编辑类
这部分为大家着重介绍，目前开放使用，且应用较普遍的3种 AI视频编辑类模型/插件：Runway发布的Gen-2（以下简称Runway）、Pika 和 Stable Diffusion中的插件Deforum。（由于Sora目前并没有开放使用账号，暂时不纳入讨论）
Runway 和 Pika 常常被拿来比较，二者功能近似，均支持文字、图像、视频生成视频；
呈现效果方面各有千秋：在生成物体的稳定性上，Pika 略强于 Runway；画质清晰度和画面细节方面，Runway 略优于 Pika。
Deforum 是 Stable Diffusion 下的一款视频生成插件。通过生成一系列图像，并将它们拼接在一起创建视频；将小变换应用于图像帧，并使用图像到图像函数创建下一帧。由于帧之间的变化很小，因此产生了连续视频的感觉，快速完成场景迁移过渡。
特赞出品｜可爱多冰激凌 AI短片
在实际的工作流中，我们常通过 Midjourney生成图像 x Runway/Pika图转视频、Stable Diffusion生成画面 x Deforum插件生成视频 的方式来编辑输出AI短片。
那么AI视频工具具体是如何辅助生成视频，实际效果又如何呢？以下将以广西文旅发布的AI视频为例，浅解AI视频工作流和传统工作流的区别。
背景简述
视频发布于春节前夕，各省文旅继“尔滨”后纷纷出手整活。这支「AI广西」视频一经发布便迅速蹿红，引发诸多广西网友点赞、外省网友羡慕。
视频以「实景拍摄 + AI生成」的方式呈现，实拍与AI画面交叉，在镜头穿梭间串联起各市县代表性的自然、人文景观。在AI的加持下，呈现出一个兼具未来科技感、艺术美感的多面广西，被评价为“与时俱进”的宣传视频。
以上截图源自「广西文化和旅游厅」视频号评论区
以上视频源自「广西文化和旅游厅」视频号
传统视频工作流 vs AI视频工作流
AIGC视频工具的出现，对传统视频工作流产生了以下2点显著影响：
1、制作流程被简化：AIGC将传统工作流中的诸多细分环节集成于一体，尤其可以将创意素材收集、摄影、后期（剪辑、调色）环节缩短甚至取消；“人机交互的飞轮” 实现多个步骤合并，整体流程被“拍扁”，降低制作的人力成本与时间成本；
2、提升创意自由度：传统工作流中创意策划、撰写脚本、素材参考受人本身的惯性思考局限；而AI工具的加入，不仅能辅助这些环节提效，还可批量生成多创意方向，以可视化的方式“人机共创”，激发更多创作灵感。
以下是AI工具所参与的常见视频生成工作流⬇️
AI生成效果展示
以下镜头均截取自「AI广西」视频 ⬇️
景物自然运动 + 运镜推进
快速流转切换的风格化镜头
我们翻阅了目前市面上应用AI技术的视频，发现在视频的展现形态（体裁）上，有3类明显的趋势：
当这些展现形式与实际的应用场景相结合，按照视频的内容题材，目前商用的AI视频可以分为这3类：
1、故事类 —— 精神内核型
特赞出品｜百度智能云 AI龙年贺岁短片《相信》
今年春节前，特赞携手百度智能云推出了AI故事向视频，在视频号、抖音互动过万。从编剧/分镜（文心一言）、角色制作/场景制作（文心一格/Midjourney）、视频生成均由AI工具参与完成，由百度智能云千帆大模型一站式赋能。
视频有明确的故事主线：讲述了代表AI技术的小龙从孵化诞生、好奇探索世界，到历经挑战，最终蜕变为巨龙的成长故事。表达了百度智能云一直坚信并深耕AI领域，在龙年将与更多生态伙伴一起克服困难、突破险境，“在一起，了不起”的精神内核！
AI省去了精致复杂的3D建模和运动捕捉过程，为40+个分镜头生成多个备选素材，让3D小龙在视频里有了拟CG特效的观感。
角色制作/场景制作
如想定制同款AI视频内容
欢迎扫码联系我们
2、风格类 —— 创意效果型
特赞出品｜阳光电源 圣诞AI视频《光的礼物》
这是特赞携手阳光电源定制的AIGC圣诞祝福视频，在视频号发布后获得3k+点赞。视频以礼盒为起始与终点，中间串联起能源触及到的各个场景，“光”点亮了房屋、码头、草原、城市里的千家万户，烘托节日氛围的同时承载品牌元素。
在确定创意、分镜脚本、画面风格和运镜方式后，视频画面均由AI生成（Stable Diffusion），再通过Deforum插件实现穿越演变。视频兼具流动的自然美感，让用户保持对下一帧的新鲜感，又能通过该形式表达出“品牌服务多场景”的主题思想，达到宣传目的。
3、信息类 —— 科普实用型
从「AI数“读”两会」的视频中，我们可以看到：AI为数据展示、大事件解说批量生成配图。在对画面精度要求不高、但数量大主题杂，需要准确传达信息的场景下，“新质生产力”能够大大降低素材的采集、拍摄成本。
如何能真正让AI视频为品牌内容营销添彩？
一方面在于，在制定策略方案时，不能单纯为了跟风而去“人工智能化”，AI的加入只能简化繁琐步骤，并不能代替人产出核心创意。品牌与创意方需要清楚了解AI视频的能力边界，结合对目标用户群体的洞察，用AI的风格长板强化视频透传的核心信息。
另一方面，最终AI视频的完成度，需要创意方对前沿的模型、工具和玩法趋势保持足够高的敏锐度，积累分行业/风格的提示词和专有模型，才能让AI丝滑融入工作流、减少创意落地过程中的阻碍。
这也是特赞在提供AI视频解决方案时，一直坚持的方向。如果您想了解更多AI视频案例及相关能力，欢迎扫码后台与我们交流。
