Skip to content

Runway Gen-4 使用教程:AI 视频生成的注册、功能与完整创作工作流 ​

Runway 是目前功能最完整的 AI 视频创作平台之一:从文字/图片生成视频(Gen-4)到多轨视频编辑、演员动作捕捉(Act One)、运动笔刷(Motion Brush),再到绿幕抠像和语音驱动嘴型,它不只是「生成一段视频」的工具,而是面向影视创作者的 AI 生产工作站。

本文从注册开始,逐层讲清楚 Gen-4 的生成逻辑、主要功能模块、提示词写法,以及常见创作场景的完整操作流程。视频生成工具的横向比较见 国产 AI 助手怎么选;本文专项讲 Runway 的上手与深度使用。


一、访问准备 ​

Runway 服务器在美国(app.runwayml.com),在中国大陆无法直连,需要一条稳定的境外线路才能正常使用。

实务要点:先固定节点,再打开 Runway,不要中途切换——视频生成是长时任务,生成过程中断线会导致任务丢失,额度白白消耗。专为高审查网络优化的 GeeVPN(AmneziaWG 协议)是常见选项:连上后选一个延迟较低的节点钉住,整个创作 session 保持同一线路。


二、注册与套餐 ​

  1. 打开 app.runwayml.com,选「Sign Up」,支持 Google 账号一键注册。
  2. 注册后默认进入 Free 计划,赠送 125 Credits。
  3. 根据用量需要升级套餐。

套餐对比 ​

套餐月费(美元)Credits/月最高分辨率商业授权
Free0125(一次性赠送,不续期)720p限制
Standard156251080p有
Pro3522504K(部分功能)有
Unlimited95无限(低优先级)4K有

Credits 是全平台通用积分:生成视频、语音驱动、Act One 都消耗 Credits,消耗量取决于时长和分辨率。4 秒 720p 大约消耗 5 Credits;10 秒 1080p 大约 25 Credits,生成前界面会显示预估消耗,确认后再提交。


三、Gen-4 核心功能 ​

Gen-4 是 Runway 的旗舰视频生成模型,支持三种输入方式:

3.1 文字转视频(Text to Video) ​

纯提示词生成。在主界面选「Gen-4 Text to Video」,输入英文描述后点「Generate」。

关键参数:

  • Duration:5 / 10 秒
  • Ratio:16:9 / 9:16 / 1:1 / 21:9 等
  • Camera Control:镜头运动预设(后详述)

3.2 图片转视频(Image to Video) ​

上传一张参考图,描述运动方向,生成以该图为首帧的视频。这是 Runway 最稳定、最实用的工作流:

  1. 点「Gen-4 Image to Video」。
  2. 上传图片(支持 PNG / JPG,建议分辨率 ≥ 1024px)。
  3. 在提示词里描述「这张图应该如何动起来」,而不是重新描述图片内容。
  4. 用 Motion Brush 精确控制哪些区域运动(见第四节)。

适用场景:把插画、UI 截图、产品图、摄影照片动态化——静态素材直接变成可用的短视频。

3.3 视频转视频(Video to Video) ​

上传一段已有视频,Runway 会对画面风格进行重绘(Re-render),保留原始运动轨迹,只改变画面风格。

典型用法:把自己拍摄的手机录像重绘成「动漫风」「赛博朋克风」「水彩画风」,原始镜头运动、景深关系保留,风格完全替换。

提示词里写目标风格,不要描述原视频内容:anime watercolor style, soft brush strokes, muted color palette。


四、Motion Brush(运动笔刷) ​

Motion Brush 是 Runway 独有的功能之一,可以精确控制图片中「哪个区域」「朝哪个方向」运动。

操作步骤:

  1. 在 Image to Video 工作流里上传图片后,点「Motion Brush」图标。
  2. 界面变为画布,用笔刷「涂」你想要运动的区域。
  3. 涂完后,在右侧设置运动方向(↑↓←→ 或 Zoom In/Out)和运动幅度。
  4. 不同区域可以设置不同运动方向,最多支持 5 个独立运动区域(不同颜色标注)。
  5. 设置完成后生成,运动轨迹会严格遵循笔刷标注。

实用案例:

  • 产品图:只让背景模糊旋转,产品主体保持静止
  • 人物图:让头发飘动(涂头发区域),背景微动,人物面部固定
  • 风景图:让云朵向右移动,水面垂直起伏,树木不动

Motion Brush 的精确度使 Image to Video 的可控性远超纯文字生成。


五、Camera Control(镜头运动控制) ​

Gen-4 内置了专业级镜头运动预设,在提示词输入框旁边的「Camera」菜单选择:

预设名称效果
Static固定机位,无运动
Move Left / Right横移
Move Up / Down升降
Push In / Pull Out推进 / 拉远
Pan Left / Right水平旋转
Tilt Up / Down垂直倾斜
Roll机位旋转(倾斜画面)
Orbit绕主体旋转

这些预设可以叠加提示词中的镜头描述,但预设和提示词描述冲突时以预设为准。建议:如果你选了 Camera Control 预设,就不要在提示词里再写镜头运动词,避免矛盾。


六、Act One:演员表情/动作驱动 ​

Act One 是 Runway 的旗舰功能之一,允许你用真实演员的表演驱动一个 AI 生成角色:

工作流程:

  1. 录制一段演员的面部表情视频(摄像头正面录制,光线均匀,背景简单)。
  2. 在 Runway 里上传该视频和一张目标角色图片。
  3. Act One 会把演员的面部运动(眼睛、嘴、眉毛、头部转向)映射到角色图片上。
  4. 输出一段角色「演出」的视频,角色保持图片里的外形,动作/表情跟随演员。

适用场景:

  • 卡通角色讲解视频
  • 短剧 AI 角色配音+口型驱动
  • 产品 IP 形象动态化

目前 Act One 对正面、光线充足的录制效果最好,侧脸和强反光会降低映射精度。


七、Lip Sync(语音驱动嘴型) ​

上传一段音频(WAV/MP3)+ 一张人物图片或一段视频,Runway 会自动匹配嘴型,让人物「说出」音频内容。

步骤:

  1. 在主功能菜单选「Lip Sync」。
  2. 上传目标图片或视频(支持 AI 生成图/真实照片)。
  3. 上传音频文件,或直接在界面录音。
  4. 生成后可以下载带嘴型动画的视频。

注意事项:

  • 正面人脸效果最佳;侧脸 45° 以内尚可;纯侧脸会明显失真
  • 音频清晰度直接影响嘴型准确率——背景噪音多的音频先做降噪处理再上传
  • Lip Sync 消耗 Credits,长度以秒计费

八、完整创作工作流示例 ​

以「制作一段 15 秒的品牌形象视频」为例:

步骤 1:生成主场景视频

用 Image to Video 导入品牌视觉图(已有设计稿),用 Motion Brush 设置背景光线流动、前景产品微旋,Camera Control 选 Slow Push In。生成 10 秒。

步骤 2:生成 Logo 动画

单独用 Text to Video 生成:Company logo animation, particles assembling into shape, dark background, gold accent, 5 seconds, static camera

步骤 3:生成旁白驱动镜头

录制 5 秒旁白音频,上传品牌 IP 形象图,用 Lip Sync 生成 IP 角色说话片段。

步骤 4:在视频编辑器拼接

把三段下载到本地,在 Runway 内置的多轨编辑器(或 Premiere/DaVinci)拼接、加背景音乐、调色。

整套流程从素材到交付大约 2-4 小时,不需要传统的三维渲染或摄影棚。


九、五类常见问题与修法 ​

问题 1:生成中途页面刷新,任务消失

线路不稳是主因。任务队列在服务器端处理,浏览器断线不影响已提交的任务——重新打开 app.runwayml.com 后,在「My Assets」里找生成结果。

问题 2:Credits 消耗比预期快

检查是否在多个标签页同时提交,或者误触了高分辨率选项。Credits 在确认提交时扣除,取消排队中的任务可以返还 Credits(排队状态内有「Cancel」按钮)。

问题 3:视频有明显的「AI 感」——人物动作僵硬

提示词里减少动作描述,改用光线变化驱动画面:soft lighting shift from left to right, subtle environmental movement, no character movement。或者用 Video to Video 对自拍素材重绘风格,原始运动自然、重绘后只改画风。

问题 4:Motion Brush 效果不符合预期

笔刷区域和方向设置后,先用最小幅度测试(Strength 调低)。幅度过大会导致画面撕裂;建议先出一个 5 秒低分辨率预览,确认运动轨迹再出正片。

问题 5:Lip Sync 嘴型和音频对不上

音频文件里如果有前置静音(开口前有 0.5 秒以上的空白),先用音频编辑工具裁掉空白再上传。嘴型映射以音频波形为时间轴,前置静音会让整体映射偏移。


FAQ ​

Q:Runway 生成的视频有商业版权吗?

Standard 及以上套餐生成的内容,Runway 授予用户完整商业使用权,可用于广告、发行、商业短片。Free 套餐生成的内容有授权限制,具体见官方 Terms of Service。

Q:Runway 有中文界面吗?

目前界面为英文,无官方中文版。但提示词支持中英混写,Runway 会自动理解,建议核心描述用英文以获得最佳效果。

Q:和 Sora 相比,Runway 的优势是什么?

Runway 的功能深度更高,Motion Brush、Act One、Lip Sync、多轨编辑器是 Sora 没有的;Sora 在自然场景的画质稳定性上略占优,上手门槛更低。如果你是内容创作者需要「完整工作流」,选 Runway;如果你只需要「输入一句话出一段风景视频」,Sora 更简单直接。

Q:能在手机上使用 Runway 吗?

Runway 有 iOS 和 Android App,但核心生成功能仍在 Web 端更完整。App 主要用于查看和下载已生成的视频,以及简单的 Gen-4 提交。

Q:生成的视频最长能有多长?

单次生成最长 10 秒;通过连续 Extend 可以拼接更长,但每段衔接处需要手动确认一致性。实际制作中,一般先生成 5 秒或 10 秒片段,在视频编辑软件里拼接,比在 Runway 内无限 Extend 更可控。


相关链接 ​