Runway发布AI视频编辑工具Gen2，免费体验可生成自然美景、宇宙奇观、微观细胞等高清视频

新知榜官方账号

2023-10-16 02:10:20

Runway发布了一款名为Gen2的AI视频编辑工具，用户可以通过输入提示词和参考图像，生成自然美景、宇宙奇观、微观细胞等高清视频。目前官网可免费体验Gen2的功能是文生视频（TexttoVideo），但Gen1也开放了视频生视频（VideotoVideo）的功能。

Gen2于今年3月20日正式发布，经历了两个多月的内测，现在终于正式上线。它的前代Gen1只比它早了一个多月（2月发布），所以说迭代速度相当快。作为一个基于扩散的生成模型，Gen1通过在预训练图像模型中引入时间层，并在图像和视频数据上进行联合训练，完成了潜扩散模型到视频生成领域的扩展。其中也包括使用一种全新的引导方法完成了对生成结果时间一致性的精确控制。

在训练阶段，先用固定编码器将输入视频x编码为z0，并扩散为zt。然后对MiDaS获得的深度图进行编码，提取出结构表示s；再用CLIP对其中一个帧进行编码来获取内容表示c。接着，在s的帮助下，模型学习反转潜空间中的扩散过程（其中s与c以及通过交叉注意块生成的c相连）。在推理阶段，模型以相同的方式提供输入视频的结构s。为了通过文本生成内容，作者还通过一个prior将CLIP文本嵌入转换为图像嵌入。最终，Gen1可以生成细粒度可控的视频，也能对一些参考图像进行定制。

不过，一开始对公众发布的Gen1只能对已有视频进行编辑，Gen2才直接完成了文生视频的“蜕变”。并且一口气带来了另外7大功能，包括文本+参考图像生视频、静态图片转视频、视频风格迁移等等。这样的Gen2，也在内测阶段就被网友称赞“视频界的Midjourney”。而根据官方的调研数据，Gen2确实更受用户欢迎：用户得分比StableDiffusion1.5要高73.53%，比Text2Live则高上了88.24%。

如果你想要生成效果更好，可以多使用“inthestyleofxxx”的形式，比如：Apalmtreeonatropicalbeachinthestyleofprofessionalcinematography,shallowdepthoffield,featurefilm.或者直接去它的灵感库，选择一个你喜欢的视频然后点击“tryit”即可查看它的提示词是怎么写的，然后在上面进行编辑或模仿就好了。

需要注意的是，免费试用的额度为105秒（右上角显示剩余额度），每个视频为4秒，也就是大约可免费生成26个Gen2视频。额度用完或者你想体验去水印、提升分辨率等额外功能，就需要买会员，标准版为15美元一个月，Pro版35美元，年付更便宜一些。

PC、手机都能玩网页端和移动端（仅限iOS系统）现在均可正式开始体验。以网页端为例，进入Runway官方主页（文末链接[1]），点击上方“TRYNOW”并注册账号，就可以进入下面的界面：点击右方的“IntroducingGen2”，我们就可以正式开玩了。首先，输入提示词，最多320个字符，然后在左边的设置菜单里进行一些基础配置（包括种子参数、插值等），点击“Generate”。（当然，你也可以为视频提供一张参考图像，点击右边的图像图标即可。）不到1分钟的功夫，视频就出来了。点击下方播放按钮即可查看效果，视频可以直接保存到本地，也可以只保存在你的账户中。当然，如果你不满意，还能在下方的提示词框中继续修改。

就连物种、性别，都可以随随便便地切换。在看完Gen2生成的这波“大秀”之后，网友们不淡定了，直呼：娱乐圈要被生成式AI重新定义了。

本页网址：https://www.xinzhibang.net/article_detail-16870.html

寻求报道，请

关键词

Runway AI视频编辑工具 Gen2 免费体验自然美景宇宙奇观微观细胞

分享至微信：

相关工具

SteveAI

Animaker旗下AI在线视频制作工具

Unscreen

AI智能视频背景移除工具

Rephrase.ai

AI文字到视频生成

DeepBrain

AI口播视频生成工具

奇妙元

AI数字人视频生成平台，由出门问问推出

Synthesys

AI虚拟人出镜讲解

视频翻译工具myheygen的详细安装及使用教程

视频翻译工具myheygen的详细安装及使用教程近期，一款名为“视频翻译”的工具引起了广泛关注。这不是一个简单的网页应用，而是一个可以免费部署在个人电脑或服务器上的实用程序。它的强大之处在于能够翻译任意时长的视频内容。所谓的视频翻译，实际上是指同声传译。虽然这类工具并非近期才问世，市场上已有多款成熟

分类标签视频翻译工具myheygen安装教程

12-03 16:20

Pika获得5500万美元融资，将推出多种风格视频编辑工具

Pika获得5500万美元融资，将推出多种风格视频编辑工具Pika是一家创造AI驱动平台以编辑和从标题及静态图像生成视频的初创公司，今天宣布在LightspeedVenturePartners领投的融资轮中筹集了5500万美元。此轮融资还得到了Homebrew、ConvictionCapital、S

分类标签 PikaAI驱动平台视频编辑工具

11-30 08:49

每日AIGC关注：AI前沿科技资讯及开源工具

双阶方法实现更高清的文本视频生成I2VGen-XL模型采用双阶段方法解决视频合成中的挑战，例如保持语义准确性和清晰、连续的图像，首先将语义连贯性与视频质量增强分开处理。第一阶段专注于保留静态图像的内容，第二阶段则细化细节和分辨率。开源MusicGen升级至立体声生成AudiocraftMusicGe

分类标签视频合成文本转化为音乐计算机视觉精细调整模型人工智能多语言模型

11-30 08:48

Runway Gen1使用教程

Runway Gen1使用教程最近有好几个学员私信我们，让我出一期Runway完整的使用教程，刚好11月Runway对外发布运动涂笔等新功能，那么今天就给大家安排一期全功能，超详细的从Gen1到Gen2的使用教程。Runway是国外一家在线视频剪辑制作网站，作为全球AI视频制作前沿模型，目前拥有30

分类标签 RunwayGen1视频制作

11-30 08:41

RunwayGen1使用教程（二）：Gen2、FI教程详解

RunwayGen1使用教程（二）：Gen2、FI教程详解昨天给大家分享了RunwayGen1的使用教程，一篇文章就能让你轻松掌握使用文字和图像从现有视频生成新的视频技能，还没有看过的同学们可以回看过往文章。Runway视频生成功能有3大核心成品Gen1：视频转视频工具Gen2：视频生成编辑工具FI

分类标签 RunwayGen1视频生成Gen2FI

11-29 04:09

图片生成数字人：创新无限，将未来绘制在指尖

随着人工智能技术的不断发展，图片生成数字人已经逐渐走入我们的视野，并为我们带来了许多独特的好处。图片生成数字人提供了强大的创作工具，让艺术创作者能够以更直观的方式表达自己的思想和想象力。借助这个技术，他们可以轻松地创建独一无二的角色形象，打破了传统手绘受限的局限性，为艺术创作带来了全新的可能性。此外

分类标签图片生成数字人人工智能技术万彩AI

11-20 22:18

用万彩微影让自己的照片变身数字人

用万彩微影让自己的照片变身数字人万彩微影是一个在线AI创作平台，可以将用户上传的照片转化为数字人，实现个性化创作。通过数字人，用户可以展示自己的个性，传达情感，进行创作，打开一个无限创意的世界。当下AI技术日新月一响，猛发展。其中一项独特而有趣的应用便是用自己的照片生成数字人。这项技术的好处不胜枚举

分类标签万彩微影数字人AI创作平台

11-20 22:17

惊喜无限！AI自动生成视频，让你惊喜连连

惊喜无限！AI自动生成视频，让你惊喜连连如今，随着科技的不断进步，AI技术的应用范围也越来越广泛。其中一项令人震惊的技术就是AI自动生成视频。这项技术不仅给我们带来了极大的便利，更是为我们带来了惊喜无限的体验。AI自动生成视频无论在内容创作还是消费娱乐方面都具备巨大的好处。传统的视频制作需要大量的人

分类标签 AI自动生成视频万彩AI在线AI创作平台

11-20 16:21

AI合成视频的惊喜魅力

现如今人工智能AI技术正在以前所未有的速度发展，其中AI合成视频技术领域迎来了革命性的突破，不仅将我们带入了炫彩分成了虚拟世界，更为人们创作带来了前所未有的便利与乐趣。在这个充满创新的时代，万彩AI提供了一款强大的在线AI创作平台，让任何人都可以轻松合成出令人叹为观止的视频作品。AI合成视频不仅可以

分类标签 AI合成视频万彩微影人工智能

11-20 16:20

AI技术颠覆视频行业，Runway推出运动画笔

AI技术颠覆视频行业，Runway推出运动画笔AI技术又一次颠覆了视频行业的格局，让制作视频更加轻松了。Runway推出的运动画笔可以让用户自己控制键，想哪动哪动想动哪动哪。只要用画笔把想动的地方涂上，AI会自动计算这个动作所需要的光影气氛动作逻辑，整个过程行云流水自然丝滑，让栩栩如生不再只是“如生

分类标签 AI视频工具运动画笔影视行业

11-18 04:18

ChatGPT Midjourney 文心一言文心一格 bing新必应 Stable diffusion 稿定设计墨刀AI mastergo Adobe Firefly runway