微软发布人工智能工具VALL-E，只需3秒音频即可模仿人说话

新知榜官方账号

2023-09-30 17:16:13

微软发布人工智能工具VALL-E，只需3秒音频即可模仿人说话

最近，微软发布了一款名为VALL-E的人工智能工具。该工具经过60000小时英语语音数据的训练，并使用特定语音的3秒剪辑来生成内容。与目前的许多人工智能工具不同，VALL-E可以复制说话者的情绪和语气，即使说话者本人从未说过的单词也可以模仿。

康奈尔大学的一篇论文使用VALL-E合成了几种声音，大家可以在GitHub上聆听这些AI合成的音频。研究人员指出，在许多情况下，Vall-E的性能优于当前的文本到语音转换模型。然而，该研究还写道，人工智能模型目前存在几个问题。例如，文本提示中的某些单词可能会发音不清晰、完全遗漏或在输出中出现两次。此外，该模型目前难以模仿某些声音，尤其是带有口音的声音。

像其他AI新技术一样，VALL-E在安全、伦理等方面也引发了担忧。微软发布了关于使用VALL-E的道德声明，但未来的使用用途方面没有明确说明。目前，微软Vall-E尚未开源。微软已经在GitHub上创建了一个Vall-E存储库，但目前只包含一个描述文件。

本页网址：https://www.xinzhibang.net/article_detail-14540.html

寻求报道，请

关键词

分享至微信：

相关工具

Artflow

AI创建生成视频动画

Fliki

AI文字转视频并配音

Wonder Studio

AI自动为CG角色制作动画、打光并将其合成到真人场景中

一帧秒创

简单好用的AI智能视频创作平台

Veed Video Background Remover

Veed推出的AI视频背景移除工具

Synthesys

AI虚拟人出镜讲解

视频翻译工具myheygen的详细安装及使用教程

视频翻译工具myheygen的详细安装及使用教程近期，一款名为“视频翻译”的工具引起了广泛关注。这不是一个简单的网页应用，而是一个可以免费部署在个人电脑或服务器上的实用程序。它的强大之处在于能够翻译任意时长的视频内容。所谓的视频翻译，实际上是指同声传译。虽然这类工具并非近期才问世，市场上已有多款成熟

分类标签视频翻译工具myheygen安装教程

12-03 16:20

Pika获得5500万美元融资，将推出多种风格视频编辑工具

Pika获得5500万美元融资，将推出多种风格视频编辑工具Pika是一家创造AI驱动平台以编辑和从标题及静态图像生成视频的初创公司，今天宣布在LightspeedVenturePartners领投的融资轮中筹集了5500万美元。此轮融资还得到了Homebrew、ConvictionCapital、S

分类标签 PikaAI驱动平台视频编辑工具

11-30 08:49

每日AIGC关注：AI前沿科技资讯及开源工具

双阶方法实现更高清的文本视频生成I2VGen-XL模型采用双阶段方法解决视频合成中的挑战，例如保持语义准确性和清晰、连续的图像，首先将语义连贯性与视频质量增强分开处理。第一阶段专注于保留静态图像的内容，第二阶段则细化细节和分辨率。开源MusicGen升级至立体声生成AudiocraftMusicGe

分类标签视频合成文本转化为音乐计算机视觉精细调整模型人工智能多语言模型

11-30 08:48

Runway Gen1使用教程

Runway Gen1使用教程最近有好几个学员私信我们，让我出一期Runway完整的使用教程，刚好11月Runway对外发布运动涂笔等新功能，那么今天就给大家安排一期全功能，超详细的从Gen1到Gen2的使用教程。Runway是国外一家在线视频剪辑制作网站，作为全球AI视频制作前沿模型，目前拥有30

分类标签 RunwayGen1视频制作

11-30 08:41

RunwayGen1使用教程（二）：Gen2、FI教程详解

RunwayGen1使用教程（二）：Gen2、FI教程详解昨天给大家分享了RunwayGen1的使用教程，一篇文章就能让你轻松掌握使用文字和图像从现有视频生成新的视频技能，还没有看过的同学们可以回看过往文章。Runway视频生成功能有3大核心成品Gen1：视频转视频工具Gen2：视频生成编辑工具FI

分类标签 RunwayGen1视频生成Gen2FI

11-29 04:09

图片生成数字人：创新无限，将未来绘制在指尖

随着人工智能技术的不断发展，图片生成数字人已经逐渐走入我们的视野，并为我们带来了许多独特的好处。图片生成数字人提供了强大的创作工具，让艺术创作者能够以更直观的方式表达自己的思想和想象力。借助这个技术，他们可以轻松地创建独一无二的角色形象，打破了传统手绘受限的局限性，为艺术创作带来了全新的可能性。此外

分类标签图片生成数字人人工智能技术万彩AI

11-20 22:18

用万彩微影让自己的照片变身数字人

用万彩微影让自己的照片变身数字人万彩微影是一个在线AI创作平台，可以将用户上传的照片转化为数字人，实现个性化创作。通过数字人，用户可以展示自己的个性，传达情感，进行创作，打开一个无限创意的世界。当下AI技术日新月一响，猛发展。其中一项独特而有趣的应用便是用自己的照片生成数字人。这项技术的好处不胜枚举

分类标签万彩微影数字人AI创作平台

11-20 22:17

惊喜无限！AI自动生成视频，让你惊喜连连

惊喜无限！AI自动生成视频，让你惊喜连连如今，随着科技的不断进步，AI技术的应用范围也越来越广泛。其中一项令人震惊的技术就是AI自动生成视频。这项技术不仅给我们带来了极大的便利，更是为我们带来了惊喜无限的体验。AI自动生成视频无论在内容创作还是消费娱乐方面都具备巨大的好处。传统的视频制作需要大量的人

分类标签 AI自动生成视频万彩AI在线AI创作平台

11-20 16:21

AI合成视频的惊喜魅力

现如今人工智能AI技术正在以前所未有的速度发展，其中AI合成视频技术领域迎来了革命性的突破，不仅将我们带入了炫彩分成了虚拟世界，更为人们创作带来了前所未有的便利与乐趣。在这个充满创新的时代，万彩AI提供了一款强大的在线AI创作平台，让任何人都可以轻松合成出令人叹为观止的视频作品。AI合成视频不仅可以

分类标签 AI合成视频万彩微影人工智能

11-20 16:20

AI技术颠覆视频行业，Runway推出运动画笔

AI技术颠覆视频行业，Runway推出运动画笔AI技术又一次颠覆了视频行业的格局，让制作视频更加轻松了。Runway推出的运动画笔可以让用户自己控制键，想哪动哪动想动哪动哪。只要用画笔把想动的地方涂上，AI会自动计算这个动作所需要的光影气氛动作逻辑，整个过程行云流水自然丝滑，让栩栩如生不再只是“如生

分类标签 AI视频工具运动画笔影视行业

11-18 04:18