Meta开源生成式AI工具AudioCraft，能帮助用户通过文本提示创作音乐和音频

新知榜官方账号

2023-10-11 03:02:21

Meta开源生成式AI工具AudioCraft，能帮助用户通过文本提示创作音乐和音频

美国东部时间8月2日，Meta开源了一款生成式AI工具AudioCraft，可帮助用户通过文本提示创作音乐和音频。根据Meta官方介绍，AudioCraft包含了三个核心组件：

MusicGen：使用Meta拥有/特别授权的音乐进行训练，根据文本提示生成音乐。
AudioGen：使用公共音效进行训练生成音频或扩展现有音频，后续还可生成环境音效（如狗叫、汽车鸣笛、木地板上的脚步声）。
EnCodec（改进版）：基于神经网络的音频压缩解码器，可生成更高质量的音乐并减少人工痕迹，或对音频文件进行无损压缩。

官方宣称AudioCraft系列模型能够长期稳定地生成高质量音频，而且易于使用，能够为音乐家和声音设计师“提供灵感”，帮助他们快速集思广益，并“以新的方式迭代他们的作品”。

今年6月份Meta开源了AI语言模型MusicGen，该模型基于谷歌2017年推出的Transformer模型。如同模型名称所示，MusicGen主要用于音乐生成，它可以将文本和已有的旋律转化为完整乐曲。

演示视频：https://www.bilibili.com/video/BV1hK4y1F7xj/

AudioCraft项目地址：https://github.com/facebookresearch/AudioCraft

本页网址：https://www.xinzhibang.net/article_detail-16312.html

寻求报道，请

关键词

分享至微信：

相关工具

幻舟AI

一站式AI影视创作平台

Gencraft

AI艺术画视频生成工具

Fliki

AI文字转视频并配音

万彩微影

AI智能自动生成动画短视频

Synthesia

AI视频生成平台

Elai.io

AI文本到视频生成工具

视频翻译工具myheygen的详细安装及使用教程

视频翻译工具myheygen的详细安装及使用教程近期，一款名为“视频翻译”的工具引起了广泛关注。这不是一个简单的网页应用，而是一个可以免费部署在个人电脑或服务器上的实用程序。它的强大之处在于能够翻译任意时长的视频内容。所谓的视频翻译，实际上是指同声传译。虽然这类工具并非近期才问世，市场上已有多款成熟

分类标签视频翻译工具myheygen安装教程

12-03 16:20

Pika获得5500万美元融资，将推出多种风格视频编辑工具

Pika获得5500万美元融资，将推出多种风格视频编辑工具Pika是一家创造AI驱动平台以编辑和从标题及静态图像生成视频的初创公司，今天宣布在LightspeedVenturePartners领投的融资轮中筹集了5500万美元。此轮融资还得到了Homebrew、ConvictionCapital、S

分类标签 PikaAI驱动平台视频编辑工具

11-30 08:49

每日AIGC关注：AI前沿科技资讯及开源工具

双阶方法实现更高清的文本视频生成I2VGen-XL模型采用双阶段方法解决视频合成中的挑战，例如保持语义准确性和清晰、连续的图像，首先将语义连贯性与视频质量增强分开处理。第一阶段专注于保留静态图像的内容，第二阶段则细化细节和分辨率。开源MusicGen升级至立体声生成AudiocraftMusicGe

分类标签视频合成文本转化为音乐计算机视觉精细调整模型人工智能多语言模型

11-30 08:48

Runway Gen1使用教程

Runway Gen1使用教程最近有好几个学员私信我们，让我出一期Runway完整的使用教程，刚好11月Runway对外发布运动涂笔等新功能，那么今天就给大家安排一期全功能，超详细的从Gen1到Gen2的使用教程。Runway是国外一家在线视频剪辑制作网站，作为全球AI视频制作前沿模型，目前拥有30

分类标签 RunwayGen1视频制作

11-30 08:41

RunwayGen1使用教程（二）：Gen2、FI教程详解

RunwayGen1使用教程（二）：Gen2、FI教程详解昨天给大家分享了RunwayGen1的使用教程，一篇文章就能让你轻松掌握使用文字和图像从现有视频生成新的视频技能，还没有看过的同学们可以回看过往文章。Runway视频生成功能有3大核心成品Gen1：视频转视频工具Gen2：视频生成编辑工具FI

分类标签 RunwayGen1视频生成Gen2FI

11-29 04:09

图片生成数字人：创新无限，将未来绘制在指尖

随着人工智能技术的不断发展，图片生成数字人已经逐渐走入我们的视野，并为我们带来了许多独特的好处。图片生成数字人提供了强大的创作工具，让艺术创作者能够以更直观的方式表达自己的思想和想象力。借助这个技术，他们可以轻松地创建独一无二的角色形象，打破了传统手绘受限的局限性，为艺术创作带来了全新的可能性。此外

分类标签图片生成数字人人工智能技术万彩AI

11-20 22:18

用万彩微影让自己的照片变身数字人

用万彩微影让自己的照片变身数字人万彩微影是一个在线AI创作平台，可以将用户上传的照片转化为数字人，实现个性化创作。通过数字人，用户可以展示自己的个性，传达情感，进行创作，打开一个无限创意的世界。当下AI技术日新月一响，猛发展。其中一项独特而有趣的应用便是用自己的照片生成数字人。这项技术的好处不胜枚举

分类标签万彩微影数字人AI创作平台

11-20 22:17

惊喜无限！AI自动生成视频，让你惊喜连连

惊喜无限！AI自动生成视频，让你惊喜连连如今，随着科技的不断进步，AI技术的应用范围也越来越广泛。其中一项令人震惊的技术就是AI自动生成视频。这项技术不仅给我们带来了极大的便利，更是为我们带来了惊喜无限的体验。AI自动生成视频无论在内容创作还是消费娱乐方面都具备巨大的好处。传统的视频制作需要大量的人

分类标签 AI自动生成视频万彩AI在线AI创作平台

11-20 16:21

AI合成视频的惊喜魅力

现如今人工智能AI技术正在以前所未有的速度发展，其中AI合成视频技术领域迎来了革命性的突破，不仅将我们带入了炫彩分成了虚拟世界，更为人们创作带来了前所未有的便利与乐趣。在这个充满创新的时代，万彩AI提供了一款强大的在线AI创作平台，让任何人都可以轻松合成出令人叹为观止的视频作品。AI合成视频不仅可以

分类标签 AI合成视频万彩微影人工智能

11-20 16:20

AI技术颠覆视频行业，Runway推出运动画笔

AI技术颠覆视频行业，Runway推出运动画笔AI技术又一次颠覆了视频行业的格局，让制作视频更加轻松了。Runway推出的运动画笔可以让用户自己控制键，想哪动哪动想动哪动哪。只要用画笔把想动的地方涂上，AI会自动计算这个动作所需要的光影气氛动作逻辑，整个过程行云流水自然丝滑，让栩栩如生不再只是“如生

分类标签 AI视频工具运动画笔影视行业

11-18 04:18

ChatGPT Midjourney 文心一言文心一格 bing新必应 Stable diffusion 稿定设计墨刀AI mastergo Adobe Firefly runway