Muzic: 一个人工智能音乐研究项目

新知榜官方账号

2023-10-07 22:58:27

Muzic: 一个人工智能音乐研究项目

Muzic是一个人工智能音乐研究项目,通过深度学习和人工智能赋能音乐理解和生成。Muzic发音为[ˈmjuːzeik]和'谬贼客'(中文)。除了图像版本的标志(见上),Muzic还有一个视频版本的标志(.)。

我们在下图中总结了我们的Muzic项目的范围:

Muzic目前的工作包括:

  • 音乐理解符号音乐理解:MusicBERT
  • 自动歌词转录:PDAugment
  • 音乐世代歌曲创作:SongMASS
  • 歌词生成:DeepRapper
  • 旋律生成:TeleMelody
  • 伴奏一代:PopMAG
  • 歌声合成:HiFiSinger

您可以从这个页面找到我们系统生成的一些音乐样本:https://ai-muzic.github.io/

我们在ACMMultimedia2021上提供有关AI音乐创作的教程。要求操作系统是Linux。我们在Ubuntu16.04.6LTS、CUDA10和Python3.6.12上进行测试。运行Muzic的要求在中列出requirements.txt。要安装要求,请运行:pipinstall-rrequirements.txt

我们初步发布了5个研究工作的代码:MusicBERT、PDAugment、DeepRapper、SongMASS和TeleMelody。详细的使用说明可以在对应的文件夹中找到README。

如果您发现Muzic项目对您的工作有用,您可以在需要时引用以下论文:

  • MusicBERT:SymbolicMusicUnderstandingwithLarge-ScalePre-Training,MingliangZeng,XuTan,RuiWang,ZeqianJu,TaoQin,Tie-YanLiu,ACL2021。
  • PDAugment:DataAugmentationbyPitchandDurationAdjustmentsforAutomaticLyricsTranscription,ChenZhang,JiaxingYu,LuchinChang,XuTan,JiaweiChen,TaoQin,KejunZhang,arXiv2021。
  • DeepRapper:NeuralRapGenerationwithRhymeandRhythmModeling,LanqingXue,KaitaoSong,DuocaiWu,XuTan,NevinL.Zhang,TaoQin,Wei-QiangZhang,Tie-YanLiu,ACL2021。
  • SongMASS:AutomaticSongWritingwithPre-trainingandAlignmentConstraint,ZhonghaoSheng,KaitaoSong,XuTan,YiRen,WeiYe,ShikunZhang,TaoQin,AAAI2021。
  • TeleMelody:Lyric-to-MelodyGenerationwithaTemplate-BasedTwo-StageMethod,ZeqianJu,PeilingLu,XuTan,RuiWang,ChenZhang,SongruoyaoWu,KejunZhang,XiangyangLi,TaoQin,Tie-YanLiu,arXiv2021。

开源地址:https://github.com/microsoft/muzic

如果你对源码感兴趣,请点赞+转发+关注+评论区留言。欢迎点赞+转发+关注!大家的支持是我分享最大的动力!!!

本页网址:https://www.xinzhibang.net/article_detail-15804.html

寻求报道,请 点击这里 微信扫码咨询

关键词

人工智能音乐 音乐理解 音乐生成

分享至微信: 微信扫码阅读

相关工具

相关文章

相关快讯