开源程序SadTalker:图片转视频工具

新知榜官方账号

2023-07-05 22:46:27

开源程序SadTalker:图片转视频工具

之前给大家介绍过其它的照片转视频,让图片中人物开口讲话的工具,比如heygen,还有D-ID,那些都是在线网站需要付费使用的,今天为大家介绍一个开源程序,可以本地部署无限次使用的工具SadTalker。

SadTalker有多种使用方式,你可以完整安装程序,项目详情页里有安装具体操作步骤,不过本地完整安装的话操作有些麻烦,步骤比较多,这个工具还支持stablediffusion插件模式,我们可以在SD里面安装这个插件直接使用,会方便很多。

首先打开stablediffusion操作页面,然后点击【扩展】-【从网址安装】,然后在git仓库网址里输入:https://github.com/OpenTalker/SadTalker.git,然后点击安装。需要稍微等一下,然后点击【已安装】,列表里有sadtalker就说明已经安装完了。然后再去网盘下载checkpoints和gfpgan,将两个压缩文件下载到extensions\SadTalker文件夹内并解压然后配置ffmpeg,首先打开ffmpeg官网:https://ffmpeg.org/download.html,下载对应系统的文件,然后在cmd里输入如下命令:ffmpeg -version出现详细信息就表示ffmpeg安装成功。然后重启webui,即可使用。可以直接上传图片也可以导入文生图或图生图生成的图片,各项功能如下图所示。视频生成后,你可以点击播放预览视频,也可以鼠标右键点击视频然后选择视频另存为,将视频保存到其它地方。全身模式生成的视频,只有头部会动,身体不会动,头转动的时候和身体有明显的边界,看起来有点怪异,resize模式全身都会动,但是画面都扭曲了,甚至脸都没了,更怪,最好还是crop模式。如果你电脑无法搭建的话,你可以在huggingface上免费体验,链接:https://huggingface.co/spaces/vinthony/SadTalker在huggingface上免费体验的时候有时候需要排队,而且可能需要花费很长时间,也可以付费升级提升速度和体验,如果你就不想花钱的话,也可以在Googlecolab上免费部署体验,链接:https://colab.research.google.com/github/camenduru/stable-diffusion-webui-colab/blob/main/video/stable/stable_diffusion_1_5_video_webui_colab.ipynb直接点击代码左侧三角符号按钮运行代码就可以,等到程序安装完成后,底部会出现三个页面链接,打开链接就可以免费体验SadTalker,但是免费的是无法保证的,googlecolab在使用过程中有可能随时会被终止。有感兴趣的可以去试试吧。

本页网址:https://www.xinzhibang.net/article_detail-6046.html

寻求报道,请 点击这里 微信扫码咨询

关键词

SadTalker 图片转视频 开源程序

分享至微信: 微信扫码阅读

相关工具

相关文章