如何使用StableDiffusion制作AI动画

新知榜官方账号

2023-08-20 16:06:21

如何使用StableDiffusion制作AI动画

StableDiffusion是一款AI绘画应用,它的工作原理与我们使用AI生成图像、对图像进行转绘完全相同。本文将介绍如何使用StableDiffusion制作AI动画。

将视频拆分为单帧图片

如果你熟悉Premiere等剪辑软件,可以将一个视频导出为单帧图片序列。但是,我想很多人可能没有接触过,所以我想在WebUI中解决所有问题。我找到了一个国内开发者制作的WebUI扩展,叫做IS-NETPro。将视频拖入即可。在IS-NETPro中,有一个功能可以帮助你将导入的视频拆分为单帧图片,方便重绘。

小规模的风格测试

制作AI动画时需要进行小规模的风格测试。具体来说,可以切换回正常的图生图模式。在视频片段中选择一帧具有代表性的画面,将其放入其中,并像进行常规的图生图一样调试模型、参数和提示词,绘制出你想要的画面。在这种批量重绘的过程中,我通常使用三行提示词来描述画面内容。一行是画质的标准化,需要描述人物或画面主体的具体特征,通常精确到从头到尾都适用的外貌特征。再一行是对背景的描述。提示词也非常重要,因为前后画面不同,不能给出具体的固定提示词。因为批处理是针对每一帧的画面操作的,提示词会被同时代入每一帧的画面中,描述太具体反而容易南辕北辙。

使用批处理进行重绘

完成小规模的风格测试后,可以使用批处理进行重绘。设置好输入、输出文件夹,点击生成,就可以见证这个批量重绘的过程了。在生成窗口上方可以看到一个进度条,显示绘制的剩余时间。完成绘制后,可以到输出文件夹中验收成果。IS-NETPro还能帮我们将这些图片“重组”起来。在这个过程中要注意帧率,原视频的帧率是25,这里需要保持一致,否则后期的视频速度会不一致。

本页网址:https://www.xinzhibang.net/article_detail-10106.html

寻求报道,请 点击这里 微信扫码咨询

关键词

StableDiffusion AI绘画 动画制作

分享至微信: 微信扫码阅读

相关工具

相关文章

相关快讯