StableDiffusion——AI绘画工具

新知榜官方账号

2023-08-10 08:26:43

StableDiffusion——AI绘画工具

StableDiffusion是目前最火的AI绘画工具之一,它是一个免费开源的项目,可以被任何人免费部署和使用。通过StableDiffusion,可以很轻松的通过文字描述,生成对应的图片。StableDiffusion是一个深度学习文本到图像生成模型,是stability.ai开源的图像生成模型,而StableDiffusionWebUI把StableDiffusion模型进行了封装,提供更加简洁易操作的界面。他们两个的关系类似父子继承关系,目前使用的最多的是StableDiffusionWebUI,因为它界面友好,可以很方便的调整各项参数,生成高质量的图片。

使用StableDiffusion之前,有几个重要的组件,需要首先了解:

1. 模型

模型可以简单理解,你想画什么风格的画。模型包括大模型(基础模型)、Lora(微调模型)、VAE模型(变分自编码器)、Embeding(提示词打包)、Hypernetworks用的比较少。大模型,是SD能够绘图的基础模型。安装完SD软件后,必须搭配基础模型才能使用。不同的基础模型,其画风和擅长的领域会有侧重。Lora模型,是与大模型配套使用,用于抽取画作的风格特征(例如人物特征属性),创作出相似度非常高的作品。VAE模型,全名Variationalautoenconder,中文叫变分自编码器,与大模型配套使用,VAE模型具有两种功能,一种是滤镜(就像是PS、抖音、美图秀秀等)用到的滤镜一样,让出图的画面看上去不会灰蒙蒙的,让整体的色彩饱和度更高。另一种是微调,部分VAE会对出图的细节进行细微的调整(个人觉得变化并不明显仅会对细节处微调)Embeding、Hypernetworks用的比较少,暂不介绍。

2. 插件

插件就是扩展,插件就是给StableDiffusion这套系统附魔的。就是说,通过插件,我们的StableDiffusion就会有更多的功能,我们耳熟能详的ControlNet其实就是StableDiffusion里的一个插件。常用插件:sd-webui-mov2mov(AI视频转换)、ControNet(提取人物自身、提取图像纹理结构)、zh_CN汉化、tag_complete标签自动补齐、cutoff、bilingual_localization双语提示、Segmentanything(它可以快速地把你想要切割的部分分割出来)

3. 提示词

Prompt,有些地方也称之为关键词,主要目的是我们通过提示词,告诉StableDiffusion我们需要什么样的图。而提示词则分为正向提示词和反向提示词,正向提示词是告诉StableDiffusion我们要什么,比如bestquality,4k,1girl,这就是告诉StableDiffusion我们要画的内容里要包括最好画质,4K分辨率,1个女孩。而反向提示词则可以是Twistedfingers,multipleheads,multiplearms,当你把这个放进反向提示词里,则是告诉StableDiffusion输入框如下:

4. 产品经理与市场的角度分析

StableDiffusion是一款非常优秀的AI绘画工具,它通过深度学习技术,可以将文字描述转化为对应的图片。在市场上,AI绘画工具已经成为一个热门的领域,这也是StableDiffusion能够受到欢迎的原因之一。对于产品经理而言,StableDiffusion的市场前景广阔,可以在多个领域得到应用,例如广告设计、游戏开发等。同时,StableDiffusion的开源模式也使得它更加具有竞争力,可以吸引更多的用户和开发者,共同推动产品的发展。

从用户角度来看,StableDiffusion的用户群体也非常广泛,包括了艺术家、设计师、爱好者等等。这也是因为StableDiffusion提供了非常简单易懂的操作界面,让用户可以轻松地进行创作。同时,StableDiffusion的模型、插件和提示词等重要组件也给用户带来了更多的选择和灵活性,可以满足不同用户的需求。

总之,StableDiffusion是一款非常优秀的AI绘画工具,具有广泛的市场前景和用户群体。同时,它的开源模式也使得它更加具有竞争力,可以吸引更多的用户和开发者,共同推动产品的发展。

5. 常用模型参考

  • Model:DreamShaper
  • Model:majicMIXrealistic
  • Model:MeinaMix
  • Model:SarkSun

本页网址:https://www.xinzhibang.net/article_detail-9661.html

寻求报道,请 点击这里 微信扫码咨询

关键词

StableDiffusion AI绘画 深度学习

分享至微信: 微信扫码阅读

相关工具

相关文章

相关快讯