头条文章养成计划

新知榜官方账号

2023-07-08 02:18:43

头条文章养成计划

本文章要讨论一种跟StableDiffusion进阶实战——渐进式光影类似，但是用了多重人物LoRA的时候，同时又要求稳定性的调整光影手法。

以下图为例，我使用了两个不同的角色LoRA做出了两个人物，而我想将图片的光源改成左上角，且加深对比并改变相对应的光影，除了使用诸如Studiolighting或Filmlighting等提示词之外，使用ControlNet加上Loopback也是可行的方法：

原图

这张图与之前文章讨论的情形不同的地方在于，我使用了两个LoRA来绘图，所以要借助LatentCouple加上ComposableLora来指定不同区域绘制不同LoRA角色，若不这样做，那人物会在十几回合的循环输入中慢慢变形，最后变成完全不同的人物。另外一点是，我发现若是每次都从全黑的遮罩底图开始输入，人物与原始图片会出现差异，在很多场合上这是个问题，因此这次我要使用不一样的遮罩搭配中低程度的Denoisingstrength，像在小火慢炖食物一样，让图片的轮廓与色彩尽量保持不变，同时让光影缓缓变化。

方法

首先，开启任何有支援图层与透明度的绘图软体，例如PS，将原始图片汇入，在其上加入全黑图层，在图层上用白色或其他高明度的颜色点出光源的位置，再调整图层透明度，让整张图变成类似透过黑色玻璃的效果：

加上遮罩将这张套上遮罩的图片输入img2img，然后开启ComposableLora以及LatentCouple，将两个角色圈选起来，输入他们各自的提示词：

ComposableLoraLatentCouple

LatentCouple的提示词产生的提示词会像这样：

(extremelydetailedCGunity8kwallpaper),bestquality,masterpiece,hdr,ultrahighres,fantasy,indoor,(twilight:1.5),woodenfloorwithcarpet,woodenceiling,redbrickwall,fireplace

AND

(extremelydetailedCGunity8kwallpaper),bestquality,masterpiece,hdr,ultrahighres,Sho16,1boy,blondehair,lowponytail,wearingwhitetunic,fantasy,rightarmup<lora:Sho25:0.4>

AND

(extremelydetailedCGunity8kwallpaper),bestquality,masterpiece,hdr,ultrahighres,Hana,surprised,wide-eyed,wearingwhitekimono,longloosehair,longsleeves,fantasy,rightarmup<lora:Hana:0.4>

第一段提示词是全图背景，第二段提示词是针对涂上蓝色遮罩的男角色，第三段提示词是针对涂上红色遮罩的女角色。

接着是img2img的设定，为了不让角色的衣服、表情与眼神发生太大变动，我测试不同的Denoisingstrength，发现低于0.3能大致保持所有的面部特征：

img2img

而ControlNet中，为了保持人物的表情与姿势，除了使用提示词之外，还要靠最能固定图片形状的canny加上人物表情的openpose_face来牵制线条的变形：

ControlNet的openpose_face设置

ControlNet的canny设置

设定完成之后，接着设定Loopback。因为追求的是低变动，所以要将回合数设定到20回合以上，配上0.4这种稍高的Finaldenoisingstrength，就能缓慢地改变光影：

Loopback设置

出图接着就开始跑图吧！可以看到图形从左上角的明亮光斑，到了最右边已经顺利融合进图片，而人物身上的光影也在缓慢地改变。理论上可以将最终产生的图片重新输入img2img中再跑下一轮20张图片，让人物的光影改变更大，但这同时也会对人物产生更明显的变化，所以要边跑边检查，挑选最符合需求的图片。

本页网址：https://www.xinzhibang.net/article_detail-6677.html

寻求报道，请

关键词

StableDiffusion LoRA ControlNet

分享至微信：

相关工具

BigJPG

免费的在线图片无损放大工具

Waifu Labs

免费在线AI生成二次元动漫头像

Bing Image Creator

微软必应推出的基于DALL·E的AI图像生成工具

ARC

腾讯旗下ARC实验室推出的AI图片处理工具

秘塔捉捉猫

秘塔写作猫推出的AI文字到图像生成工具

Upscayl

免费开源的AI图片无损放大工具

11月科技投资：AI领域融资超5亿，VRAR领域融资近2亿，第三代半导体和钠离子电池也有动静

11月科技投资：AI领域融资超5亿，VRAR领域融资近2亿，第三代半导体和钠离子电池也有动静11月，科技领域发生了多笔重大融资，其中包括AI、VRAR、第三代半导体和钠离子电池等领域。本文将对这些领域的融资情况进行介绍，并提供相应的投资策略和风险提示。AI领域11月，德国AlephAlphaGmbH

分类标签 AI领域VRAR领域第三代半导体钠离子电池投资策略风险提示

12-09 16:02

百度文心大模型3.5超越ChatGPT3.5，未来国内只有少量大模型

近日，IDC发布AI大模型技术能力评估报告显示，百度文心大模型3.5拿下12项指标的7个满分，综合评分第一。在面向新浪科技等媒体沟通中，百度集团副总裁、深度学习技术及应用国家工程研究中心副主任吴甜指出，新版本文心一言3.5已超越ChatGPT3.5，未来国内将只会有少量大模型。吴甜指出，大模型的终

分类标签百度文心大模型ChatGPT3.5大模型产业化

12-04 02:50

百度文心一言的起源、意义和技术原理

百度文心一言的起源百度文心一言最初是由百度公司推出的一种短语句生成工具，旨在为用户提供有趣、富有启示性的语句。每个一言都包含了深刻的思想和有趣的灵感，有时会通过幽默和巧妙的比喻来传达某些概念和情感。随着时间的推移，百度文心一言已经成为了一种文化现象，在中国的网络社区中广泛使用。百度文心一言的意义百度

分类标签百度文心一言起源意义技术原理

12-04 02:49

ChatGPT：AI已具备人类智能？

2022年12月，人工智能聊天机器人ChatGPT刷爆网络，网友们争先恐后去领略它的超高情商和巨大威力。参加高考、修改代码、构思小说......它在广大网友的“鞭策”下不断突破自我，甚至可以用一整段程序，为你拼接出一只小狗。那么，ChatGPT是如何炼成的？是否意味着AI已具有人类智能呢？ChatG

分类标签 ChatGPT人工智能自然语言生成

12-02 22:01

ChatGPT：从GPT-2到GPT-4，AI技术的边界不断扩展

ChatGPT：从GPT-2到GPT-4，AI技术的边界不断扩展ChatGPT作为一款革命性的人工智能产品，其成长历程是技术创新和社会影响力相结合的典范。自从OpenAI于2019年推出GPT-2以来，ChatGPT的发展经历了几个关键阶段，每一步都在推动着AI技术的边界。初创时期：GPT-2的问世

分类标签 ChatGPTGPT-2GPT-3

11-25 08:12

StabilityAI发布基于StableDiffusion的视频生成模型StableVideoDiffusion

StabilityAI发布基于StableDiffusion的视频生成模型StableVideoDiffusionStabilityAI发布了基于StableDiffusion的视频生成模型StableVideoDiffusion，可以根据静态图像生成几秒钟的视频，已经超越了用户偏好研究中领先的闭源

分类标签 StabilityAI视频生成模型StableVideoDiffusion

11-24 06:06

人工智能思维与人类思维的本质区别

人工智能思维与人类思维的本质区别一篇新论文认为，从ChatGPT等系统中看到的人工智能，由于缺乏体现和理解，与人类智能有着本质区别。加州大学的安东尼-切梅罗（AnthonyChemero）最近发表了一篇论文，解释了与人类思维相对的人工智能思维。人工智能的兴起引起了技术高管、政府官员和普通大众的不同反

分类标签人工智能人类智能LLMs

11-23 02:04

ChatGPT 4.0升级，更聪明、更高效、更亲切

ChatGPT 4.0升级，更聪明、更高效、更亲切大家有没有觉得，现在的手机助手越来越智能，可以回答我们各种问题，提供各种服务？这是因为人工智能技术不断发展，推出了更厉害的新版本。最近，一款名叫ChatGPT的人工智能助手就升级到了4.0版本，让我们一起来看看它有哪些新变化吧！ChatGPT 4.0

分类标签 ChatGPT人工智能助手4.0版本

11-23 02:03

ChatGPT之父山姆·阿尔特曼回归OpenAI担任首席执行官

ChatGPT之父山姆·阿尔特曼回归OpenAI担任首席执行官经过5天的反转再反转，“ChatGPT之父”山姆·阿尔特曼将回归OpenAI，担任首席执行官一职。就在几分钟前，OpenAI官方在社交平台上表示：“我们已在原则上达成协议，让SamAltman重返OpenAI担任首席执行官，并组建由Bre

分类标签 OpenAI山姆·阿尔特曼人工智能

11-23 02:02

OpenAI创始人辞职引发科技行业动荡

OpenAI创始人辞职引发科技行业动荡据路透社20日援引科技媒体“TheInformation”报道，美国人工智能公司OpenAI董事会成员伊尔亚·苏茨克维当天在给公司员工的一份声明中称，OpenAI创始人山姆·奥特曼将不会重新担任公司首席执行官（CEO），视频流媒体网站Twitch的联合创始人埃米

分类标签 OpenAI人工智能CEO

11-21 02:01