热门搜素: 电商 教育 视频 健康
新知榜公众号 随时随地查看资讯 手机访问更加便捷
首页 > 行业观察 > StableDoodle:通过文本提示+草图直接生成高精准的产品
StableDoodle:通过文本提示+草图直接生成高精准的产品
新知榜官方账号
2023-11-25 16:15:15
7月14日,生成式AI平台StabilityAI在官网宣布推出StableDoodle。据悉,StableDoodle是一款通过文本提示+草图直接生成高精准的产品,例如,画一个苹果的轮廓,然后在文本框输入“这是一个苹果”选择一个3D样式点击生成即可,就可以得到相匹配的3D图片。如果不满意,点击继续生成直到满意为止。值得一提的是,StableDoodle采用了腾讯出品的文本到图片扩散模型控制器T2I-Adapter,使其能够精准理解轮廓、边缘等形态。(T2I-Adapter开源地址:https://github.com/TencentARC/T2I-Adapter)
AIGC开放社区体验作品目前,多数图片扩散模型只能通过文本生成,得到的图片效果与预期相差较远,即便进行多次调整在角度、形态方面依然不理想。StableDoodle则提供了全新的草图辅助功能,以及多种图片样式选择,极大提升了图片的准确率。这对于专业设计师、室内设计师以及绘画爱好者,都能获得极佳的图片生成体验。对于很多企业来说可以通过StableDoodle制作企业标志、PPT插图、网站配图等。教育者则可以通过该平台教授绘画技巧,帮助他们提升技能。
技术方面,StableDoodle由StableDiffusionXL模型与T2I-Adapter相结合而成。其中,T2I-Adapter是腾讯ARC实验室出品的一款文本到图片扩散模型控制器。T2I-Adapter非常小巧参数只有70M存储空间300M,但能够在冻结时给预训练的文本到图像模型提供额外指导。能检测出草图的边缘图,检测出人形图形的关键姿势适配,还有基于分割的边缘对象检测器和深度检测器,这使得生成的图片在形态方面非常精准。所以,T2I-Adapter为预训练的文本到图像模型StableDiffusionXL提供了精准的补充指导,使其能够理解草图的轮廓,并根据提示与模型定义的轮廓相结合生成图像。StableDoodle的使用方法非常简单,目前用户无需注册可免费体验,不过每天生成的图片数量有限制,以下是使用流程。
以下是通过StableDoodle生成的案例欣赏。
相关工具
相关文章
相关快讯
短视频知识人物影响力榜
新知榜独家 {{faTime.effecttime}}发布
总榜
人物 领域 粉丝数 影响力指数
{{item.manIndex}}
{{item.nickname}} {{item.field}}
{{item.fs}}
{{item.effect}}