Stable Diffusion用embedding模型避免画崩
在测试模型时,尽管使用相同的配置和提示词,生成结果却不同。原因在于未安装embedding模型。embedding(嵌入或文本反转)是将高维数据映射到低维空间的技术,常用于图像处理和生成。在Stable Diffusion中,embedding可以指导模型生成特定特征,如避免生成“坏手”。常用的embedding模型包括badhandv4、EasyNegative等。安装方法是将embedding
前几天和朋友一起测试一个模型,同样的配置(3060 12G),用同样的提示词,她画出来的是这样的:
而我画出来的是这样的:
我们用的负面提示词也是一样的,问题出在哪儿了?
我仔细看了看她的提示词,一拍脑袋,说想起来了,你没有安装embedding模型。
负面提示词里藏了几个embedding。
什么是embedding?
embedding,又名textual inversion,中文名“嵌入或文本反转”。
在计算机科学中,embedding是将高维数据映射到低维空间的过程。在图像处理中,embedding通常用于将图像转换为向量表示,以便进行机器学习和深度学习任务。在使用stable diffusion进行绘画时,embedding可以用于将输入的图像转换为向量表示,以便于算法对其进行处理和生成新的图像。这种技术可以使算法更加高效地处理图像数据,并提高生成图像的质量和准确性。
如果你看不懂这段定义也没关系,简单讲,可以把embedding理解为一种提前训练好的模型,在模型处理的过程中,告诉模型要如何操作,比如embedding里含有白发的信息,那么模型生成的所有图像都会体现出白发。
但正常操作时,只要提示词足够充分,嵌入式模型的意义不大,于是,“反向”使用它有了奇效。
比如,把画坏的手的信息放到embedding里,然后再填入到负面提示词,这样模型处理的时候,就不去生成embedding里提示的坏手。
以我常用的badhandv4为例,不使用embedding,容易生成坏手,使用了embedding,出现坏手的几率就大大下降(也不是完全不出现)。
常用的除了badhandv4外,还有EasyNegative、ng_deepnegative_v1_75t等。
使用方式很简单,将embedding文件下载,拷贝至根目录下的embedding目录里,文件扩展名一般为pt或safetensors。
然后在文生图的时候,负面提示词里输入文件名即可(不需输入扩展名)。
关于AI绘画技术储备
学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!
感兴趣的小伙伴,赠送全套AIGC学习资料和安装工具,包含AI绘画、AI人工智能等前沿科技教程,模型插件,具体看下方。
需要的可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】
一、AIGC所有方向的学习路线
AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。
二、AIGC必备工具
工具都帮大家整理好了,安装就可直接上手!
三、最新AIGC学习笔记
当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
四、AIGC视频教程合集
观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
五、实战案例
纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
这份完整版的学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

GitCode 天启AI是一款由 GitCode 团队打造的智能助手,基于先进的LLM(大语言模型)与多智能体 Agent 技术构建,致力于为用户提供高效、智能、多模态的创作与开发支持。它不仅支持自然语言对话,还具备处理文件、生成 PPT、撰写分析报告、开发 Web 应用等多项能力,真正做到“一句话,让 Al帮你完成复杂任务”。
更多推荐
所有评论(0)