【涂鸦生成真实模特】Krita AI +comfyui Scribble 涂鸦绘画生成真实人物模特
1.Krita结合comfyui,根据各自的长处,可以更加方便、高效的生成AIGC图片。相比comfyui节点,学习成本少一些。\2. 使用comfyui 的Scribble 涂鸦 功能能够轻松使涂鸦草稿生成真实角色人物。3.flux对硬件要求较高,且不支持Scribble 涂鸦,所以先使用sdxl模型生成低质感的图片,再由flux模型优化。为了帮助大家更好地掌握 ComfyUI,我在去年花了几个
Krita AI作为接近PS的一款软件,能够链接comfyui通过controlnet 的各种控制,可以在生成各种创意AIGC图片的同时使用类似ps的各种工具,如画笔,色彩调整的工具进一步修复已生成的图片。
本次案例使用 Krita AI (需要安装comfyui)中的Scribble 涂鸦controlnet ,通过手绘出大概人物线草图,生成真实人物模特角色。
首先使用XL模型 dreamshaperXL_lightningDPMSDE&4-2 并设置好采样值 这里设置的采样器步数是6 引导强度(CFG规模)为2.
写好想由草稿生成人物角色的特征提示词,如衣服,性别、人种等。
点击“星星”图标,调出Scribble控制层,并适当调节强度、引导等数值。
可以看出效果并不好,不要着急,我们接下来使用Flux修复
同样设置好flux模型的相关 采样器数值,这里用的是EF1.麦橘超然majicFlus_v1模型,步数27 引导为1(数值可以微调)
可以看出优化后的效果明显好了一些。如果感觉效果还不满意,可以通过下面的放大2倍后,再用小数值的优化值继续优化。
作为Stable Diffusion的另一个分支,Krita AI 具备一定的优势,可以简单了解下:
Krita AI结合ComfyUI的分支,为数字绘画和创意设计领域带来了革命性的工具和体验。这一整合不仅提升了用户的工作效率,还为艺术家和设计师提供了强大的AI辅助功能,使创作过程更加高效、直观且富有创造力。
Krita AI与ComfyUI的整合概述
Krita是一款开源且免费的专业绘画软件,以其灵活的绘图功能和丰富的工具选项而闻名。ComfyUI则是一个基于Web的Stable Diffusion界面,专为优化AI生成任务而设计。通过将Krita与ComfyUI结合,用户可以在Krita中无缝调用AI生成技术,实现从图像修复到实时绘画的多种功能。
ComfyUI 的 Scribble 涂鸦 ControlNet 是一种基于 Stable Diffusion 的高级功能,通过涂鸦或草图来引导图像生成,为用户提供了强大的创作工具。以下是关于 Scribble 涂鸦 ControlNet 的详细介绍:
\1. Scribble 涂鸦 ControlNet 的基本概念
Scribble 涂鸦 ControlNet 是一种通过涂鸦或手绘草图来控制图像生成的技术。用户可以在空白画布上绘制简单的草图,然后通过 ComfyUI 的控制网络将这些涂鸦转化为具有丰富细节和艺术风格的图像。这种技术不仅适用于艺术创作,还能用于设计、建模等场景,极大地提升了用户的创作自由度和效率。
\2. ComfyUI 中的 Scribble 模型
在 ComfyUI 中,Scribble 模型通过三种预处理器(Scribble HED、Scribble Pidinet 和 Scribble xDog)来提取图像特征,从而实现不同的效果:
Scribble HED:利用边缘检测技术生成手绘风格的轮廓,适合用于图像的重新着色和艺术风格化。
Scribble Pidinet:专注于检测像素差异,生成清晰的线条,适合需要高精度线条的场景。
Scribble xDog:基于扩展差分方程,能够捕捉到更复杂的边缘细节,适合抽象表现。
Scribble 涂鸦 ControlNet 的核心在于其神经网络结构,它通过引入额外条件(如涂鸦草图)来增强图像生成的可控性。这种技术不仅保留了涂鸦的自由度,还通过算法优化提升了生成图像的质量和细节
ComfyUI 的 Scribble 涂鸦 ControlNet 是一种强大的 AI 创作工具,它通过涂鸦草图引导图像生成,为用户提供了一种全新的创作方式。无论是艺术创作、室内设计还是建筑设计,Scribble 都能带来极大的便利性和灵活性。通过灵活使用预处理器和参数调整,用户可以轻松实现高质量的图像生成,充分释放创意潜力。
使用4x-UltraSharp.pth放大模型,放大两倍后再次采样优化。效果更好了一些。
粗略总结出三点:
1.Krita结合comfyui,根据各自的长处,可以更加方便、高效的生成AIGC图片。相比comfyui节点,学习成本少一些。
\2. 使用comfyui 的Scribble 涂鸦 功能能够轻松使涂鸦草稿生成真实角色人物。
3.flux对硬件要求较高,且不支持Scribble 涂鸦,所以先使用sdxl模型生成低质感的图片,再由flux模型优化。
为了帮助大家更好地掌握 ComfyUI,我在去年花了几个月的时间,撰写并录制了一套ComfyUI的基础教程,共六篇。这套教程详细介绍了选择ComfyUI的理由、其优缺点、下载安装方法、模型与插件的安装、工作流节点和底层逻辑详解、遮罩修改重绘/Inpenting模块以及SDXL工作流手把手搭建。
由于篇幅原因,本文精选几个章节,详细版点击下方卡片免费领取
一、ComfyUI配置指南
- 报错指南
- 环境配置
- 脚本更新
- 后记
- …
二、ComfyUI基础入门
- 软件安装篇
- 插件安装篇
- …
三、 ComfyUI工作流节点/底层逻辑详解
- ComfyUI 基础概念理解
- Stable diffusion 工作原理
- 工作流底层逻辑
- 必备插件补全
- …
四、ComfyUI节点技巧进阶/多模型串联
- 节点进阶详解
- 提词技巧精通
- 多模型节点串联
- …
五、ComfyUI遮罩修改重绘/Inpenting模块详解
- 图像分辨率
- 姿势
- …
六、ComfyUI超实用SDXL工作流手把手搭建
- Refined模型
- SDXL风格化提示词
- SDXL工作流搭建
- …
由于篇幅原因,本文精选几个章节,详细版点击下方卡片免费领取

GitCode 天启AI是一款由 GitCode 团队打造的智能助手,基于先进的LLM(大语言模型)与多智能体 Agent 技术构建,致力于为用户提供高效、智能、多模态的创作与开发支持。它不仅支持自然语言对话,还具备处理文件、生成 PPT、撰写分析报告、开发 Web 应用等多项能力,真正做到“一句话,让 Al帮你完成复杂任务”。
更多推荐
所有评论(0)