深度测评:SD3模型表现如何?实用教程助你玩转Stable Diffusion 3 ,最强SD3模型使用攻略,附ComfyUI实操
SD3模型到底如何?StableDiffusion3全面评测!如何使用ComfyUI遍历题词 | 模型?
大家好,我是猫头虎。今天我要给大家带来一篇关于Stable Diffusion 3 (SD3) 模型的全面评测和使用指南。作为刚刚开源的最新一代模型,SD3在架构、性能和功能上都有了显著的提升。本期内容不仅会详细解析SD3的各项改进,还会教大家如何通过ComfyUI进行高效的批处理操作和提示词测试。无论你是AI绘画的新手还是老手,相信这篇文章都能给你带来实用的指导和灵感。话不多说,我们马上开始吧!
SD3: SD第三代模型,基于SDXL进行训练,增强了TVE解码部分,改善了对提示的理解和元素融合能力。
Config UI: 配置用户界面,用于管理和操作批处理工作流。
Clip编码: 一种编码技术,SD3采用了三种Clip编码,增加了文本编码器,训练数据量更大。
动态提示词插件: 一种插件,可以在Manager中搜索“Dynamic”,安装后可以在新建节点处显示动态提示词,使用通配符文件进行随机调用。
LibLib: 一个资源网站,提供模型和资源下载,支持在线生成。
本期我们将探讨刚刚开源的SD第三代模型。此外,我们还会介绍一些config UI的批处理操作,以配合我们的提示词测试该模型。话不多说,我们直接进入SD官网。
SD3架构基于SDXL训练,增强了TVE解码部分,通道数增至16。
SD3改善了提示理解和元素融合,能更精确控制画面。
新一代模型采用三种Clip编码,增加了一个文本编码器,训练数据量达到2B参数。
TUGIFACE官网提供不同后缀的模型,无后缀模型不含Clip编码,带Clip标识的包含基础Clip编码,T5XXL新增第三种Clip编码。
模型精度有FP16和8位,大参数模型提供FP16,体积达15G,官方模型至少需12G显存。
Text Encoders部分需额外加载Clip模型,国内用户需下载并加载这些模型。
首先,我们要介绍的是SD3,它与之前的架构有何不同?SD3的架构基于SDXL进行训练。首先,我们可以看到TVE解码部分得到了大幅增强,现在通道数为16。其次,它对提示的理解及元素融合更为完善。简而言之,我们可以通过提示更精确地控制画面的某些部分。这一新一代模型采用了三种Clip编码。在SDXL中,我们有两个编码器,一个是L,一个是G。而这一代模型在此基础上增加了一个文本编码器,使得训练数据量更大,达到2B,相当于20E的参数,远超之前的SDXL。
现在,我们访问TUGIFACE官网,对于新手来说,可能不清楚应使用哪些模型。通过观察后缀,我们可以分辨出模型的特性。首先,无后缀的模型不包含Clip编码。其次,带有Clip标识的版本包含基础的Clip编码,即I和L,相当于XL模型。再往下,第三代模型T5XXL新增了第三种Clip编码模型。这里有两种精度:FP16和8位。通常,未经采样的模型精度为32位,采样后为FP16。对于大参数模型,仅提供FP16半精度,大小达到15G。此外,还提供8位精度,即半精度的半,更小。官方发布的模型体积较大,要求较高,至少需要12G显存,尽管官方称8G也可运行,但需配置虚拟内存。
在这四个模型中,Text Encoders部分会提供额外的Clip模型。如果加载的模型不包含Clip,则需下载并加载额外的Clip模型。下面两个模型同样如此,只需选择一个精度,如16位或8位,加上G和L,即构成三个Clip模型。对于国内用户,需下载并加载这些模型。
最佳访问的资源网站是LibLib。在之前讲解Stable Diffusion时,我曾提及此网站。目前,LibLibAI是国内较为完善的绘画模型资源网站,不仅提供常用模型,还可在其平台上查看相关内容。
平时都有一些激励活动,所以说有很多原创作者在这个地方玩游戏。
这些模型在CVT网站上不一定能找到,同时一些热门的模型也不一定能找到。
最重要的是,对于不熟悉网络配置的朋友们来说,这个功能非常便捷,可以直接访问,使用起来十分方便。
SD3模型是目前排名第一的模型,已在其网站上架。
SD3模型包含三个编码器,无需单独加载Clip编码模型。
王智能的信息将在视频简介下方提供。
LibreView网站支持V3模型生成,其在线生成速度与4090相当。
Huggenface提供的Config UI样本工作流包括Basic基础工作流、Prompt强化工作流和传统放大工作流(Upscale)。
————————————————
原文链接:https://blog.csdn.net/qq_44866828/article/details/140042623
原创文章,作者:点点,如若转载,请注明出处:https://www.dian8dian.com/%e6%b7%b1%e5%ba%a6%e6%b5%8b%e8%af%84%ef%bc%9asd3%e6%a8%a1%e5%9e%8b%e8%a1%a8%e7%8e%b0%e5%a6%82%e4%bd%95%ef%bc%9f