分享好友 最新资讯首页 最新资讯分类 切换频道
Stable Diffusion 模型下载和使用方法
2024-11-01 23:29

上一文中《Stable Diffusion绘图神器,2分钟极速安装教程(提供安装包)-CSDN博客》,给大家介绍了Stable Diffusion的安装方法和简单的使用方式,有粉丝私信问我文中的写实风格的图片是怎么生成的。

Stable Diffusion 模型下载和使用方法

Stable Diffusion的绘图风格主要由模型来控制,基础模型主要由二次元图片训练获得,所以在不安装其他模型的情况下,只能生成二次元风格的图像。

首先我们需要对Stable Diffusion中各种模型有个初步认识,以便后续在使用时能知道我们需要下载什么样的模型,在Stable Diffusion中有4种模型,分别是

2.1、Checkpoint模型

Checkpoint模型是Stable Diffusion的核心。它包含了神经网络的所有权重和参数,是生成图像的基础。这些模型通常体积较大,因为它们包含了大量的参数,这些参数是在大量图像数据上训练得到的。通过微调这些参数,可以对模型进行改进,以生成具有特定风格的图像。微调Checkpoint模型的方法有多种,包括附加训练、Dreambooth和文本反转等。

这种模型通常很大,在2-7GB之间,也是比较常用的一种模型。

  • 附加训练

附加训练是一种微调技术,它通过在已有的Checkpoint模型基础上,使用新的数据集进行训练。这种方法可以帮助模型更好地适应特定的图像风格或内容,从而生成更符合用户需求的图像。

  • Dreambooth

Dreambooth是另一种微调Checkpoint模型的方法。它允许用户将自定义的主题或对象注入到模型中,从而生成与该主题或对象相关的图像。这种方法特别适用于那些想要生成具有特定主题或对象的用户,而且它只需要少量的自定义图像就可以实现。

  • 文本反转(embedding

文本反转是一种通过修改模型的嵌入空间(embedding space)来实现微调的方法。嵌入空间是模型用来表示文本和图像特征的空间。通过修改这个空间中的特定部分,可以影响模型生成图像的方式,使其更符合用户的期望。这种方法同样只需要少量的示例就可以实现。

2.2、LoRA模型

LoRA模型是一种轻量级的微调方法。与直接修改Checkpoint模型的参数不同,LoRA模型通过添加一些小的补丁文件来修改模型的输出。这些补丁文件通常体积较小,可以与Checkpoint模型一起使用,而不需要对整个模型进行大量的修改。

2.3、Hypernetworks

Hypernetworks是一种特殊的网络结构,它可以被添加到Checkpoint模型中。Hypernetworks不是直接生成图像,而是生成其他网络的权重。通过这种方式,它们可以为Checkpoint模型提供额外的灵活性,使其能够根据不同的输入生成不同的图像。

2.4、VAE

VAE是一种将特定风格或属性集成到Checkpoint模型中的方法。它可以被看作是一种特殊的微调技术,用于向模型注入某种风格或属性。一旦AVE被集成到checkpoint中,它就可以像滤镜一样作用于生成的图像,使其呈现出特定的风格或特征。

这些模型和微调技术为Stable Diffusion用户提供了广泛的灵活性,使用户可以根据自己的需求定制和改进模型,生成更符合期望的图像。

在实际使用过程中我们主要使用到模型类型有Checkpoint模型、LORA、VAE等类型。

对模型有了初步认识后,我们急需知道在哪里可以下载模型,以下是三个是我下载Stable Diffusion模型的常用网站,前两个是国内的,已经够用,最后一个是国外的,需要梯子,上面的模型和生成的图片都非常丰富,生成的图片内容没有限制

哩布哩布AI 在LiblibAI上,你可以找到由社区成员上传和分享的多种Stable Diffusion模型。这些模型可能涵盖了不同的风格、主题和用途,以满足用户多样化的需求。你可以根据自己的创作目的和风格偏好,在平台上搜索和筛选适合的模型。

liblib.ai

吐司:这是一个大型的国内模型资源库,网站收录模型数以万计,几乎涵盖所有流行模型及小众模型。大部分模型来源于其他分享网站,如Civitai,因此用户可以在这里找到丰富的Stable Diffusion模型资源。

tusiart.com

  • Civitai:这是一个大型的SD模型分享社区,提供了大量高质量的模型文件。用户可以在这里找到各种精选的模型,这些模型由全球众多热爱艺术的创作者上传并分享。这是一个国外网站,需要梯子,有梯子的可以试试,上面的模型非常多,福利图片也很多。

模型的安装非常简单,我们下载模型后,根据模型的类型放到对应的目录,重启程序或者刷新软件界面上的对应按钮就可以了,下面这个截图是几个常用模型安装的目录

SD模型安装目录

模型安装后对应到界面上的位置如下

基础大模型和VAE模型

LORA模型

至此,Stable Diffusion模型的下载和安装已经完成,有什么疑问可以私信或者留言

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助

👉[[CSDN大礼包《StableDiffusion安装包&AI绘画入门学习资料》免费分享]]安全链接,放心点击

对于0基础小白入门

如果你是零基础小白,想快速入门AI绘画是可以考虑的。

一方面是学习时间相对较短,学习内容更全面更集中。
二方面是可以找到适合自己的学习方案

包括:stable diffusion安装包、stable diffusion0基础入门全套PDF,视频学习教程。带你从零基础系统性的学好AI绘画

👉stable diffusion新手0基础入门PDF👈

👉AI绘画必备工具👈

👉AI绘画基础+速成+进阶使用教程👈

👉大厂AIGC实战案例👈

    以上就是本篇文章【Stable Diffusion 模型下载和使用方法】的全部内容了,欢迎阅览 ! 文章地址:http://yy520w.xhstdz.com/news/135.html 
     资讯      企业新闻      行情      企业黄页      同类资讯      首页      网站地图      返回首页 物流网资讯 http://gzhdwind.xhstdz.com/ , 查看更多   
最新新闻
一文了解什么是MCN机构
来源:简单创新原标题:详细解读MCNMCN机构是一类公司的简称,就是帮助签约达人进行内容持续输出和变现的公司。专业的MCN,包括
【申论素材】32个热点政策名词
点击上方蓝字关注我们关注“云学教育”——获取更多培训辅导、备考资料、招聘资讯联系电话:0871-65190163客服老师:18388008795
大数据与健康:技术助力医疗卫生事业腾飞
大数据与健康:技术助力医疗卫生事业腾飞 随着科技的飞速发展,大数据技术已经渗透到我们生活的方方面面,包
16家企业提供117个岗位!嘉定区紧急用工需求发布( 第51期 )
嘉定区紧急用工需求发布( 第51期 )来啦!这期共有16家企业提供了117个岗位。01华亭镇上海昊明机械有限公司01 机械工程师(2-3
《平“语”近人——习近平总书记用典》解说词(第九集)恶竹应须斩万竿
第二段落微视频二:“善除害者察其本,善理疾者绝其源。”我们党长期执政,既具有巨大政治优势,也面临严峻挑战,必须依靠党的
公务员考试历史试题及答案
公务员考试历史试题及答案近年来,公务员考试逐渐成为备受关注的话题。考生们为了在激烈的竞争中脱颖而出,努力备考,其中历史科
百度地图商户标注申请怎么弄 申请流程及要点
在当今信息化社会,线上地图已成为人们日常出行、寻找服务的重要工具。作为国内领先的在线地图服务商,百度地图凭借其精准定位、
抖音这位顶流,怎么就成游戏界第一人了?
越到年底,我就越觉得今年的游戏行业不简单,大事真是一件接一件地来。 其中不管是公司动向、产品动态,还是行业趋势,能聊的我
2017中国孕婴童渠道发展状况重点数据调研
1、2017中国孕婴童渠道发展状况重点数据调研2017年3月调查数据样本项目数量(单位:份)母婴商305(省市县)母婴连锁836(5店以上
【干货】带你玩转数据之行业选品
【编者按】关于AliExpress中数据的功能对于新手卖家来说比较陌生,其中的功能以及作用并不是很了解,然而店铺的流量与此息息相关
本企业新闻