新手入门 Stable Diffusion 大模型指南

AI权益加码!Claude Code、Cursor等20+工具免费用! 购周边限时加赠Coding Plan Lite,畅享主流AI工具!学习进阶更高效! 阅读详情

在人工智能图像生成领域,Stable Diffusion 大模型备受关注。对于刚接触它的新手而言,全面了解相关知识并掌握操作要点十分关键。以下将从基础知识、下载、安装、切换及新手推荐模型等方面进行详细介绍。

图片

一、大模型基础知识

概念

大模型是基于深度学习技术,经过海量数据训练的复杂算法集合,能依据输入指令(如文本描述)生成对应的图像内容。在 Stable Diffusion 体系中,大模型如同一个 “图像创作大脑”,理解用户需求并转化为视觉画面。

构成

通常由神经网络架构、权重参数等组成。神经网络架构决定模型处理数据和生成图像的方式,权重参数则是模型在训练过程中学习到的关键信息,它们共同作用,让模型具备生成图像的能力。

后缀

常见后缀如.pt、.ckpt(容易携带病毒) 以及.safetensors 等。其中,.safetensors 是一种较新的模型文件存储格式,具有诸多优势。

  • 安全性高

    :它在设计上增强了安全性,能有效防止恶意代码注入。相比一些传统格式,在从不可信来源加载模型时,.safetensors 能降低模型被篡改、携带恶意程序的风险,保障用户系统安全。

  • 读写速度快

    :在读写性能上表现出色,加载模型的速度更快,能减少等待时间,提升使用 Stable Diffusion 进行图像生成等操作的效率。尤其在处理大型模型或频繁切换模型时,这种速度优势更为明显。

  • 跨框架兼容性好

    :可以在多种深度学习框架间轻松共享使用,比如 PyTorch 等。这使得不同开发环境、不同工具的用户都能方便地使用基于.safetensors 格式的模型,促进了模型资源的流通和复用。

不同后缀代表不同的文件存储格式,在存储方式、大小及与软件的兼容性上存在差异。比如,.ckpt 后缀的文件常用于存储模型的检查点数据,包含模型训练过程中的关键参数,方便模型的继续训练或加载使用。

大小

大模型大小各异,从几百 MB 到数 GB 不等。一般来说,模型越大,可能涵盖的训练数据越丰富,生成图像的细节和多样性可能更好,但也会占用更多存储和计算资源。较小的模型则相对轻便,对设备性能要求较低,生成速度可能更快,但在图像生成的丰富度上可能稍逊一筹。

区别

不同大模型在训练数据、生成风格、适用场景等方面存在区别。有的模型擅长生成写实风景图,有的则在动漫人物绘制上表现出色。了解这些差异,有助于用户根据自身需求选择合适的模型。

二、大模型的下载

C 站(Civitai)

C 站是 Stable Diffusion 模型资源的重要集散地。用户可在网站上通过搜索功能,依据模型名称、类型(如角色、风格等)、热度等条件筛选心仪模型。找到合适模型后,按照网站提示进行下载操作。但需注意,下载时要确保网络稳定,同时关注模型的使用许可等相关说明。

首页板块

    • 功能类

      :“home” 是主页;“create” 是创建功能入口,可能用于创建模型、图像等内容;“sign in” 是登录入口 。

    • 内容展示类

      :“models” 是模型板块,展示各类 Stable Diffusion 模型;“images” 是图像板块,呈现相关图像作品;“videos” 是视频板块,包含视频资源;“Articles” 是文章板块,可能有教程、资讯等文章;“shop” 是商店,可进行相关商品交易 。

    • 工具类

      :“Tool” 是工具板块,提供各类辅助创作工具 。

    • 模型分类

      :“Early Access” 是早期访问模型分类;“CHARACTER” 指角色类模型;“STYLE” 是风格类模型;“CELEBRITY” 是名人相关模型;“CONCEPT” 是概念类模型;“CLOTHING” 是服装类模型;“Base Model” 是基础模型;“Poses” 是姿势类模型;“Background” 是背景类模型;“Vehicle” 是交通工具模型;“buildings” 是建筑模型;“Object” 是非生物实体模型;“Animal” 是动物模型;“Assets” 是纹理、材质素材模型;“Action” 是与特定动作姿态有关的模型 。

SD 启动器

一些 SD 启动器集成了模型下载功能。打开启动器后,通常在模型管理相关界面中,能找到下载选项。启动器会自动处理模型下载过程中的一些配置问题,相对较为便捷。用户只需在启动器提供的模型列表中选择想要下载的模型,然后点击下载按钮即可。

爱心整合包

爱心整合包是热心用户或团队将多个优质模型及相关资源整合打包而成。获取渠道可能是特定论坛、社群分享。在下载时,要注意来源的可靠性,避免下载到包含恶意软件或侵权内容的整合包。下载后,需按照相关说明进行解压和使用。

三、大模型的安装

大模型的安装路径一般为 SD 根目录 \models\Stable - diffusion 。在找到下载好的模型文件(如.ckpt 或.safetensors 格式 )后,将其复制到上述指定路径文件夹内。确保文件放置正确,否则软件可能无法识别模型。安装完成后,可尝试重启 SD 相关应用程序,以保证模型被正常加载。

Stable Diffusion(SD)中安装大模型的操作步骤:

  1. 复制模型文件

    :使用快捷键 “Ctrl + C” 复制大模型文件,然后→打开类似于 ”sd - webui - aki - v4.2” ,→找到有A 启动器的目录(点开 “models” 文件夹)→进一步找到 “stable - diffusion” 文件夹 。

  2. 粘贴模型文件

    :在 “stable - diffusion” 文件夹中,通过快捷键 “Ctrl + V” 粘贴刚刚复制的大模型文件到此处

  3. 查看已安装模型

    :双击 “stable - diffusion” 文件夹,可查看 SD 中已安装的所有大模型 。

  4. 在生图界面加载模型

    :进入 SD 模型的文生图界面,通过刷新或重启该界面可以载入刚刚才安装的大模型,最简单的方式是点击大模型后面的蓝色符号,就能看到刚刚下载安装的大模型并使用它。

图片

四、大模型的切换

在 SD 网页界面中,切换大模型操作较为简便。只需点击界面左上角的模型切换选项(通常会有明显标识 ),在弹出的模型列表中,选择想要使用的模型即可。切换后,模型的生成风格、能力等会相应改变,用户可根据创作需求随时切换不同模型。

五、新手大模型推荐

majicMIX realistic v7

该模型在生成写实风格图像方面表现卓越。无论是人物的面部细节、肌肤纹理,还是风景的自然色彩、光影效果,都能呈现出逼真的视觉感受。对于想要创作写实摄影风格图像、人物肖像等作品的新手来说,是个不错的选择。

ReV Animated v1.2.2

如果新手对动漫、二次元风格图像创作感兴趣,ReV Animated v1.2.2 不容错过。它能生成风格鲜明、色彩绚丽的动漫人物形象,在角色的姿势、表情以及服饰细节上都处理得十分细腻,可轻松满足动漫插画、角色设计等创作需求。很多模型不好生成的图片,用这个模型生成的可以得到不错的结果。

Counterfeit - V3.0

Counterfeit - V3.0 模型的优势在于图像生成的多样性和创意性。它可以根据用户的文本描述,生成富有想象力的奇幻场景、独特的艺术风格图像等。新手在进行创意探索、概念设计时,使用该模型能获得许多意想不到的灵感和效果。

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!

对于0基础小白入门:

如果你是零基础小白,想快速入门AI绘画是可以考虑的。

一方面是学习时间相对较短,学习内容更全面更集中。
二方面是可以找到适合自己的学习方案

包括:stable diffusion安装包、stable diffusion0基础入门全套PDF,视频学习教程。带你从零基础系统性的学好AI绘画!

零基础AI绘画学习资源介绍
👉stable diffusion新手0基础入门PDF👈

(全套教程文末领取哈)
在这里插入图片描述

👉AI绘画必备工具👈

在这里插入图片描述

温馨提示:篇幅有限,已打包文件夹,获取方式在:文末

👉AI绘画基础+速成+进阶使用教程👈

观看零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

在这里插入图片描述

温馨提示:篇幅有限,已打包文件夹,获取方式在:文末

👉12000+AI关键词大合集👈

在这里插入图片描述

这份完整版的AI绘画全套学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费

请添加图片描述

2024年最新Stable Diffusion 新手入门手册 Stable Diffusion 可配置大量插件扩展,在 webui 的“扩展”选项卡下,可以安装插件:点击“加载自”后,目录会刷新,选择需要的插件点击右侧的 install 即可安装。理论上,在应用完全相同参数(如 Step、CFG、Seed、prompts)的情况下,生产的图片应当完全相同。通过勾选 “Highres. fix” 来启用。默认情况下,文生图在高分辨率下会生成非常混沌的图像。如果使用高清修复,会型首先按照指定的尺寸生成一张图片,然后通过放大算法将图片分辨率扩大,以实现高清大图效果。 阅读详情

相关推荐

Stable Diffusion 安装指南附带安装包

Stable Diffusion是一款的应用程序,这意味着任何人都可以免费、不受限制地利用它进行AI绘画生成操作。其生态系统开放且在不同时期迅速发展。因此,安装和配置方式可能会随着时间推移而发生变化。随着软件的不断更新和改进,用户在不同版本中可能会遇到新的功能、改动或优化。为了确保使用者能够充分利用软件的最新功能和性能,建议随时查阅官方文档,以获取最新的安装指南和相关信息。这样可以确保用户始终采用最合适、最稳定的配置,以满足其特定需求。安装并应用软件的过程中,我也不建议你通过任何途径付费购买软件和模型

2401_84250614的博客 1124

Stable Diffusion大模型全面解读:AI绘画的应用场景与创新实践!

大模型之所以被称为“大模型”,是因为它是所有模型中文件体积最大的。通常,大模型的文件大小从2GB到8GB不等,甚至更大。在Stable Diffusion中,大模型的设置位于界面左上角。每个大模型可以理解为一个专门训练用于特定绘画领域的“画室”。例如,有的模型擅长二次元风格,有的擅长写实风格,还有的专攻油画风格。以Stable Diffusion自带的默认二次元模型为例,无论你如何修改关键词,生成的图片都会保持该模型固定的风格。****地址:https://civitai.com/

weixin_55154866的博客 611

Stable Diffusion 常用大模型及其特点

综上所述,SD的常用大模型种类繁多,各有特点。用户可以根据具体需求选择合适的模型进行图像生成或相关任务的处理。

程序猿视角 2639

超详细的 Stable Diffusion Webui入门教程(二)基础操作

AIGC技术的未来发展前景广阔,随着人工智能技术的不断发展,AIGC技术也将不断提高。未来,AIGC技术将在游戏和计算领域得到更广泛的应用,使游戏和计算系统具有更高效、更智能、更灵活的特性。同时,AIGC技术也将与人工智能技术紧密结合,在更多的领域得到广泛应用,对程序员来说影响至关重要。未来,AIGC技术将继续得到提高,同时也将与人工智能技术紧密结合,在更多的领域得到广泛应用。感兴趣的小伙伴,赠送全套AIGC学习资料和安装工具,包含AI绘画AI人工智能等前沿科技教程模型插件,具体看下方。

A2421417624的博客 2250

这些常用的Stable Diffusion大模型你知道吗?

本文介绍了AI绘画常用的Stable Diffusion大模型分类,包括基础模型、二次元模型、写实模型和2.5D模型。基础模型效果较差不推荐使用;二次元模型推荐Anything V4.0+、Counterfeit、Cetus-Mix等;写实模型推荐Chilloutmix、Deliberate和Realistic Vision系列;2.5D模型包括国风系列和DreamShaper等。文章还附带各类模型的示例图片,并提醒部分模型存在NSFW风险。最后提供了AI绘画学习资料获取方式,包含安装包、视频教程模型资源

weixin_55154866的博客 3477

Stable Diffusion学习指南模型篇】

今天我将带你深入学习Stable Diffusion模型的类型、差异以及使用技巧,同时也能帮助你建立对开源模型的基础认知框架,全篇没有干货都是感情,快来看看吧~

探索AIGC领域的体验设计师 2181

Stable Diffusion ComfyUI安装详细教程

ComfyUI安装详细教程(附资源下载链接)

欢迎关注免费星球ComfySpace:https://t.zsxq.com/19H0cfM1O 5914

Stable diffusion 都支持哪些模型

Stable Diffusion模型种类繁多,涵盖了从基础到高级的多种需求,同时支持文本到图像、图像到图像、视频生成等多种任务。这些模型不仅在分辨率和细节上有所提升,还通过不同的技术优化了性能和适用性,满足了不同用户的需求。

kcarly的专栏 1998

Stable Diffusion1.5》历史回顾:解密Stable Diffusion的早期工作

面向完全没接触过图像生成的读者,从头介绍Stable Diffusion是怎样从早期工作中一步一步诞生的

my_name_is_learn的博客 1957

使用diffusers来训练自己的Stable Diffusion 3大模型

这里给大家介绍一个基于diffusers库来训练stable diffusion相关模型的训练代码,包含Lora、ControlNet、IP-adapter、Animatediff,以及最新的stable diffusion 3 lora版本的训练代码

图像生成、视频生成、生成与理解统一 5102

Stable Diffusion-新手入门指南

Stable Diffusion 是一种基于潜在扩散模型(Latent Diffusion Models)的文本到图像生成模型,能够根据任意文本输入生成高质量、高分辨率、高逼真的图像。 如何使用Stable Diffusion? 你需要给出一个描述图片的提示,例如:姜饼屋,西洋镜,焦点,白色背景,吐司,脆麦片;生成图片如下:

m0_59162248的博客 1786

Stable Diffusion 新手入门手册

Stable Diffusion 新手入门手册

m0_74942241的博客 1377

24最新新手入门指南Stable Diffusion

Stable Diffusion,一款新兴的开源AI绘画软件,正逐渐成为数字艺术家和爱好者的新宠。它的强大功能让用户能够轻松创造出令人印象深刻的数字艺术作品。无论你是专业艺术家还是艺术新手,Stable Diffusion都为你提供了一个探索创造力的新天地。本文将为你提供一份详细的新手入门指南,帮助你了解Stable Diffusion是什么,可以干什么,以及怎么尝试使用。come on,用起来,才能快人一步!了解Stable Diffusion

2401_84760322的博客 1045

stable diffusion 能不能生成视频?

Stable Diffusion 本身是图像生成模型,但结合扩展工具或变体模型可以实现视频生成功能。以下是目前主流的实现方法和具体操作步骤:一、使用 Stable Video Diffusion (SVD) 生成视频特点:官方推出的视频生成模型,支持图生视频(14或25帧),效果连贯性较好,但需要较高显存(建议48G以上)。操作步骤:环境准备:安装 Python 3.10+ 和 PyTorch 2.0+,确保 CUDA 环境正常。

wang6168的博客 2758

Stable Diffusion新手入门手册

随着 epoch 的增加,模型将从欠拟合(右一,表示即便是来自于数据集中的输入,模型也很难达到它应该有的结果,类似于“只 做题库里的题都做不对的差生”)变为过拟合(左一,表示模型对于来自于数据集中的输入,总能 精确地达到对应的对结果,但是如果输入一旦有些许偏差,比如输入一些不是训练集中的输入,那 结果就会很差,类似于“只会做题库里的题的书呆子”)。它开启与否与底模有关。因此,如果不开启keep tokens,在进行打乱后,打标中的每一个 tag 在足够多的 epoch 后,都将成为触发词。

weixin_48369373的博客 678

Stable Diffusion 新手入门教程,安装使用及模型下载

Stable Diffusion 新手入门教程,安装使用及模型下载

WANGJUNAIJIAO的博客 1693

stable diffusion 大模型

本节课程我们详细讲述了stable diffusion中关于基础大模型的知识,我们首先分析了官方推出的多个版本的原始基础大模型,然后我们分类演示了一些不同风格的大模型,这些大模型通常是基于官方大模型微调训练而来,我们也讲述了下载和使用这些大模型需要注意的一些事项。最后,我们补充了VAE以及inpainting大模型的一些知识。

HuggingAI的博客 2010

云上部署文生图大模型Stable Diffusion 3

随着人工智能技术的不断进步,越来越多的人开始关注和使用AI艺术生成工具。而Stable Diffusion 3作为最新一代的文生图大模型,于2024年6月12日正式开源,以其高质量的图像生成受到了广泛欢迎。那么,如何快速部署Stable Diffusion 3,让它成为您的专属AI艺术家呢?请跟随本文,在百度智能云GPU服务器上部署Stable Diffusion 3。

youshimeihaoyi的博客 979
上一篇: Stable Diffusion抠图插件避坑指南:从崩溃到精通的全流程复盘
下一篇: Stable Diffusion【提示词】【艺术摄影】:高调摄影肖像
黑客阿道夫
博客等级 码龄4年 7278粉丝 941原创
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值