【Stable Diffusion】lora的基础使用技巧

2023-11-06

1.用lora配套的大模型效果更好
lora训练是根据大模型作为参考,lora是根据那个大模型来训练参数的
在这里插入图片描述
例如,这里以墨心lora为例,点击示例图片的中的“?”,在Model中就显示出了作者用于训练墨心lora的底模了
2.最好使用和作者相同的参数
还是以墨心lora为例,可以看到示例图片中有Sampler、Model、CFG scale等参数
在这里插入图片描述

(1)Sampler——采样方式,在Stable Diffusion WebUI中的Sampling method中进行选择
(2)Model——作者使用的大模型,在Stable Diffusion WebUI中的Stable Diffusion checkpoint中进行选择
(3)CFG scale——提示词相关性,在Stable Diffusion WebUI中的CFG scale进行调整
(4)Steps——采样迭代步数,在Stable Diffusion WebUI中的Sampling steps中进行调整
(5)Seed——随机种子,在Stable Diffusion WebUI中的Seed中进行调整
Stable Diffusion WebUI中的参数调整位置(除了Stable Diffusion checkpoint在页面最上方)如下:
在这里插入图片描述
值得注意的是,在复制示例图片的Prompt和Negative prompt的提示词时,要注意示例图片的lora词和最后作者发布显示的lora词不一样,例如,这里,示例图片中的使用了两个lora,分别是: lora:shukezouma_v1_1:0.8和lora:shuimobysimV3:0.7
在这里插入图片描述
我们分别下载这两个lora,在页面的上方就显示了这两个lora,点击后进行下载(是的,有时一个页面中可能可以下载多个lora,在Stable Diffusion中配合使用)
在Stable Diffusion WebUI中,我们点击这两个lora,显示的分别是 lora:shukezouma_v1_1:1和 lora:MoXinV1:1,也就是说作者发布的lora名称和示例图片中的lora名称不一样,要注意调整,并将权重值调整为示例图片的权重值

在这里插入图片描述
调整好后,生成图片效果如下:
在这里插入图片描述
可以在示例图片的参数的基础上做进一步尝试和调整,在保证一定质量的基础上,生成更有创意的图片

3.正确地设置lora的使用权重
lora的权重值不要在1以上,不然容易出效果很差的图,权重值最好设置到0.8、0.9能够提高出图质量,如果只想带一点点lora的元素,权重值设置到0.4-0.6就可以了
4.有触发词一定要使用触发词
将Trigger words中的词,选择需要的加入到Prompt中,才能将相应的元素触发出来(有的在Trigger words中的上方有个Tag栏,Tag是lora的标签表示lora大概是什么特征,不是触发词,不需要管tag)
在这里插入图片描述
有的时候,作者并没有给出Trigger Words,此时直接把lora加载进去,也能发挥作用

5.新手尽量不要混用lora
除非lora作者给了非常成熟的建议
因为并不了解每个lora的提示词触发词的训练图集,启用时很容易打架、互相污染,如果一定要多个lora混用,需要学习lora把里面的十几个层分别抽出来单独设置权重,再进行使用,这样的多个lora的混用效果才比较好

本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系:hwhale#tublm.com(使用前将#替换为@)

【Stable Diffusion】lora的基础使用技巧 的相关文章

  • Jenkins流水线怎么做?

    问CHAT Jenkins流水线怎么做 CHAT回复 Jenkins流水线是一种创建 测试和部署应用程序的方法 以下是为Jenkins创建流水线的步骤 1 安装Jenkins 首先你需要在你的服务器上安装Jenkins 这个过程可能会根据你
  • 2024年华数杯国际赛B题:光伏发电功率 思路模型代码解析

    2024年华数杯国际赛B题 光伏发电功率 Photovoltaic Power 一 问题描述 中国的电力构成包括传统能源发电 如煤 油和天然气 可再生能源发电 如水电 风能 太阳能和核能 以及其他形式的电力 这些发电模式在满足中国对电力的巨
  • 用通俗易懂的方式讲解:如何用大语言模型构建一个知识问答系统

    传统搜索系统基于关键字匹配 在面向 游戏攻略 技术图谱 知识库等业务场景时 缺少对用户问题理解和答案二次处理能力 本文探索使用大语言模型 Large Language Model LLM 通过其对自然语言理解和生成的能力 揣摩用户意图 并对
  • 喜报|华测导航荣获“张江之星”领军型企业称号

    近日 2023年度 张江之星 企业培育名单发布 上海华测导航荣获2023年度 张江之星 领军型企业称号 据悉 张江之星 企业培育是上海科创办为落实 关于推进张江高新区改革创新发展建设世界领先科技园区的若干意见 张江高新区加快世界领先科技园区
  • Soul App:年轻人的社交状态,还有多少种可能?

    查尔斯 狄更斯在 双城记 的开篇写下 这是最好的时代 这是最坏的时代 这是智慧的时代 这是愚蠢的时代 这是信仰的时期 这是怀疑的时期 人们面前有着各样事物 人们面前一无所有 既然万事万物都和狄更斯所说般 好坏参半 那又何必执着于过去 苦恼于
  • 让CHAT介绍下V2ray

    CHAT回复 V2Ray是一个网络工具 主要用于科学上网和保护用户的网络安全 它的名字源自Vmess Ray 光线 通过使用新的网络协议 为用户提供稳定且灵活的代理服务 下面是一些V2Ray的主要特性 1 多协议支持 V2Ray 提供了大量
  • 扬帆证券:三只松鼠去年扣非净利预增超1.4倍

    在 高端性价比 战略驱动下 三只松鼠 300783 重拾增势 1月15日晚间 三只松鼠发布成绩预告 预计2023年度净赢利为2亿元至2 2亿元 同比增加54 97 至70 47 扣非后净赢利为1亿元至1 1亿元 同比增速达146 9 至17
  • 基于opencv的大米计数统计(详细处理流程+代码)

    在我每周的标准作业清单中 有一项是编写计算机视觉算法来计算该图像中米粒的数量 因此 当我的一个好朋友M给我发了一张纸上的扁豆照片 显然是受到上述转发的启发 请我帮他数一下谷物的数量时 它勾起了我怀旧的回忆 因此 我在我的旧硬盘上寻找很久以前
  • 毕业设计:基于深度学习的微博谣言检测系统 人工智能

    目录 前言 设计思路 一 课题背景与意义 二 算法理论原理 三 检测的实现 最后 前言 大四是整个大学期间最忙碌的时光 一边要忙着备考或实习为毕业后面临的就业升学做准备 一边要为毕业设计耗费大量精力 近几年各个学校要求的毕设项目越来越难 有
  • 【毕业设计选题】复杂背景下的无人机(UVA)夜间目标检测系统 python 人工智能 深度学习

    前言 大四是整个大学期间最忙碌的时光 一边要忙着备考或实习为毕业后面临的就业升学做准备 一边要为毕业设计耗费大量精力 近几年各个学校要求的毕设项目越来越难 有不少课题是研究生级别难度的 对本科同学来说是充满挑战 为帮助大家顺利通过和节省时间
  • 作物叶片病害识别系统

    介绍 由于植物疾病的检测在农业领域中起着重要作用 因为植物疾病是相当自然的现象 如果在这个领域不采取适当的护理措施 就会对植物产生严重影响 进而影响相关产品的质量 数量或产量 植物疾病会引起疾病的周期性爆发 导致大规模死亡 这些问题需要在初
  • 2024 人工智能与大数据专业毕业设计(论文)选题指导

    目录 前言 毕设选题 选题迷茫 选题的重要性 更多选题指导 最后 前言 大四是整个大学期间最忙碌的时光 一边要忙着备考或实习为毕业后面临的就业升学做准备 一边要为毕业设计耗费大量精力 近几年各个学校要求的毕设项目越来越难 有不少课题是研究生
  • 手把手教你用 Stable Diffusion 写好提示词

    Stable Diffusion 技术把 AI 图像生成提高到了一个全新高度 文生图 Text to image 生成质量很大程度上取决于你的提示词 Prompt 好不好 前面文章写了一篇文章 一份保姆级的 Stable Diffusion
  • 做大模型也有1年多了,聊聊这段时间的感悟!

    自ChatGPT问世以来 做大模型也有1年多了 今天给大家分享这一年后的感悟 过去一年应该是AI圈最万千瞩目的一年了 大家对大模型 OpenAI ChatGPT AI Native Agent这些词投入了太多的关注 以至于有一年的时间好像经
  • 不要再苦苦寻觅了!AI 大模型面试指南(含答案)的最全总结来了!

    AI 大模型技术经过2023年的狂飙 2024年必将迎来应用的落地 对 IT 同学来讲 这里蕴含着大量的技术机会 越来越多的企业开始招聘 AI 大模型岗位 本文梳理了 AI 大模型开发技术的面试之道 从 AI 大模型基础面 AI 大模型进阶
  • 人工智能 AI 如何让我们的生活更加便利

    每个人都可以从新技术中获益 一想到工作或生活更为便利 简捷且拥有更多空余时间 谁会不为之高兴呢 借助人工智能 每天能够多一些空余时间 或丰富自己的业余生活 为培养日常兴趣爱好增添一点便利 从电子阅读器到智能家居 再到植物识别应用和智能室内花
  • AI在广告中的应用——预测性定位和调整

    营销人员的工作就是在恰当的时间将适合的产品呈现在消费者面前 从而增加他们购买的可能性 随着时间的推移 营销人员能够深入挖掘越来越精准的客户细分市场 他们不仅具备了实现上述目标的能力 而且这种能力还在呈指数级提升 在AI技术帮助下 现在的营销
  • 【固定翼飞机】基于最优控制的固定翼飞机着陆控制器设计研究(Matlab代码实现)

    欢迎来到本博客 博主优势 博客内容尽量做到思维缜密 逻辑清晰 为了方便读者 座右铭 行百里者 半于九十 本文目录如下 目录 1 概述 2 运行结果 3 参考文献 4 Matlab代码及文章
  • 3D点云检测神技 | UFO来了!让PointPillars、PV-RCNN统统涨点!

    作者 AI驾驶员 编辑 智驾实验室 点击下方 卡片 关注 自动驾驶之心 公众号 ADAS巨卷干货 即可获取 点击进入 自动驾驶之心 3D目标检测 技术交流群 本文只做学术分享 如有侵权 联系删文 在这篇论文中提出了一个关于在3D点云中检测未
  • 基于节点电价的电网对电动汽车接纳能力评估模型研究(Matlab代码实现)

    欢迎来到本博客 博主优势 博客内容尽量做到思维缜密 逻辑清晰 为了方便读者 座右铭 行百里者 半于九十 本文目录如下 目录 1 概述 2 运行结果 3 参考文献 4 Matlab代码 数据

随机推荐

  • 增强现实攻略

    如今比较火爆的增强现实 很多人都不会弄 而且呢 百度上相对的攻略也比较少 于是我在这里吧这两天弄的步骤分享下 首先打开https developer vuforia com这个网站 点击注册账号 注意这个网站的事英文的 不过要是不懂引文可以
  • 第七章:敏捷开发工具方法-part1-敏捷开发基础

    文章目录 一 Scrum基础概念 1 1 传统开发模式与敏捷开发的区别 1 2 传统项目管理与敏捷项目管理的区别 1 3 敏捷宣言 1 4 敏捷开发的特征 1 敏捷的方法 二 角色与职责 2 1 Scrum Team 2 2 角色职责总结
  • Java连接MySQL代码

    运行环境 Idea 2022 1 MySQL 8 0 28 1 导入mysql的jar包 Idea左上角 File 文件 gt Project Structure 项目结构 要导入整个mysql jar包的文件 最后Apply就可以了 2
  • 线性代数系列讲解第六篇 AX=b求解(针对有解情况)

    AX b 各种情况 A A A是mxn的矩阵 秩为 r r r r m r n r leq m r leq n r m r n r n r n r n r n r n r n表示没有自由变量 即零空间 N A 0 N A begin Bma
  • 笔记本win10引用账户当前已锁定,且可能无法登录(已解决)

    问题 win10引用账户当前已锁定 且可能无法登录 解决方案 按Shift 重启 选择 疑难解答 高级选项 启动设置 按 重启 等待出现选择界面后 选 带命令指示符的安全模式 输入命令net user 这里写被锁定的账户名 active y
  • 程序员代码开发的自测素养

    环境达不到 就需要自己开发 自己测试 直接提供客户 老板 审阅 如果不重视开发者自己的测试环节 那么你的苦心积虑 用心良苦在别人看来就是一无是处 毛病处处的产品 而测试过程就得讲究科学方法 1 自己配备耐心细致的芯片 2 发散思维技能的掌握
  • MATLAB自动读取文件夹中的所有文件,并处理文件内容

    读取示波器文件中的数据 并记录其峰值 clc clear all 获取文件夹下某类型数据的所有文件名 Path E 单光子 设置数据存放的文件夹路径 File dir fullfile Path csv 显示文件夹下所有符合后缀名为 csv
  • 量化择时——SVM机器学习量化择时(第1部分—因子测算)

    文章目录 机器学习在量化模型上的应用 机器学习量化应用场景 量化模型有效性的思考 机器学习模型在量化择时中的应用 训练与预测流程 训练数据特征构造 SVM模型与测算 SVM训练与预测 效果测算 效果分析 最近ChatGPT比较火 NLP的同
  • vscode更改快捷键

    对我来说使用vscode必须要修改的一些快捷键 ctrl f修改后居然不能键盘选择上下搜索 太无语 按如下方式改掉 1 首先打开vscode编辑器 点击首页 首选项 键盘快捷方式 2 之后就是右键需要修改的那些快捷键 然后改成自己熟悉的就可
  • 利用GitHub搭建一个酷炫免费的个人博客

    转载自公众号 python shequ 由于公众号的文章不易后续整理阅读 于是小吴昨天上午花了半个小时使用 GitHub Hexo 搭建了一下个人博客 打算将公众号的文章搬过去 支持关键字搜索 分类标签功能 效果是下面这样子的 image
  • 微信小程序和web开发使用过程中的相似与不同

    思考 微信小程序和web开发使用过程中的相似与不同 相似之处 1 二者在构造时都用到了JavaScript语言 2 在设计小程序和网页时 都不可避免的要用到图片文字去丰富内容 使其变得更加充实 因而也就需要设计框架和页面样式 从而达到耐看
  • FuzzBuzz算法问题

    java实现输入一个字符串 5 hogera 3 piyo 2 huga 30 按空格分隔为map 例如 key为数字5 value为字符串hogera 当最后的数字满足 30 532时 按照key的从小到达的顺序拼接字符串输出hugapi
  • scrapy框架的安装与基本使用,scrapy分页数据的抓取

    文章目录 一 scrapy框架简介 二 scrapy的安装 三 scrapy的基本使用 四 scrapy架构流程图 五 汽车之家案例抓取 六extract 和extract first 区别和用法 七 当当网数据抓取 scrapy的分页抓案
  • Redis学习总结

    文章目录 Redis入门 概述 Linux安装 1 下载安装包 redis 6 0 6 tar gz 2 将安装包安装在OPT目录下 3 进入解压后的文件 4 基本的环境安装 5 redis默认安装路径 usr local bin 6 将o
  • ST单片机使用ST Visual Programmer软件烧录程序简易教程

    文章原始地址 http feotech com p 100 ST单片机使用ST Visual Programmer软件烧录程序简易教程 ST Visual Programmer 是ST公司为自家单片机开发的一款程序烧录读取工具软件 该软件简
  • 【DBN分类】基于粒子群算法优化深度置信网络PSO-DBN实现数据分类附matlab代码

    作者简介 热爱科研的Matlab仿真开发者 修心和技术同步精进 matlab项目合作可私信 个人主页 Matlab科研工作室 个人信条 格物致知 更多Matlab仿真内容点击 智能优化算法 神经网络预测 雷达通信 无线传感器 信号处理 图像
  • CWnd与HWND的区别以、转换以及如何获取本窗体对象

    一 CWnd与HWND的区别 HWND是句柄 是Windows系统中对所有窗口的一种标识 即窗口句柄 它是指针的指针 是由操作环境定义的一个唯一的整数值 它被程序用来标识或者切换到对象 如窗体或控件等 CWnd是MFC中所有与窗口有关的基类
  • yarn 错误There appears to be trouble with your network connection. Retrying...

    原因 yarn超时 解决途径 1 安装好后更换淘宝镜像 yarn config set registry https registry npm taobao org 转载于 https www cnblogs com yanglang p
  • 回顾|Streaming Lakehouse Meetup · 北京站(附问题解答 & PPT 下载)

    更多活动现场照片 https live photoplus cn live pc 53265145 7 月 29 日 Streaming Lakehouse Meetup 邀请了来自阿里巴巴 字节跳动的七位技术专家 围绕 CDC 数据入湖实
  • 【Stable Diffusion】lora的基础使用技巧

    1 用lora配套的大模型效果更好 lora训练是根据大模型作为参考 lora是根据那个大模型来训练参数的 例如 这里以墨心lora为例 点击示例图片的中的 在Model中就显示出了作者用于训练墨心lora的底模了 2 最好使用和作者相同的