前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >专栏 >【玩转GPU】AI绘画专栏stablediffusion SDXL小白入门教程 | 提示词教程 腾讯云专属

【玩转GPU】AI绘画专栏stablediffusion SDXL小白入门教程 | 提示词教程 腾讯云专属

原创
作者头像
疯狂的KK
修改于 2024-05-07 01:51:16
修改于 2024-05-07 01:51:16
3.6K00
代码可运行
举报
文章被收录于专栏:AI绘画AI绘画Java项目实战
运行总次数:0
代码可运行

本地版本下载启动器

代码语言:txt
AI代码解释
复制
SD启动器2024最新版本下载
链接:https://pan.quark.cn/s/eea6375642fd

常见问题排查

- CUDA out of memory: 炸显存 换启动参数 换显卡

- DefaultCPUAllocator: 炸内存 加虚拟内存 加内存条

- CUDA driver initialization failed: 装CUDA驱动

- Training models with lowvram not possible: 这点显存还想炼丹?

  1. 部署流程
  2. 基础部署流程同云服务器部署步骤一样
  3. 注意:显卡配置要求为N卡优先,适配程度高,CPU与主板要求不高,但需要跟显卡适配,运行过程温度较高,所以散热需要跟上,需要ATX3.0电源或者850W以上,可以物理降温,空调拉倒最低
  4. 本地部署步骤,下面有一键安装包无需任何操作,不需要准备任何环境,但基础环境需要自己准备,方便后续使用
  5. 1.优先有N卡的来,1060ti也能玩,A卡能玩吗?也能玩,但是A卡的教程少,内存不够的也劝退,总之AI有风险,N卡在咆哮。
  6. 2.论文和资料极其多,丧心病狂的多
  7. 3.苹果电脑需要系统在12.1+但是建议大家N卡
  8. 4.笔记本也可以,所有的N卡在低配环境下可以使用CPU跑图,,但是建议大家N卡(算了手动滑稽)
  9. 1.1优化启动/运行速度
  10. 1.配置
  11. 2.xfomers
  12. 3.显卡驱动更新,对应显卡型号
  13. 4.显卡优化至8G以下,8G以上不需要
  14. 5.webui设置参数:
  15. 1.基础环境准备(启动器无需安装,但建议安装git)
  16. 注:会更改本地代理服务器,第二次上网需要关闭,或者长期开启,关闭在控制台设置:搜索代理,关闭代理,拉取ncpm/git远程仓库开启加速,
  17. 物理加速:凌晨下载模型,仓库,拉取镜像等等
  1. Python:版本3.10或者3.9+
  1. Git:官网下载地址:
  2. Pytorch/CUDA:官网拉取GPU对应的pytorch https://pytorch.org/get-started/locally/
  1. 2.配置要求N卡 参考主页AI算力跑图性能
  2. 个人配置跟不上的推荐online
  3. 3.模型拉取/模型之间的搭配,存放路径
  4. 大模型存放路径:根路径\sd-webui-aki-v4\models\stable diffution
  5. Lora模型存放:根路径\sd-webui-aki-v4\models\Lora
  6. Lora如何展示预览图:在lora根目录下存放与Lora模型同名.png图片

模型一般都是直接下载,插件支持扩展从网址安装/git clone 也支持

  1. Lora分门别类:
  1. 1.1 WD tagger【线稿提示词提取】
  1. 1.2插件下载
  1. 1.3下载完插件记得重启UI
  1. 1.4菜单功能解释
  1. 2.爆显存参数设置:
代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
第一步:
点击键盘 Win + R 然后输入%temp% 回车进入文件夹后删除所有缓存文件

第二步:
开始 - 设置 - 系统 - 存储 - 其他 - 删除文件夹里面的所有内容
开始 - 设置 - 系统 - 存储 - 临时文件 - 选择性删除

第三步:
我的电脑 - 上方路径处输入:%LocalAppData%\pip - 点击回车 - 把cache里的所有文件夹删掉

最后:
清空回收站
  1. Tile VAE 防爆内存
  1. 4.1.先检查启动器参数:
  1. 4.2.外挂VAE选择自定义,不指定为autoencoder(自动解码)
  2. 4.3.文件位置:根目录/与exe同级别目录/webui-user.bat,使用文本编辑器打开/或者管理员打开
  3. 设置参数
代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
webui-user.bat
@echo off
#此处为新加配置,改动任何配置文件需要备份,一次性不要改动多处!!!
set PYTORCH_CUDA_ALLOC_CONF=max_split_size_mb:32
set PYTHON=
set GIT=
set VENV_DIR=
set COMMANDLINE_ARGS=

call webui.bat
  1. 4.4借助优化工具优化显存

推荐process lasso

删除缓存文件

  1. 1.把视频转为帧:一键切帧
  2. 切帧工具我发给你
  3. 2.图生图选择合适的seed
  1. 3.转到mov2mov,调整参数,controlnet,步数,重绘幅度
  1. 3.解决手部重绘问题

提示词:hand out of frame

反向:bad hands

  1. https://github.com/jexom/sd-webui-depth-lib https://upscale.wiki/wiki/Model_Database 链接:https://pan.baidu.com/s/1jo8SraCqHA0shizeGA-eXQ?pwd=o6sl 提取码:o6sl
  1. 4.二次元画风参数
  2. ((8k, best quality)),((Exquisite facial features)),((Anime style:1.2)),(1girl, full body),((Standing posture ,looking at viewer )),((JK Style,JK short skirt, Football Baby Knee Socks,flashlight)),Cyberpunk, holographic aura, surreal science fiction art, future science fiction aesthetics, Han style clothing, clothing influenced by ancient Chinese operas,masterpiece, best quality,, masterpiece,best quality,ultra-detailed,very detailed illustrations,extremely detailed,intricate details,highres,super complex details,extremely detailed 8k cg wallpaper, blue eyes,white hair, cyberpunk, sense of technology.
  3. 反向提示词:
  4. nsfw,(low quality,normal quality,worst quality,jpeg artifacts),cropped,monochrome,lowres,low saturation,mutated hands,mutated fingers,deformed,bad anatomy,disfigured,poorly drawn face,extra limb,ugly,poorly drawn hands,missing limb,floating limbs,disconnected limbs,out of focus,long neck,long body,extra fingers,fewer fingers,,(multi nipples),bad hands,signature,username,bad feet,blurry,bad body
  5. 参考图:
  1. 5.个人常用大模型总结
  1. 个人常用Lora模型:
  1. 重绘/inpainting/蒙版重绘/后期处理
  2. 1.放大系数选择:默认为regional时,根据画面大小,选择32/64,以重绘中心扩散半径计算,但系数越大,与周边融合越没有违和感
  3. 2.inpainting vs 蒙版重绘 vs regional
  4. 3.后期处理:upscale系数算法选择一致,scale在0时影响介入,1时效果最小
  5. 选择original 再搭配Adetailer 效果不明显,需要选择fill,单元格选择face_mesh ,重绘填充半径32-64效果搭配脸部手部,提示词系数目前推荐0.5以上
  6. cn重绘 inpainting
  7. 视频教程
  1. 1 是否闪动
  2. mov2mov在tile模式下如果本身视频动作幅度较大,人不统一,会出现缺帧,少帧,甚至跳帧情况,除了一键合成工具,AR支持视频帧转入然后合成视频,不过AR本身操作的视频合成效果对帧数要求较高,最低30帧,如果需要一键切帧后再转视频有很多在线网站,但是推荐mov2mov形式合成
  3. Temporal(Temporalkit)更轻量化,防呆一键操作
  4. - 支持多个 ebsynth 项目(以避免 20 个关键帧限制)。 - 自动场景检测,剪切和重组。 - 显著的性能提升。
  5. Temporal-Kit+EbSynth效果丝滑
  6. git地址:https://github.com/CiaraStrawberry/TemporalKit
  7. 2.是否缺帧
  8. mov2mov会在1的场景下缺帧
  9. Temporal-Kit+EbSynth效果丝滑
  10. 3.硬件要求
  11. 都需要搭配stable diffusion,如果想要高质量视频可以后期对问题帧进行PS,转入inpainting再次绘制
  12. 4.速率
  13. 依赖硬件
  14. 8.Controlnet预处理器作用
  15. 8.1.controlnet开多个tab窗口unit
  16. 1.打开设置
  1. 2.搜索或者下拉至controlnet,改变最大单元格,重启UI。
  1. 3.记得勾选启用才能使用,当启用后最新版会变成绿色
  1. 4.预处理器作用

renference_only(仅参考输入图)

保留原图人物细节,画风迁移

invert

简单上色

openpose(姿态提示)

姿态参考(人物)

seg

色块提示(场景)

shuffle

重新分布图片色彩(色彩) 使用色彩图素材

tile

增加细节 配合去除景深,使用精确背景去除工具得到人物蒙版,回送脚本

media_pipe face(脸部边缘检测)

用于生成表情

hed(边缘检测)

用于ai动画生成

canny(边缘检测)

轮廓提示

lineart(线稿提取)

轮廓提示

softedge(软边缘检测)

轮廓提示

depth

场景远近提示

  1. 9.SD插件目录推荐
  2. 根据个人喜好推荐大家安装插件,首先阅读前文,确定插件和模型的区别,以及插件的安装目录,下面是插件名称以及作用目录安装目录/extentions
  3. 1.2.1常用插件3D openpose
  4. 1.基础菜单:
  5. 文件:可根据文件生成[人物骨骼3D图],或者上传蒙版图片定位骨骼位置
  6. 编辑:撤销/重做
  7. 视图:锁定/释放
  8. 设置:移动模式控制驱赶姿态移动,非移动控制角度
  9. 反馈:忽略
  10. 语言:设置为中文

  1. 采样方法
  2. 10.1.基础概念
  3. 如图所示,
  1. 绿色文字框为正向提示词,即文本需要出现的风格,人物,景观,主要元素
  2. 红色输入框为反向提示词,即文本中不需要出现的元素,即多手,多脚,劣质画质等等

预设提示词,抽卡

下载插件:

插件--脚本--选择One Button

主题:

Art:

图像类型

预设前缀:

后缀:

NSFW:

  1. Gamma教程
  2. 完整版视频教学点这里
  3. 简单教程:
  4. 1.国内邮箱可进行注册
  1. 2.主页
  1. 3.
  1. 4.
  1. 5.输入主题
  1. 出现生成的主题,可自定义主题
  1. 等待生成可发送到邮箱,生成结果可编辑,导出的 PDF 可以用文章后面的转 PPT 工具

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

评论
登录后参与评论
暂无评论
推荐阅读
编辑精选文章
换一批
AI绘画专栏之statble diffusion入门(一)
我用夸克网盘分享了「SD启动器下载」,点击链接即可保存。打开「夸克APP」,无需下载在线播放视频,畅享原画5倍速,支持电视投屏。 链接:https://pan.quark.cn/s/b16bc4d3ff88
疯狂的KK
2023/11/07
1.2K0
AI绘画专栏之statble diffusion入门(一)
【零绘画基础程序员必学】AI绘画入门笔记01—Stable Diffusion上手体验
前几年火爆全球的AI图像生成如今已经成为了设计师的必备工作流,作为不会绘画的程序员,平时做PPT、写文档也常常被插图困扰,是时候系统地学习下AI生图工具Stable Diffusion了。
CS逍遥剑仙
2025/03/17
5411
AI绘画:Stable Diffusion 终极炼丹宝典:从入门到精通
历经耗时数十个小时,总算将这份Stable Diffusion的使用教程整理妥当。
AI飞行家
2023/07/21
2.9K0
AI绘画:Stable Diffusion 终极炼丹宝典:从入门到精通
在腾讯高性能应用服务HAI,StableDiffusion新人从0-1干货教程,一学就会系列!
Stable Diffusion是2022年发布的深度学习文本到图像生成模型。它主要用于根据文本的描述产生详细图像,尽管它也可以应用于其他任务,如内补绘制、外补绘制,以及在提示词指导下产生图生图的转变。 它是一种潜在扩散模型,由慕尼黑大学的CompVis研究团体开发的各种生成性人工神经网络之一。(取自百度)
about me
2024/03/29
1K3
在腾讯高性能应用服务HAI,StableDiffusion新人从0-1干货教程,一学就会系列!
AI绘画专栏之 SDXL AI动画手把手教程(34)
此扩展以不同的方式实现 AnimateDiff。它不需要您克隆整个 SD1.5 存储库。它还(可能)对 应用了最少的修改,因此如果您不想重新加载模型权重,则无需重新加载。ldm
疯狂的KK
2023/11/16
7700
AI绘画专栏之 SDXL AI动画手把手教程(34)
AI绘画专栏之 SDXL controlnet API教程(36)
https://huggingface.co/lllyasviel/ControlNet-v1-1/tree/main
疯狂的KK
2023/11/17
1.3K0
AI绘画专栏之 SDXL controlnet  API教程(36)
AI绘画专栏之HAI起来~Stablediffusion|文生视频|Controlnet|SDXL|Comfyui插件
Sora、StableForge、StableCasecade、Stable3.0、SDXLLighting、PlaygroundV2.5,Stable webui1.8等
疯狂的KK
2024/03/12
3.4K1
AI绘画专栏之HAI起来~Stablediffusion|文生视频|Controlnet|SDXL|Comfyui插件
AI 绘画工具 Stable Diffusion 本地安装使用
最近要用到 AI 绘画,所以研究了下目前市面上的 AI 绘画工具,真可谓是琳琅满目,但主流的还是 Stable diffusion 和 Midjourney 两大阵营。
程序员树先生
2023/06/21
1.1K0
AI 绘画工具 Stable Diffusion 本地安装使用
AI绘画专栏stablediffusion之 SD插件大全 (48)
https://gitcode.net/rubble7343/sd-webui-extensions/raw/master/index.json
疯狂的KK
2023/11/28
2.4K0
AI绘画专栏stablediffusion之 SD插件大全 (48)
AI绘画第一课:入门AI绘画
🚩02:31 一、原理: 原图→扩散(增加噪声)生成(去除噪声) 🚩06:05配置要求 二、配置要求: (一)电脑(Windows/Mac系统) 建议win10以上的系统 (二)显卡(优先选择NVIDIA英伟达显卡) 1.独立显卡而非核显 2.显卡性能与显存会影响操作体验 : (1)性能影响出图效率 (2)显存影响绘制图形最大分辨率大小和模型训练规模 🚩07:51配置清单 三、配置清单:
yuanshuai
2023/11/17
4450
AI绘画第一课:入门AI绘画
AI绘画StableDiffusion实操教程:冰霜旗袍美女
飞书原文链接,获取更多资源:AI绘画StableDiffusion实操教程:冰霜旗袍美女
AI飞行家
2023/07/16
1.3K0
AI绘画StableDiffusion实操教程:冰霜旗袍美女
AI绘画StableDiffusion实操教程:月光下的美人(含高清图片)
AI绘画月光下的美人教程整合资料包:https://pan.quark.cn/s/4a6325874b35
AI飞行家
2023/07/26
9060
AI绘画StableDiffusion实操教程:月光下的美人(含高清图片)
AI绘画专栏之statble diffusion regional-prompter 分区上色 SD SDXL1.0 (十二)
在AI绘画领域,stable diffusion模型在图像生成方面取得了显著的进步,然而,如何对画面的各个分区进行精细的上色仍然是一个挑战。为了解决这个问题,我们引入了regional-prompter,一种新的技术,可以帮助我们对AI绘画的各个区域进行有针对性的上色。
疯狂的KK
2023/11/09
1.7K0
AI绘画专栏之statble diffusion  regional-prompter 分区上色 SD  SDXL1.0 (十二)
3分钟搭建AI应用?腾讯云HAI平台体验分享
上周刚参加完腾讯技术开发日,今天就来给大家分享一个我在现场体验到的"神器"——腾讯云的高性能应用服务HAI。
敖丙
2024/11/06
3771
3分钟搭建AI应用?腾讯云HAI平台体验分享
【零绘画基础程序员必学】AI绘画入门笔记03—初识ComfyUI+FlUX
前面介绍的SD的操作界面其实叫做 WebUI,这是SD的入门操作界面,它非常适合初学者快速上手。它的界面简洁,功能展示清晰,很适合用户理解SD的生图方式。
CS逍遥剑仙
2025/04/18
2080
AI绘画Stable Diffusion进阶使用
本文讲解,模型底模,VAE美化模型,Lora模型,hypernetwork。 文本Stable Diffusion 简称sd 欢迎关注
Dlimeng
2024/05/24
2210
AI绘画Stable Diffusion进阶使用
AI绘画专栏之statble diffusion SDXL 1.0 换脸roop easyphoto (24)
支持使用SDXL模型和一定的选项直接生成高清大图,不再需要上传模板,需要16GB显存
疯狂的KK
2023/11/15
3.3K0
AI绘画专栏之statble diffusion SDXL 1.0 换脸roop easyphoto (24)
王也|使用AI+二维码升级扫码体验(内含详细步骤)
上面在第二个模型网站中下载两个文件:control_v1p_sd15_qrcode_monster.safetensors和control_v1p_sd15_qrcode_monster.yaml
王也518
2023/10/16
6520
王也|使用AI+二维码升级扫码体验(内含详细步骤)
AI绘画:StableDiffusion实操教程-斗破苍穹-云韵-常服(附高清图下载)
前段时间我分享了StableDiffusion的非常完整的教程:“AI绘画:Stable Diffusion 终极宝典:从入门到精通 ”
AI飞行家
2023/09/09
3.4K0
AI绘画:StableDiffusion实操教程-斗破苍穹-云韵-常服(附高清图下载)
如何用AI生成可靠的图片
文本到图像生成模型是一种机器学习模型,一般以自然语言描述为输入,输出与该描述相匹配的图像。这种模型的开发始于2010年代中期,伴随深度神经网络技术的发展而进步。
Lvshen
2023/09/02
7730
如何用AI生成可靠的图片
推荐阅读
相关推荐
AI绘画专栏之statble diffusion入门(一)
更多 >
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档
本文部分代码块支持一键运行,欢迎体验
本文部分代码块支持一键运行,欢迎体验