加载中...

ai绘画云端教程+指定人物训练


ai绘画爆火,对于非专业人士来说,相较于chatGPT,前者更具可玩性和可操作性。但普遍性存在以下问题:1.涉及编码/参数调整,专业门槛过高,导致非专业人员即使跟着教程也各种出错;2.个人设备显存太小,跑不动;3.绘制出的效果不尽人意;4.训练出指定人物程序复杂,需要大量实验和不断调整。
因此,本贴专门介绍云端AI绘画,跟着教程走,可以帮助大家解决其中前两个问题;讲解如何运用lora模型(就是能生成指定人物),解决后两个问题。基本上跟着我走,再自己不断实验,应该能出中低质量的成品

声明

1.本人非专业,本贴非100%原创,很多资源和方法都学自大佬,在此向各大佬表达致谢和敬意。
2.使用本贴任何素材(语句文段、图片、框架、方法等)均需注明转载。
3.技术是客观的,法律也是客观的。切不可用技术做违法之事。由此贴所学技术产生的的任何后果均与发帖人无关。
请同意上述声明后继续阅读,不同意则本贴拒绝访问

一、要素准备

1.电脑,不卡就行,显卡最好4G及以上;
2.图片素材,建议大一点,多一点。(因为用的是云算力,即他人的电脑跑代码搞AI,不怕运行不起来);
3.云算力。推荐autoDL平台:https://www.autodl.com/home 。价格低廉。基本10元内搞定;
4.本地安装webUI,也就是novel。下载地址:https://pan.baidu.com/s/1tCprxK_CUdwEn80AFpLoIw,提取码:u612
这个是所有AI绘画进行的前提/平台,所以开始之前务必安装好。安装包可找B站枫葉大佬,私信它sdV3,可拿度盘链接。要是你能访问github,可以找找其他版本的webUI,这是开源的。
5.魔法。无则也可,有则更好。

二、云端生成lora模型

1.安装webUI,解压之后点击启动器,第一次启动需要签一个协议(同意不用于违法),然后关了重进。第二次打开控制台会自动下载并配置需要的文件,安静等待即可,半小时以内。

2.素材修剪。打开webUI,会在浏览器出现操作界面,在上方一行选项卡依次点击“训练→图像预处理”,出现下图:图片处理
这时开始初步处理图片素材(自己准备的指定人物图片),以方便后面生产lora模型。处理好的图片和文本文件保存在新建文件夹,新建文件夹需要如此创建:“train→sucai→6_sucai”。即三个文件夹,依次下置,最后的子文件夹名称的数字可大可小,但需为2的倍数,如6,8,10。越大运行次数越多,对显存要求越大,不过咱们云算力,可以大,30以内。文件名称也可以不是“train,sucai”,自己设置,但要求英文且最后子文件夹名称按上述格式来。”train“文件夹放哪个盘都可以。(也就是说有三层文件夹,第一层是train,第二层是shuyi,第三层6_shuyi,一定要如此设置三层,不然运行失败)。如若不懂,可以去看B站视频: https://b23.tv/XJlmoSf

3.使用云算力生成lora模型。1)打开AutoDL官网:https://www.autodl.com 点击左上方”算力市场“,选择机器配置,我选的是RTX3090,性能杠杠滴,低一点的性能应该也可以,自己估算一下显卡性能进行选择。接下来就是注册/登录,选择镜像,镜像点第二个“算法镜像”,输入“lora”,自然会出现一个选项,选就完事了。如下图:镜像选择。2)进入控制台,如下图:控制台操作点击“jupyterLab”选项,点击会发现lora-scripts文件夹已存在。点击打开,把刚才在本地创建的“train”文件夹上传(如果文件夹上传不了就再此处创建如步骤2一般的三个文件夹,依次下置。然后在“6_shuyi“文件夹内上传处理好的图片和文本文件)。3)”lora-scripts“目录找到”train.sh“文件,双击打开修改参数,参数修改看上面链接给的B站视频(视频很长,很多与云端绘画无关,可直接跳至所需内容)。视频内设置的参数比较小,咱们用云算力好显卡,可以直接调大。3)界面中右部分有终端图标,如图:云终端运行 点击打开。输入”bash train.sh“,运行代码。然后静待云端运行生成结果。

4.保存lora模型到本地。生成好的lora模型会在“output”文件夹下,一般为“safetensors”文件或“skpt”文件。将其下载并保存至本地,路径为“D:\novelAI\extensions\sd-webui-additional-networks\models\lora”,哪个盘都可以,且总目录也不一定叫”novelAI“,就是你本地安装webUI的目录。

到此为止,个人专属的lora模型就完成了,可以据此生成指定人物。

三、云端生成lora模型

此部分教程为本地操作,一般4G显卡即可完成此工作。至于用云算力完成,容我后续研究。
1.(魔法)访问 https://civitai.com/ 其主页如下图:模型网站

2.找到自己想要的风格/效果,点击进去并下载其模型作为底模,如下图:模型下载 多个版本可选,一般选最新版。下载好之后,如果你只将其当作底模(确定画风质量等),具体人物自己指定,那么就要注意两点:1)下载时一般不要选择类型为lora的资源,如下图:识别lora 而是使用自己的lora模型(即自己在云端生成的);2)底模下载之后放置到D:\novelAI\models\Stable-diffusion路径(还是那句话,哪个盘任意,novelAI文件名任意)。

3.模型选择。本地运行webUI,在文生图界面左上角”Stable Diffusion 模型(ckpt)“选项卡中选择自己想要的底模,即上一步在civitai网站下载的。模型的 VAE (SD VAE)”选项卡选择“同名/无”都可以。文生图的tag(即关键词/不需要的词)可以直接照抄civitai网站,参数设置也可以照抄或做稍微改动。如下图:复制参数 要想生成指定任务注意必须勾选lora插件,如下图:指定Lora 云端生成的lora模型。云端生成的lora有多个,选择没有数字前缀、最均衡的那个就行。或者你也可以一个一个试,看那个最像本人。lora权重不是越高越好,0.5-0.7,一般0.6,0.6就挺好。如果选项中没有自己的lora模型,可以重启UI。

4.生成绘画。右上方选择”生成“按钮,等待即可。最后保存并打开观看效果。

以上就是所有内容:云端生成lora模型+本地AI绘画。是本人亲身实践觉得适合小白入门的比较便捷比较清晰的操作指南,学会后基本可入门,剩下的就是不断尝试插件、模型、大量的实验。

写在最后

再次鸣谢各位大佬。其视频/文章链接统一放置如下:
1.webUI资源(即ai绘画软件/平台)

2.lora模型素材处理、文件路径、参数调整。

(视频中的本地训练lora部分可忽略)

3.civitai网站资源保存路径及ai绘画入门教程。

本人作品涉及个人肖像隐私,故不在此处展示,若有兴趣交流/想评判我的ai作品可从本站主页最下方添加QQ。读者若完成了较满意的作品可在本篇文章下方评论/添加站长QQ,我必观赏。


文章作者: Xiao Liaoliao
版权声明: 本博客所有文章除特別声明外,均采用 CC BY 4.0 许可协议。转载请注明来源 Xiao Liaoliao !
评论
  目录