首页 >>  正文

ai绘画lora训练

来源:baiyundou.net   日期:2024-09-01

作者:dcl2501

题记

我是你们的DCL2501,欢迎和我一起学习AI绘画。
这是本系列文章的第四篇,第三篇也许在审稿,是苹果系统部署篇。第四篇是答疑篇,不知道前三篇写了什么的小伙伴,请移步这里 

有人会问,本地化部署stable diffusion已经部署好了,但是为什么你生成的图片那么漂亮,质感和真实感都很棒,而我自己用AI画的图就这么生硬且不真实呢?我的问题是,造成这个现象的原因是什么?

答:很关键的一个因素,就是我在人工画图的时候,添加了专门生成的模型和lora安装包。
下面就给各位小伙伴讲讲如何利用模型生成包lora来画真实感超强的人物画。

正文部分之教程篇

1.我们要确认一定是按照我的教程本地化部署了stable diffusion webui,不会的同学请回去参考我的篇一和篇二,如果你是mac系统的用户,请参考我的篇三(篇三好像在审核,发不了链接)

2.是打开civitai.com这个网站

首先介绍一下这个网站,这是全球最大的AI绘图爱好者聚集社区,网站里提供了大量的模型素材,尤其是3D,现实,人物,画风等有针对性训练的模型,也因此,你可以采用特定的模型去生成特定主题的画作,其作品表现力会大大增强。

3.这里有大量的画风和主题可供参考,查看详细信息并下载响应包和模型
我们以Cute_girl_mix4这个LORA包为例说明一下:

(1)下载这个模型包,并放到指定文件夹(右面DOWNLOAD蓝色按钮)

右上角点击download下载此Lora包。(一般几十到几百MB),下载好后,放在你电脑的stable-diffusion-webui > models > Lora文件夹下面。
(2)lora包网页,示例图片点击右下角的圈圈感叹号,查看生成信息。
(3)找到model行,了解到这个lora包还需要使用chilloutmix_NiPrunedFp32Fix模型
(4)下载模型,并放到指定文件夹
把chilloutmix_NiPrunedFp32Fix放在Civitai搜索框上搜索,发现没结果,但是找到一个类似的,也是生成真实人像的模型(checkpoint),叫做OrangeChillMix,接着我们把这个模型下载下来(7.17GB),并放在stable-diffusion-webui>models>Stable-diffusion文件夹下面。

4.启动stable-diffusino-webui,并切换模型
(1)启动stable diffusion webui
如何启动就不重复了,忘了的可以回去看看win安装篇,mac安装篇,里面都有讲如何启动。
(2)切换模型

先点击左上角的刷新按钮,接着点击左上角的向下箭头,找到你刚刚下载的orangechillmix_v70.safetensors模型,点击它。
等待一分钟后,按f5刷新页面,如果左上角已经自动显示了“orangechillmix_v70.safetensors”字样,那么模型就切换成功了。
(注意,切换模型需要先提前完成第三步里面的:下载模型,并放到的指定文件夹)

5.开始生成图像。
(1)浏览器回到刚刚的那个Cute_girl_mix4网页,点开示例图片右下角的感叹号,点击copy generation data 按钮。

(2)在stable diffusion webui的 prompt输入框里面,Ctrl(command)+ V ,粘贴刚刚复制的内容后,接着点击Generate下方的“左下箭头”。

这时候,你会发现,刚刚长长的prompt变短了,其他内容去哪了呢?
原来去了下面的nagative prompt框,和下面的参数配置。

(3)点击generate,开始生成图像。
(4)等待图像生成完毕,然后右键点击生成的图像保存,或者点击图像下面的文件夹图标,进入文件夹查看生成的图像。

答疑时间

问题1.按照上面说的步骤,发现生成图像非常慢怎么办?比如你看下面,生成一张图都要20多分钟甚至更长时间?

回答:这是由于电脑性能不足,导致运算过慢。而示例图片都是默认显卡性能很强,所以他们有的选项对你来说,可能会运算量过大而生成时间超慢。
就像我们看游戏宣传视频,通常都是很流畅,而且画质超精美,但是自己玩的时候由于配置不够,可能会比较卡,还比较模糊,是一样的道理。
那么如果你的电脑性能不足,怎么优化速度呢?(当然绘制质量/效果也会有一定折扣)

(1)取消hire.fix的勾选,这一项作用是扩大分辨率并增强画质,非常耗算力;
(2)分辨率如果是512768可以不用动,如果是7681024或者都是768以上的分辨率,那么按比例调低分辨率。(那要高清图怎么办,生成基础图之后用extra功能放大图片。关注我,后面会讲。)
(3)sampling method取样方式,原作者是两个,dpm++sde karras,可以改成euler a
(4)升级硬件,买一个好点的显卡,比如Nvidia GTX3060以上,12G显存以上的。
(注意,以上方法不一定需要全用上,如果用上一两个能改善作画速度即可,因为改得越多,对绘图结果的质量影响越大。)

当然也可以参考我这篇文章,也能做出不错的AI画图 

  文中提到的显卡 

问题2.如果我不用korean小姐姐的lora包,要用其他包怎么弄?
回答:同上面教程,先找一个你感兴趣的绘图类型和风格,比如3D,动漫,国风或者之类的,点进去查看对方使用了哪些lora包,哪些模型,下载相关模型和lora包即可。

问题3.lora包是如何在prompt里面体现的?
回答:我们先来看看一段样例prompt的lora提示:

可以看出,lora包的使用通常形式是,可以多个lora包一起使用。
最前面lora代表我要使用lora包,后面是lora包的名字和版本,最后0.xx则是要占多少比例,数字越大,lora特性展现越明显。
比如示例的两个lora包,可以是分别0.6和0.4,也可以分别是0.3和0.7,加起来不超过1就行。

问题4.使用lora包,terminal或者cmd报错说找不到Lora名字怎么办?

回答:报这个错,也能生成图,但是无法应用和展现你想用的lora包特性。
比如上面这个报错,就是没找到你指定的lora包,这时候要么你没有下载这个lora包,要么就是lora包名字错误。
点击gerate按钮下面的图像,再点击lora,下面会列出你拥有的所有lora包,复制名字替换掉prompt区域的lora包名字,把名字改对,就不会报错,并能使用相应lora包特性了。

问题5.生成了好看的小姐姐,还想每次都尽量生成同一个人脸怎么办?
回答:
(1)尽量稳定使用同一个lora包;
(2)保持同一个seed不改动
(3)自己“炼丹”,训练自己想要的脸部模型lora包或者checkpoint模型库。

片尾彩蛋:

知道大家看惯了lora模型的人工画图,我们换个小姐姐模型 

这个系列我会尽量更新下去,欢迎大家点赞,收藏,打赏,关于AI作画,其实不仅仅是最近很火的stable \ndiffusion,其实还有disco diffusion作画,其中人像作画比较优秀的是stable \ndiffusion,风景画之类的比较优秀是disco \ndiffusion,(以上纯是个人观点,有不同意见,你杠就是你赢,骂我我就拉黑,欢迎友善讨论啊!)也可以讲讲怎么部署disco \ndiffusion,不过跑DD需要谷歌账号和谷歌搜索,需要科学上网,这也限制了一部分小伙伴的热情。

","gnid":"967d1c1968406a7a8","img_data":[{"flag":2,"img":[{"desc":"","height":"1200","title":"","url":"https://p0.ssl.img.360kuai.com/t01831c0fb4ad8724d7.jpg","width":"600"},{"desc":"","height":"860","title":"","url":"https://p0.ssl.img.360kuai.com/t018442478e189cff00.jpg","width":"600"},{"desc":"","height":"860","title":"","url":"https://p0.ssl.img.360kuai.com/t01b3dfa1e24d19e121.jpg","width":"600"},{"desc":"","height":"323","title":"","url":"https://p0.ssl.img.360kuai.com/t01248d151b2b224abc.jpg","width":"600"},{"desc":"","height":"323","title":"","url":"https://p0.ssl.img.360kuai.com/t011cee1bcb4a7ef3c6.jpg","width":"600"},{"desc":"","height":"372","title":"","url":"https://p0.ssl.img.360kuai.com/t0170d0082e89b8f5b2.jpg","width":"600"},{"desc":"","height":"325","title":"","url":"https://p0.ssl.img.360kuai.com/t01c7e22c1ec4def179.jpg","width":"600"},{"desc":"","height":"173","title":"","url":"https://p0.ssl.img.360kuai.com/t0109a8af601bec5ace.jpg","width":"600"},{"desc":"","height":"323","title":"","url":"https://p0.ssl.img.360kuai.com/t014da1d1e3f58c8c09.jpg","width":"600"},{"desc":"","height":"170","title":"","url":"https://p0.ssl.img.360kuai.com/t01be0724fdc2aec2ef.jpg","width":"600"},{"desc":"","height":"535","title":"","url":"https://p0.ssl.img.360kuai.com/t018eecbaf9953d06cc.jpg","width":"600"},{"desc":"","height":"368","title":"","url":"https://p0.ssl.img.360kuai.com/t01330782bcf8c15fd7.jpg","width":"472"},{"desc":"","height":"332","title":"","url":"https://p0.ssl.img.360kuai.com/t01cae361bf2c3e21a7.jpg","width":"600"},{"desc":"","height":"644","title":"","url":"https://p0.ssl.img.360kuai.com/t01a2a08f2f1cbbb0ae.jpg","width":"600"},{"desc":"","height":"356","title":"","url":"https://p0.ssl.img.360kuai.com/t01ada1062df5cb1136.jpg","width":"600"},{"desc":"","height":"768","title":"","url":"https://p0.ssl.img.360kuai.com/t018f0a8adfbcead572.jpg","width":"512"},{"desc":"","height":"768","title":"","url":"https://p0.ssl.img.360kuai.com/t01dd00377190673b46.jpg","width":"512"},{"desc":"","height":"768","title":"","url":"https://p0.ssl.img.360kuai.com/t01fa609c719b1fa337.jpg","width":"512"},{"desc":"","height":"768","title":"","url":"https://p0.ssl.img.360kuai.com/t013ea5967bfe6a86db.jpg","width":"512"},{"desc":"","height":"768","title":"","url":"https://p0.ssl.img.360kuai.com/t016185a641db26c734.jpg","width":"512"}]}],"original":0,"pat":"art_src_1,fts0,sts0","powerby":"hbase","pub_time":1679464811000,"pure":"","rawurl":"http://zm.news.so.com/caed8d4334cffd51df2f881b26631bb4","redirect":0,"rptid":"3aad3e8a7c0a0238","rss_ext":[],"s":"t","src":"什么值得买","tag":[{"clk":"ktechnology_1:小姐姐","k":"小姐姐","u":""}],"title":"手把手教你AI作画 篇四:了解AI作画从零开始,如何画的真实且美感的小姐姐及答疑篇

林炊璧4440AI里面用钢笔绘图,怎样才能画出圆滑的效果,过程中需要用到的快捷键 -
钮养婵13397163180 ______ A V Alt Ctrl shift+c 主要是这5个 看你对ai的基本功了

林炊璧4440在AI中,“ctrl+alt+x”,是什么工具的快捷键?有什么用途? -
钮养婵13397163180 ______ 建立“实时上色”,命令在“对象——实时上色——建立”. “实时上色”是通过将图稿转换为实时上色组,您可以任意对它们进行着色,就像对画布或纸上的绘画进行着色一样.您可以使用不同颜色为每个路径段描边,并使用不同的颜色、...

林炊璧4440AI画图软件上怎样把波浪线长度不变密度变 -
钮养婵13397163180 ______ 这个不能像CDR一样调属性,这个如果要改变所谓的密度(我以为的是波峰多少),要重画一条直线,然后选择效果——扭曲和变换——波纹效果,然后如截图所示,点击预览,自己试试每一个参数的效果.希望能帮到你.~~

林炊璧4440学习AI主要要掌握哪些?不会更不喜欢画画可以学会这个软件吗
钮养婵13397163180 ______ 如果你会用ps的话,ai会更好学!因为都是一个公司出的!有好多命令和快捷键都是一样的!这个和画画也没什么大关系!

林炊璧4440请问,AI里面这样的形状如何绘画出来??? -
钮养婵13397163180 ______ 至少有两种方法可以做:一,先画一个长条状的矩形,对象路径添加锚点,然后用删除锚点工具,删除其中不要的锚点,使它成为一个三角形,二,在三角形的“尖”使用旋转工具,按住ALT点击,在弹出的对话框里输入一定的角度数值,(具体值自己定,)点复制,然后ctl+d再次变换,直到成为一个圆形,三,用矩形工具画一个正方形,全选对象后,ctl+7.第二种方法:1.先绘制一个小正方形,然后选择工具按SHIFT移动一定的距离后,ctl+d,2.编组,复制让这些小方块排成一个“囗”形3.用直接选择工具,选中部分锚点,按SHIFT加选,4.对象,路径,平均,两者兼有,就OK了

林炊璧4440Illustrator与coreldraw区别?
钮养婵13397163180 ______ 好像关于这个问题有不少朋友都会想问,其实软件本身只是做为一种工具,到底哪一个软件更好用,这个很难评论,主要还是要自己去尝试一下,就像战场上选择兵器一样,顺手的就是好样的,如果楼主需要参照.我可以讲下我个人的观点,老实...

林炊璧4440Ai画图软件中的魔棒工具的作用是什么 -
钮养婵13397163180 ______ 可以选中同一个颜色的图形,有时候会选中比较接近的颜色!主要是调色用.或者有时候合并之后又一些图形不要的,可以用魔棒对单一颜色选中后编组,隐藏后删除其他不要的!简单说就是选中同个颜色

林炊璧4440如何在ai中绘制带有水珠的绿色绘制树叶 -
钮养婵13397163180 ______ 几种方法: 1.使用画笔笔头来画:打开菜单“窗口/画笔库/箭头”,选择一种笔头,然后用画笔工具画线就会出现箭头效果;也可以先用任意工具画线,然后选个笔头付上去. 2.使用符号:打开菜单”窗口/符号库/箭头“,从里面随意拖一个箭头出来就可以...

林炊璧4440怎么用Adobe Illustrator画图?急用...求教学 -
钮养婵13397163180 ______ 直接临摹,然后在手动修改一下就可以了

林炊璧4440ai画板怎么按自己的顺序导出 -
钮养婵13397163180 ______ 解决方如下:1、首先打开ai的软件,小编在这里就任意的新建3个画板吧.如下图所示.2、为了区分画板,小编就将第一个也就是面板1尺寸为最大,面板3尺寸为最小,如下图所示.3、现在我们就来调整面板的顺序,小编会先将画板面板关掉.只想菜单栏中的窗口—画板4、点击画板后,我们就打开了画板面板,5、现在我们就需要来调整画板的顺序了,我们可以手动的拖动画板面板中面板的顺序,就像改变ps软件中图层的顺序一样.6、当然,我们也可以先选中你需要调整顺序的面板,点击画板面板下方的向上向下,来修改面板的顺序.如有侵权,请联系删除

(编辑:自媒体)
关于我们 | 客户服务 | 服务条款 | 联系我们 | 免责声明 | 网站地图 @ 白云都 2024