WebUI与ComfyUI的学习
WebUI与ComfyUI的学习
本文最后更新于214 天前,其中的信息可能已经过时,如有错误请发送邮件到273925452@qq.com

初识AI绘画

DALL-E

初次接触AI绘图是ChatGPT的DALL-E,它通过输入文本提示词就可以生成栩栩如生、随心所欲的图片。这种便捷且充满创意的体验让我着迷。因每日次数有限,然后开始寻找其他的方案。


MidJourney

在探索过程中,我发现 MidJourney也是一个非常强大的绘图工具,不仅支持文本生成图像,还以其独特的艺术风格和高质量的渲染脱颖而出、能够生成超现实,科幻和创意的图片。MJ运行在Discord平台,使用简便,只需和机器人互通输入提示词就可以完成生图功能,也支持图生图、转绘等功能。可以说是目前为止,最强的AI绘画工具,但也是因为费用高昂,基础会员10美刀一月,放弃了。

以下是MJ生成的图片:

之后也尝试了国内国外其他绘图,参差不齐质量都不如MJ。


SD

WebUI

后来偶然发现一个开源的绘画模型SD,可以部署在本地运行,完全免费,生态也非常好,网络上有很多人分享了自己制作的不同绘画大模型和微调模型Lora,可以说非常的自由。花了点时间部署在本自己电脑上,使用的是秋叶大佬的部署工具,非常的便捷。

启动界面如下:

点击一键启动等待片刻后就可以开始创作了。

以下是WebUI的界面:

然后,我会去寻找符合自己需求的类型大模型,不同的大模型有着截然不同的绘画风格,比如写实类模型、动漫类模型、风格化模型等。以写实类大模型为例,我可以通过简单的提示词,比如输入“1girl”,同时调整分辨率和生成的批次数量,点击生成后,很快就能得到一张逼真的写实风格图片。这种灵活多样的模型选择,让创作过程充满了可能性,可以根据需要快速实现不同风格和主题的画作:

如果我把提示词在复杂一点,比如添加场景,氛围,灯光,衣服等等:


像素开发想法

当然,这只是最基础的出图方式。如果想要更精细的效果,可以添加Lora进行微调,例如针对特定脸部的调整、设定特定的氛围、场景或风格。通过这些微调,可以实现更加个性化的创作。还可以使用图生图功能,进行姿态控制、高清修复等处理,让每一张图片都更具细节和质感。

然后我突发奇想,可以生成像素图片吗:网上下载像素大模型,尝试了一下,确实可以:

建筑:

角色:

人物动作帧:

当然还有装备和场景等~

那这对于那些想要开发游戏的人来说,不是能大大提高效率吗?

然后那段时间,黑神话悟空出来了,国产首款3A大作,很早就期待了,也非常想第一时间游玩,但因为自己是画质党,然后电脑配置不达标不能完全的体验到终极画质,就放弃了,然后去看别人玩,看别人最高画质玩着,也是非常的满足~

然后我又突发奇想,有没有像素版的西游记呢?2D俯视角,或者2.5D,或者横版? 然后我去搜,有一些,但是质量都一般,画面我不满意,然后最近黑猴热度绝对的有的,自己想搞一款出来, 只能说我是那种执行力太强了的人,本来说以后工作了再去学游戏制作,但一有一点子就控制不住自己> <


游戏开发想法

正好这学期要学C#, 就选择的Unity游戏开发引擎,然后C#是C++的升级版,一个星期就入门了,之后找工作也需要C++,都是编程语言,主要学的框架语法思想,所以也是对自己有用的~

然后网上去白嫖了原价1k多的学习视频,部署环境,准备资源,工具。先学习了麦田物语类似星露谷物语的游戏开发,Unity,2d像素游戏开发,很快就入门直接上手做游戏了。

某天刷B站突然刷到一个做游戏的大佬开发像素黑神话的游戏Demo。百万的播放量😐,这个热度无敌,被人家抢先了~

干了一个月左右,开始准备秋招了,所以暂时放下这个想法,以后再搞。开始准备找工作~

ComfyUI

ComfyUI 是一个开源的图像生成和编辑平台,允许更高自由度的界面定制,工作流是有许多的工作节点和连线组成,相较于WebUI的集成界面,ComfyUI可以清楚的看到AI绘图的每一个节点的工作流程,, 用户可以根据自己的需求调整布局和功能模块,更加灵活。界面如下:

网上也有很多开源的生态网站,非常多的风格模型和工作流提供下载,比如C站,L站

然后就开始下载研究不同的风格模型生图,测试不同的Lora,电脑内存越来越小。。。一个大模型小的几个G,大的几十G,C站要挂梯子,我就续费了梯子。Lora还好,几十到几百M,

之后我就想,自己电脑配置一般,想出高质量的图很费时,然后最近又新出了一个Flux大模型,质量堪比MJ的模型,以下是Flux模型生成的图片:

可以说是说什么就生成什么,指哪打哪,图片的质量已经很难区分是否是真人了

当热,Flux模型自己电脑肯定带不起来,显存至少16GB, 所以开始找云电脑,

前后测试了青椒云,用大佬的镜像,A4000一开始只要1块多一小时,后来涨价3快多直接翻倍,4090更贵,用了短时间用不起了~

然后换用端脑云,4090要2块5一小时,还可以接收,周年庆充值翻倍我充了100够用一段时间了。端脑云主要是便宜,但是使用体验并不好,上传下载文件很慢,然后这期间也是要耗钱的,可以暂停,但会面临当你传完文件后,显示GPU已被其他人抢占的问题!😭,网络也经常波动,使用体验很糟糕,而且GPU3天不使用就会销毁,也就是说你花时间花金钱配置的环境就没了😊。 但因为充了钱,所以硬着头皮使用。 然后偶然又发现一个云端,仙宫云,4090只要2块3 , 4090D 2快1 不仅便宜,而且自己的配置永远不会消失,所以打算用完端脑后就转移到仙宫云去。

AI流量

刷视频偶然认识了一个AI大佬,教了我视频重绘,可以给人换脸,视频换风格,换背景, 也可以图生视频,比如用国内的可灵,即梦大模型,可以让图片动起来,比如最近的各种鬼畜视频,研究了一段时间的工作流,比如视频转绘,换脸,高清放大,抽帧插帧。

文生图换脸放大

转绘

ComfyUI训练Lora

这一切当然是有的云端电脑才让自己使用起来方便,让我这些普通人也能实惠的用上4090~

尝试发了抖音小红书等平台,每日1到2个作品,1个星期就涨了2k粉丝,可以说是普通人能接触到的最前沿的AI绘画技术之一了。流量还是很不错的。

💡商业转载请联系作者获得授权,非商业转载请注明出处。
协议(License):署名-非商业性使用-相同方式共享 4.0 国际 (CC BY-NC-SA 4.0)。
使用这些免费资源的时候应遵守版权意识,切勿非法利用,售卖,尊重原创内容知识产权。未经允许严禁转载。
暂无评论

发送评论 编辑评论


				
|´・ω・)ノ
ヾ(≧∇≦*)ゝ
(☆ω☆)
(╯‵□′)╯︵┴─┴
 ̄﹃ ̄
(/ω\)
∠( ᐛ 」∠)_
(๑•̀ㅁ•́ฅ)
→_→
୧(๑•̀⌄•́๑)૭
٩(ˊᗜˋ*)و
(ノ°ο°)ノ
(´இ皿இ`)
⌇●﹏●⌇
(ฅ´ω`ฅ)
(╯°A°)╯︵○○○
φ( ̄∇ ̄o)
ヾ(´・ ・`。)ノ"
( ง ᵒ̌皿ᵒ̌)ง⁼³₌₃
(ó﹏ò。)
Σ(っ °Д °;)っ
( ,,´・ω・)ノ"(´っω・`。)
╮(╯▽╰)╭
o(*////▽////*)q
>﹏<
( ๑´•ω•) "(ㆆᴗㆆ)
😂
😀
😅
😊
🙂
🙃
😌
😍
😘
😜
😝
😏
😒
🙄
😳
😡
😔
😫
😱
😭
💩
👻
🙌
🖕
👍
👫
👬
👭
🌚
🌝
🙈
💊
😶
🙏
🍦
🍉
😣
Source: github.com/k4yt3x/flowerhd
颜文字
Emoji
小恐龙
花!
上一篇
下一篇
🎵 背景音乐
正在播放
00:00 00:00