AI绘画与SD工具介绍
我们非常重视原创文章,为尊重知识产权并避免潜在的版权问题,我们在此提供文章的摘要供您初步了解。如果您想要查阅更为详尽的内容,访问作者的公众号页面获取完整文章。
接触了ChatGPT,也必然会接触AI绘画。而我本着对AI绘画的好奇,在加上一个事情("AI绘画的出现,让游戏行业的原画师职业受到极大挑战"),就参加了一个AI绘画的培训课。培训3天,每天1个半小时。
现在就把我所Get到的且认为重要的知识点记录下来,以备不时之需。而那些没有记录的知识点,并不是不重要,只是我还没有Get到.
AI绘画的工具
课程上首先介绍下4个主流的AI绘画工具。它们分别是Midjourney(简称MJ),DELL-E-2,Firefly和Stable diffusion(简称SD)。下面简单介绍下。
Midjourney
现在讲AI绘画,必然会介绍的工具。它是2022年3月份出来的一款优秀的AI绘画工具。然而它在国内使用起来就不方便了。首先要科学上网;然后还不免费的(现在是10美元/月,30美元/月,60美元/月的月租)。对于只是想了解该工具的人员来说,这是一笔不小的开支。最后因这两个条件,把国内很多用户拒之门外了。
DALL-E-2
是OpenAI公司推出的文本生成图像系统。是的,正如它描述那样,只能文生图(不能支持图生图功能)。所以它的局限性就限制了很多。
Firefly(萤火虫)
Firefly是有Adobe公司推出的AI绘画工具。是的,就是那家推出PhotoShop的公司。Firefly目前还在持续推出中。推广范围不大。
Stable diffusion(SD)
推荐它的理由是:开源的,无版权限制并且支持本地部署。所以理论上很适合AI绘画学习,也是老师推荐的理由。
然而,课后了解下:本地部署非常麻烦,且对电脑硬件要求比较高(显卡至少16G以上,电脑总配置上万),我是放弃本地部署来。所以建议购买云服务。
当然,网络上还有6pen.art,dreamstudio,文心一格等工具。这些工具,我课后没有体验,有兴趣的可以自行体验。
AI绘画使用场景
AI绘画使用场景主要是线稿上色,画风转变,三视图,模特换衣,建筑设计,数字人定制,小图无损放大,AI换脸 等这些方面。下面截图进行展示说明(排列部分先后次序)
1.线稿上色
2.画风转变
3.三视图
4.模特换衣
5.建筑设计
6.数字人定制
7.小图无损放大
8.AI换脸
Stable Diffusion能做什么
简单来说,Stable Diffusion是一种文本或图片生成新的图片的工具。给它一个文本或者图片(支持图生图)。它将生成与文本匹配的图片,或者新的图片。当然,它内部也是有大模型的,类似ChatGPT一样的大模型。
Stable diffusion底层逻辑
先介绍下基本逻辑,具体如下图所示
有点类似 食材->点菜->调料->美食的流程。
Stable diffusion内部实现
这里就不详细介绍了,有兴趣看这里:
https://blog.csdn.net/hawkman/article/details/130619825
说明下:部分图片来源于课堂,部分图片来源网络,若有侵权,请联系作者.
有兴趣,请关注程序员华仔
扫码关注我们
想要了解更多内容?