当前位置：首页 > 人工智能 > 正文内容

AI绘画工具stable diffusion使用指南

lcpsky1年前 (2023-07-03)人工智能325

01 软件概述

AI绘画工具其实已经出来很久了，但最火的还是Midjourney和Stable Diffusion。stable diffusion是开源软件，我们可以去github上下载源码。它的功能包括文生图，图生图等。其中文生图是SD的基础功能：根据输入文本生成相应的图像，而图生图和图像inpainting是在文生图的基础上延伸出来的两个功能。

Prompt和Negative prompt

这两部分就是文生图的核心部分，描述准确、精炼的提示词能让的创作得心应手。

Prompt

用文字描述你想要生成的东西，支持自然语言处理，如：

A girl with long hair, Laurie. She has long hair and a double ponytail design

但更建议逐个关键词用逗号隔开，如：

1girl,loli,long hair,low twintails

Negative prompt

用文字描述你不想在图像中出现的东西，一般会直接用通用文本粘贴进去，特殊需求再单独修改。

LoRA

LoRA的微调质量与全模型微调相当。要做个比喻的话，就好比是大模型的一个小模型，或者说是一个插件。LoRA本来是给大语言模型准备的，但把它用在cross-attention layers（交叉关注层）也能影响用文字生成图片的效果。

02 软硬件环境

软件就用stable diffusion webui版本。这是目前能够在本地运行量产AI绘画并且对硬件要求不高的首选甚至唯一选择。显存越大能跑的分辨率越高，算力越强跑的越快。好消息是webui版本可以用低显存模式用速度换取更高分辨率的支持。我用NVIDIA2060Super8G内存显卡，使用中等显存模式跑768x512分辨率，速度还可以，与腾讯云半颗TeslaT4的GPU服务器差不多。

03 使用方式

文生图

Stable Diffusion模型(ckpt)	模型的VAE(SD VAE)
Prompt	best quality, ultra high res,(8k, 4k_1.2), highly detailed,soft lighting,1girl, long hair,, masterpiece, best quality, <lora:koreanDollLikeness_v10:1>
Negative Prompt	lowres, bad anatomy, bad hands, text, error, missing fingers, extra digit, fewer digits, cropped, worst quality, low quality, normal quality, jpeg artifacts, signature, watermark, username, blurry

04 在线资源

1.Catbird AI[https://www.catbird.ai/]

Catbird AI是一个基于Stable Diffusion，一次可以生成几十张图片的王炸网站，Catbird只需要输入一个提示词你就可以生成基于Stable Diffusion各种模型比如Openjourney，SD1.5, SD2.1, Anything 等的图片，相当于你一次用十几个app帮你生成图片。Catbird集成十几种SD模型，图片尺寸为512x512。

Catbird.ai是一个适合设计师、艺术家或者任何对创意有兴趣的人的工具。它可以帮助你发现新的灵感，拓展你的想象力，或者为你的项目提供美观和惊艳的图片。Catbird.ai的界面简洁友好，操作方便快捷，只需几秒钟就可以生成图片。Catbird.ai目前已经吸引了很多用户的关注和喜爱，它是一个值得尝试的AI图片生成工具。

2.意间AI绘画 [http://portal.yjai.art/]

Tips

通过使用稳定扩散的Web版本，您可以方便地在Web浏览器中应用稳定扩散算法而无需安装额外的软件。stable diffusion的使用方法很简单，但是它可以生成非常多样化的AIGC内容，包括漫画、插画、电商产品图等等。如果你想要尝试使用AI技术生成内容，那么stable diffusion是一个不错的选择。