Stable Diffusion是一个强大的图像生成AI模型,但它通常需要大量调整和提示工程。Fooocus的目标是改变这种状况。
Fooocus的创始人Lvmin Zhang(也是 ControlNet论文的作者)将这个项目描述为对“Stable Diffusion”和“ Midjourney”设计的重新设计。Fooocus就像是Midjourney的免费离线版本,但是它使用SDXL模型。或者说它将Stable Diffusion的出图过程做了非常好的优化,没有那么多繁琐的配置。
Fooocus内置和自动化了许多优化和质量改进,将其他页面的手动设置变为了自动配置,这样就和Midjourney一样,这将在每次尝试中获得良好的结果。如果你想做更多,你可以使用Fooocus的Advanced选项卡。比如说设置清晰度过滤器或自定义lora。
在这篇文章中,我们将介绍如何在本地和Colab上使用Fooocus
在Windows上运行
只需要在下载文件,解压缩,然后运行run.bat,就是这么简单
在第一次运行时,它会自动下载模型,如果你已经有这些文件,你可以把它们复制到上面的位置,以加快安装速度。
- sd_xl_base_1.0_0.9vae.safetensors
- sd_xl_refiner_1.0_0.9vae.safetensors
Fooocus可以在16gb RAM和6GB VRAM的系统上运行,性能非常好,下面图片来自的Github。
最低要求是4GB Nvidia GPU内存(4GB VRAM)和8GB系统内存(8GB RAM)。
在Linux上运行
Linux上会更加简单:
与Windows类似下载模型以加快过程,但是他的启动命令变为:
或者如果想打开远程端口,需要使用listen参数
在Google Colab上运行
因为需要使用GPU,所以我们这里选择T4 GPU,因为它已经够用了
然后使用下面命令,由于下载和安装,该操作可能需要一些时间才能完成,但是Colab的下载速度很快,我们不需要传输模型了
当它完成时,会看到一个连接,类似下图
点击右边的gradio.live链接,就可以看到界面了,如果要进行高级设置,可以在advanced 选项中看到更多的高级设置
总结
Fooocus的操作要比AUTOMATIC1111方便很多,并且安装也简单,看看我生成的结果
最后Github更详细信息可以看这里
https://github.com/lllyasviel/Fooocus