Flux 是Black Forest Labs(黑森林)团队发布的一个文生图大模型。
黑森林官网地址:https://blackforestlabs.ai/
黑森林发布了Flux 的三个版本Pro,Dev和 schnell。
其中 Pro 仅支持API 调用,Dev 和 schnell 目前已开源。
1.Flux Dev
官方发布的Flux Dev只有 FP16 版本
建议 20g 显存以上的显卡
Flux Dev FP16下载地址:https://huggingface.co/black-forest-labs/FLUX.1-dev/tree/main
第三方 发布的 FP8 版本
Xlabs 团队的 Flux Dev FP8 版本下载地址:https://huggingface.co/XLabs-AI/flux-dev-fp8/tree/main
Kajai 团队的 Flux Dev FP8 版本:https://huggingface.co/Kijai/flux-fp8/tree/main
第三方发布的量化版Dev 模型(GGUF)
Lvmin Zhang 大神版本下载地址:https://huggingface.co/lllyasviel/FLUX.1-dev-gguf
2.Flux schnell
官方发布的 Flux schnell 版本下载地址:https://huggingface.co/black-forest-labs/FLUX.1-schnell/tree/main
第三方发布的量化版 schnell 模型(GGUF)
Lvmin Zhang 大神版本下载地址:https://huggingface.co/lllyasviel/FLUX.1-schnell-gguf
Flux Dev和 schnell 的加载方式
模型存放位置:comfyui/models/unet
无论是 FP16 还是 FP8 版本都是 UNET 模型,仅支持在comfy UI 中用 Unet 加载器加载,不支持 webui。
GGUF 版本模型也仅支持 comfyui 中使用,且需要安装专门的节点
GGUF 节点:https://github.com/city96/ComfyUI-GGUF
3.Flux nf4
Flux nf4 版本只有 11g,适合小显存的显卡,支持 comfyui 和 webui (forge)调用。
Flux nf4 版本下载地址:https://huggingface.co/lllyasviel/flux1-dev-bnb-nf4
4.CLIP
Unet 模型是需要另外加载 CLIP 模型的,根据 FP16 和 FP8 版本使用不同的 CLIP 模型
FP16的 CLIP 模型
CLIP_l 模型下载地址:https://huggingface.co/comfyanonymous/flux_text_encoders/blob/main/clip_l.safetensors
CLIP_T5XXL 模型下载地址:https://civitai.com/api/download/models/822016?type=Model&format=SafeTensor&size=full&fp=fp16
5.VAE
Flux 不能使用 SD 的 VAE,需要加载自己的 VAE 用来解码和编码。
存放地址:comfyui/models/vae
下载地址:https://huggingface.co/black-forest-labs/FLUX.1-dev/blob/main/ae.safetensors
0