FLUX.1 工具——为FLUX模型增添控制与可引导性
Black Forest Labs团队带来了FLUX.1工具,这是一套为其FLUX文生图模型增添控制与可引导性的新模型系列。
FLUX.1工具系列包含四项新功能:
- Fill(填充):图像修复与扩展,如同神奇的AI画笔,用于精确编辑。
- Canny(边缘检测):利用边缘检测生成具有精确结构的图像。
- Depth(深度):利用深度图生成具有真实透视感的图像。
- Redux(变体):适用于FLUX.1基础模型的适配器,可用于创建图像的变体。
所有这些新功能都适用于FLUX.1 [dev] 和 FLUX.1 [pro] 模型,其中Redux也适用于FLUX.1 [schnell]。所有这些模型现已上线某机构。
FLUX Fill擅长文本修复
最令人兴奋的新功能之一是FLUX Fill进行文本修复的能力。只需遮住想要更改的文本,并输入新词的提示。FLUX Fill将修复该文本,同时匹配原始风格。
在这个示例中,使用FLUX Fill将文本“FLUX Dev”快速更改为“Fill Dev”。遮罩覆盖了单词“FLUX”,提示词为:
a photo of misty woods with the text “FILL DEV”
效果立竿见影。
所有新模型列表
FLUX.1 [dev] 模型:
- FLUX.1 Fill [dev]
- FLUX.1 Canny [dev]
- FLUX.1 Depth [dev]
- FLUX.1 Redux [dev]
FLUX.1 [pro] 模型:
- FLUX.1 Fill [pro]
- FLUX.1 Canny [pro]
- FLUX.1 Depth [pro]
FLUX.1 [schnell] 模型:
- FLUX.1 Redux [schnell]
FLUX Redux
可以使用FLUX Redux来生成图像的变体。当提供一个输入图像时,它会生成一个具有细微差别的新版本,同时保留原始图像的核心元素。 也可以通过添加文本提示来定制输出,从而对现有图像进行创造性的风格重塑。 Redux作为独立模型适用于FLUX.1 [dev] 和 FLUX.1 [schnell],并且很快将作为新功能在pro、pro 1.1和pro 1.1 ultra模型上提供。
(文中提到一个关于FLUX Redux更改“分心男友”表情包的示例)
什么是ControlNet?
ControlNet是一个开源工具,允许使用“条件图像”来引导图像生成模型。 结合文本提示,条件图像引导模型产生特定的结果,例如复制轮廓的结构或场景的深度,同时仍然允许生成细节的创造性。
什么是ControlNet Canny?
Canny方法是一种检测图像边缘的方式。它将图片简化为显示物体形状的线条和边界。ControlNet可以将这些边缘作为条件图像,以确保生成的输出与提供的结构或轮廓相匹配。Canny边缘检测非常适用于将草图或轮廓转化为有血有肉、细节丰富的图像。也可以使用Canny边缘检测来保留现有图像的边缘,同时生成该图像的新变体。
什么是ControlNet Depth?
深度图是一种视觉表示,其中较暗和较亮的区域显示图像各部分的远近。ControlNet可以使用深度图来引导模型生成具有真实透视感的图像,确保输出中物体的排列和大小正确。
扩展阅读
要了解更多信息,请查看相关的ControlNet指南。