噪声潜在成分合成示例
大约 1 分钟
您可以在 ComfyUI 中加载这些图片以获得完整的工作流程。
这里是噪声潜在成分合成的示例。噪声潜在成分合成是指在图像完全去噪之前,当潜在成分还处于噪声状态时将它们合成在一起。由于像姿势和主题这样的一般形状在第一步采样中就已去噪,这让我们可以例如将具有特定姿势的主题放置在图像的任何位置,同时保持很高的一致性。
这是一个示例。该示例包含了4张合成在一起的图片。1张背景图和3个主题。 总步骤是16步。潜在成分在4个步骤中被采样,每个步骤有不同的提示。背景的尺寸是1920x1088,每个主题的尺寸是384x768。这4个步骤之后,图像仍然非常噪声。然后将主题合成(粘贴)到背景上,并应用了一些羽化效果。然后在这个合成图像上运行其余的采样步骤。
这些示例是使用 WD1.5 beta 3 幻觉模型完成的。
改变主题位置后:
您可以看到,从不同噪声潜在图像合成的主题实际上是相互作用的,因为我在提示中加入了“手拉手”。您还会注意到背景的一致性有多高,这显示了这种方法的强大。
这项技术有一些局限性,例如它不能控制主题的细节,比如眼睛的颜色,但它似乎在主题位置、姿势和一般颜色方面工作得非常好。