#5【CVPR2024】PLACE:自适应布局语义融合
📜 PLACE: Adaptive Layout-Semantic Fusion for Semantic Image Synthesis
🍭 源码:https://github.com/cszy98/PLACE
语义图像合成旨在生成与给定语义图对齐的高质量图像。它为用户提供了使用语义图精确控制合成图像空间布局的灵活性,同时在内容创建、图像编辑和数据增强中具有重要应用
视觉质量、布局对齐和语义一致性方面的比较
🍺 贡献
- 引入了布局控制图作为一种可靠的布局表示,并提出了一种自适应布局-语义融合模块,用于自适应地将布局特征和语义特征融合以进行语义图像合成
- 提出了有效的 SA (Semantic Alignment)和 LFP(Layout-Free Prior Preservation) 损失函数。前者增强了生成图像的布局一致性,而后者则帮助保持预训练模型的语义先验,利用现成的文本-图像配对数据
先前的方法生成的图像仍然由于训练数据规模的