【5分钟论文阅读】InstructRestore论文解读
论文:InstructRestore: Region-Customized Image Restoration with Human Instructions
Arxiv: https://arxiv.org/abs/2503.24357
一段话总结
本文提出InstructRestore框架,用于实现基于人类指令的区域定制化图像恢复。针对现有方法缺乏区域定制恢复能力的问题,开发数据生成引擎构建536,945个三元组的数据集,设计类似ControlNet的模型。该模型能识别目标区域并分配不同整合尺度,实验表明InstructRestore可有效按指令恢复图像,如实现背景虚化和局部增强效果,但存在实例级对象指定支持不足、指令模板固定等局限。
详细总结
- 研究背景:图像恢复是计算机视觉的基础问题,基于深度学习的判别式模型和生成对抗网络模型存在过度平滑或引入视觉伪影的问题。基于预训练文本到图像生成模型(如Stable Diffusion)