论文笔记:Self-Supervised Text Erasing with Controllable Image Synthesis
一种新的自监督文本擦除(STE)框架,该框架可以联合学习合成具有擦除基本事实的训练图像,并在真实世界中准确地擦除文本。我们首先设计了一个风格感知图像合成函数,基于两种合成机制生成具有不同风格文本的合成图像。为了弥合合成数据和真实数据之间的文本风格差异,构建了一个策略网络,通过在两个专门设计的奖励的指导下选择风格参数来控制合成机制。然后将具有擦除地面真值的合成训练图像馈送到训练一个从粗到精的擦除网络。为了产生更好的擦除输出,设计了一个三重擦除损耗,以加强细化阶段以恢复背景纹理。此外,我们还提供了一个新的数据集
原创
2022-08-20 09:37:32 ·
1559 阅读 ·
4 评论