每日学术速递4.10

CV - 计算机视觉 |  ML - 机器学习 |  RL - 强化学习 | NLP 自然语言处理 

Subjects: cs.CV

1.Super-Resolving Face Image by Facial Parsing Information

标题：通过人脸解析信息超分辨人脸图像

作者：Chenyang Wang, Junjun Jiang, Zhiwei Zhong, Deming Zhai, Xianming Liu

文章链接：https://arxiv.org/abs/2304.02923v1

摘要：

        人脸超分辨率是一种将低分辨率的人脸图像转换成对应的高分辨率图像的技术。在本文中，我们构建了一个新的解析图引导人脸超分辨率网络，它直接从低分辨率人脸图像中提取人脸先验（即解析图）以供后续使用。为了充分利用提取的先验，精心设计了一个解析图注意力融合块，它不仅可以有效地探索解析图的信息，而且还结合了强大的注意力机制。此外，鉴于高分辨率特征包含更精确的空间信息，而低分辨率特征提供强大的上下文信息，我们希望保持和利用这些互补信息。为了实现这一目标，我们开发了一个多尺度细化块来维护空间和上下文信息，并利用多尺度特征来细化特征表示。实验结果表明，我们的方法在定量指标和视觉质量方面优于最先进的方法。源代码将在这个 https URL 上可用。

2.GA-HQS: MRI reconstruction via a generically accelerated unfolding approach

标题：GA-HQS：通过一般加速展开方法进行 MRI 重建

作者：Jiawei Jiang, Yuchao Feng, Honghui Xu, Wanjun Chen, Jianwei Zheng

文章链接：https://arxiv.org/abs/2304.02883v1

摘要：

        深度展开网络 (DUN) 是压缩感知 MRI 领域中最重要的方法，因为它们可以使用可学习的网络来促进可解释的前向推理运算符。然而，仍然存在一些令人生畏的问题，包括对一阶优化算法的严重依赖、信息融合机制的不足以及捕获远程关系的局限性。为了解决这些问题，我们提出了一种通用加速半二次分裂 (GA-HQS) 算法，该算法结合了二阶梯度信息和金字塔注意模块，用于像素级输入的精细融合。此外，还设计了多尺度分裂变换器来增强全局特征表示。综合实验表明，我们的方法在单线圈 MRI 加速任务上优于以前的方法。

3.Towards an Effective and Efficient Transformer for Rain-by-snow Weather Removal

标题：迈向一个有效和高效的Transformer，用于去除雨雪天气

作者：Ioannis Siglidis, Nicolas Gonthier, Julien Gaubil, Tom Monnier, Mathieu Aubry

文章链接：https://arxiv.org/abs/2304.02860v1

项目代码：https://github.com/chdwyb/RSFormer

摘要：

        雨雪天气去除是天气退化图像恢复中的一项专门任务，旨在消除共存的雨条纹和雪颗粒。在本文中，我们提出了 RSFormer，这是一种高效且有效的 Transformer，可以应对这一挑战。最初，我们探索了层次结构中卷积网络 (ConvNets) 和视觉变换器 (ViTs) 的接近程度，并通过实验发现它们在阶段内特征学习中的表现大致相同。在此基础上，我们利用类似 Transformer 的卷积块 (TCB) 代替计算量大的自注意力，同时保留适应输入内容的注意力特性。我们还证明了跨阶段进展对于性能改进至关重要，并提出了一种全局-局部自注意采样机制 (GLASM)，该机制在捕获全局和局部依赖性的同时对特征进行向下/向上采样。最后，我们合成了两个新的雨雪数据集 RSCityScape 和 RS100K，以评估我们提出的 RSFormer。大量实验证明，与其他恢复方法相比，RSFormer 在性能和时间消耗之间取得了最佳平衡。例如，它优于 Restormer，参数数量减少了 1.53%，推理时间减少了 15.6%。数据集、源代码和预训练模型可在 \url{ 此 https URL } 获得。

更多Ai资讯：公主号AiCharm