【图像超分辨(SR)】图像超分辨领域一些英文名词最通俗的中文解释

Motivation

博主算是刚入超分辨的坑没多久,自己在看论文的时候,会遇到很多名词,拆开来每个单词我都认识,但是组合起来就是不知道他在讲什么…
最难受的是很多名词都缺乏中文(甚至英文)的解释。可能刚入门的时候要知道某个名词(词组)是在说什么都要花很多时间去查去考证。我想很多朋友可能都有过类似的经历。
写这篇博客的目的一方面是记录一下自己查过的名词,方便以后查阅。另一方面是给很多和我一样还在入坑中的或者比我入坑要晚的小伙伴一点便利。博文会持续更新。

Single Image Super-Resolution (SISR)

通俗讲就是对于单图片的超分辨…(听君一席话,如听一席话)。注意区分,single image不是说只给你一张图片,其他什么都不给,你拿去做吧…(这种问题其实叫zero shot)。这里的single image其实是相对于video等其他任务来说的single。个人理解SISR就是网络输入是一张图片,网络的目标是处理单张图片,对单张图片进行超分,输出也是一张图片。而video这种序列数据(video一般会用到不同帧之间的信息)的超分辨问题,就不算是SISR。

相关论文实在太多了,就列一个董超老师的SRCNN吧,这篇是CNN做单图像SR的开山之作了。

相关论文:

  1. Image Super-Resolution Using Deep Convolutional Networks(ECCV 2014)

Deep Internal Learning

指利用一张图片中的重复信息进行学习

相关论文:

  1. “Zero-Shot” Super-Resolution using Deep Internal Learning(CVPR 2018)
  2. Blind Super-Resolution Kernel Estimation using an Internal-GAN(NIPS 2019)

Light field Super-Resolution

意思是光场超分辨

光场:The light field is a vector function that describes the amount of light flowing in every direction through every point in space. The space of all possible light rays is given by the five-dimensional plenoptic function, and the magnitude of each ray is given by its radiance.(维基百科,原文能看懂的朋友还是不建议看翻译,毕竟直接看懂传达的信息才是最准确的,别人翻译的终究是二手信息)
个人翻译:光场是一个描述光在空间中从各个方向穿过各个点的向量函数。光线所有可能存在的空间由五维全视函数(plenoptic function 描述了从空间任 意点所看到的全部光线)给出,每条射线的数值由沿着射线的总光量(The measure for the amount of light traveling along a ray is radiance)给出。

来自维基百科的图:
【图像超分辨(SR)】图像超分辨领域一些英文名词最通俗的中文解释_第1张图片
来自Nerf的图:
【图像超分辨(SR)】图像超分辨领域一些英文名词最通俗的中文解释_第2张图片
光场超分辨:大概意思是,光场相机可以记录当前场景不同视角的图像,每个视角图像的上下文信息(空间信息)与不同视角之间的互补信息(角度信息),基于这些信息来做图像超分辨。个人觉得简单理解可以和单图像超分辨做比较,光场超分辨相当于针对一种提供更多信息的场景做图像超分辨。

相关论文:

  1. Light Field Super-Resolution with Zero-Shot Learning(CVPR 2021)

Trivial and non-trivial

这两个词在深度学习论文里一般用来形容一个问题/任务/步骤非常简单(trivial)或困难(non-trivial),但在数学上这两个词会用来指代特定种类的问题。

Internal SR and External SR

internal SR表示用一张图片内部的信息进行超分,external SR表示用一张图片之外的信息进行超分。简单来说external SR就是用大量图片来训练,最后作用的图像和训练用的图像并不相同,相当于引入了外部信息。相比于internalSR,externalSR很有可能会引入很多伪影(很好理解,因为从外部学习到的信息并不一定准确)。
【图像超分辨(SR)】图像超分辨领域一些英文名词最通俗的中文解释_第3张图片
相关论文:

  1. Internal Statistics of a Single Natural Image(CVPR 2011)

你可能感兴趣的:(图像超分辨(Image,Super,Resolution),计算机视觉,深度学习,超分辨率重建,人工智能,神经网络)