细粒度图像分类论文研读-2014

从14年开始，细粒度分类任务步入深度学习阶段，也逐渐有了流派之分。

Part-Based R-CNNs for Fine-grained Category Detection（by localization- classification subnetwork）

Abstract

语义部件定位能够有助于细粒度分类。

姿态归一化表征的方法已经提出，但是由于目标检测的困难性，在测试阶段需要假定一些目标框。

本文通过利用自下而上的区域建议方法计算得到的深度卷积特征来克服这一限制（大概意思是解决对目标框的依赖）。

本文提出的方法学习了对整体和局部的检测器，加强了他们之间的几何约束，并且从一个姿态归一化的表征中预测细粒度类别。（什么是姿态归一化表征？为什么要采用姿态归一化表征？）

Introduction

定位对象中的各个部分很关键，可以建立实例之间的对应关系，同时能够一定程度上缓解姿态的变化和相机视角的不同。

许多姿态归一化表征的瓶颈本质上是对部分定位的准确程度。Poselet、DPM（星型结构，根滤波器用于定位对象、可变形部件模块用于定位局部，这里应该强调的是可变形部件模块）这些方法已经能够被用于获得准确的局部定位。但是在测试时需要给出已知的边界框，这个定位才够准确。

本文则解决了模型对边界框的需求。

在过去的任务中，局部定位和局部描述是分开的，在此次工作中用相同的深度卷积进行了统一。

Part-Based R-CNNs

本文采用R-CNN对目标整体和局部都进行了检测训练。

Geometric Constrains

我们的目标是在测试图像中识别目标位置和部件位置。

选择令得分最大的框们。

首先需要对框的选取进行限制。首先先选择可能的目标框和其中所有的部件框。之后定义评分函数：

接着，我们要对几何进行约束。得分高的窗口不代表正确。特别是有遮挡时。因此，考虑使用一些评分函数来强制约束布局。

Fine-Grained Categorization

这里提的特征和预测位置的时候用的是一个。这一段重点说了这个CNN模型是预训练过的，完事儿还微调了一下。

1. 给出候选框；
2. 所有窗口进行特征提取与评分；
3. 依据约束进行窗口筛选；
4. 根据最终的窗口的特征进行分类（此时的特征应该是姿态归一化的）。

相比于单纯的RCNN，增加了对部件的检测与配套的约束。