未知感知对象检测:从开放视频中学习你不知道的东西(学习笔记)

Unknown-Aware Object Detection: Learning What You Don't Know from Videos in the wild

paper: https://arxiv.org/abs/2203.03800

code: https://github.com/deeplearning-wisc/stud the Wild

未知感知对象检测:从开放视频中学习你不知道的东西(学习笔记)_第1张图片

 

弄一个靠谱的目标检测器,完成OOD问题

什么是out of distribution (OOD) objects 通俗易懂哈哈_:)�东东要拼命的博客-CSDN博客

面临的问题:model 缺少 对未知数据的监督信号(这里不说人话,人话:没有未知目标的建立标签),对OOD目标产生了自负错误的预测

作者提出:Spatial-Temporal Unknown Distillation(STUD)构建了一个新的框架,这个frame从自然视频中蒸馏出未知物,并且给model整了一个决策边界。

1.STUD在空间的维度上先识别出来不知道类别的候选框,然后在视频的多个帧中将候选目标聚集,形成决策边界附近的不同的未知物体集

2.采用基于能量的不确定性正则化损失,该损失对比性地塑造了内分布和蒸馏出的未知物体之间的不确定性空间

结果:FPR95 得分降低了 10%以上

未知感知对象检测:从开放视频中学习你不知道的东西(学习笔记)_第2张图片

 

你可能感兴趣的:(学习,深度学习,人工智能,计算机视觉)