ICASSP 2023 | MCROOD: MULTI-CLASS RADAR OUT-OF-DISTRIBUTION DETECTION

原文链接:https://mp.weixin.qq.com/s?__biz=Mzg4MjgxMjgyMg==&mid=2247486484&idx=1&sn=d43f92ca0230753e77f54557054653d6&chksm=cf51beedf82637fb27d4cbb9279f273298779dabe25f7775cb93469787bcc12c1b6b2caec979#rd

ICASSP 2023 | MCROOD: MULTI-CLASS RADAR OUT-OF-DISTRIBUTION DETECTION

无线感知论文阅读笔记:ICASSP 2023, MCROOD: MULTI-CLASS RADAR OUT-OF-DISTRIBUTION DETECTION

ICASSP 2023 | MCROOD: MULTI-CLASS RADAR OUT-OF-DISTRIBUTION DETECTION_第1张图片

Abstract

0.25 page

  • 目标

    • 针对雷达range-doppler images (RDI) 的OOD检测
  • 贡献

    • 提出了一种基于reconstruction的多类OOD检测器,用于毫米波雷达图像分类

      目标是将除坐着、站立或行走的人之外的任何运动目标识别为OOD

    • 提出了呼吸检测器(RESPD)来检测人体轻微运动,如呼吸

      以简化OOD检测难度

  • 实验

    • 60GHz短程FMCW雷达 采集的数据集上对坐着、站立、行走三个类别进行OOD检测,获得了97.45%、92.13%、96.58%的AUROC
    • 性能优于SOTA, 且快24倍

1 Introduction

0.75 page

  • 分布外检测 (OOD) 在雷达感知中也很重要
  • 本文:使用60GHz雷达
    • 目标:将除坐着、站立或行走的人之外的任何移动物体分类为
  • 贡献
    • 提出MCROOD架构进行迁移检测

      ✅ 包含自动编码器和多个解码器

      使用多阈值算法

      ICASSP 2023 | MCROOD: MULTI-CLASS RADAR OUT-OF-DISTRIBUTION DETECTION_第2张图片

    • 提出RESPD预处理技术 ,使用多个连续帧捕捉呼吸等微动,简化检测

    • 在数据集上,对坐、站、行三类,AUROC分别达到97.45%、92.13%、96.58%

    • MCROOD在指标和速度上优于SOTA方法,消融实验表明RESPD的重要性

2 Related Work

0.5 page

  • OOD检测方法主要有**事后方法(Post-hoc)** 、距离基方法(Distance-based)OE (Outlier exposure) 方法
    • 事后方法适用于任何预训练模型,如MSP、ODIN等
    • 距离基方法以样本距离判定OOD,如马氏距离
    • OE方法在训练时加入OOD样本
  • 针对雷达的数据 ,OOD检测研究还比较有限
    • 现有研究主要在合成数据上
    • 本文在真实雷达数据上进行OOD检测
    • ⇒ \Rightarrow 使用自动编码器进行重构,判定重构误差大的为OOD

3 Radar Configuration & Pre0processing

0.3 page

  • 硬件

    • Infineon BGT60TR13C
    • 60GHz L形FMCW雷达
  • 配置

    ICASSP 2023 | MCROOD: MULTI-CLASS RADAR OUT-OF-DISTRIBUTION DETECTION_第3张图片

  • preprocessing 流程

    • 1 距离FFT
    • 2 移动目标识别(MTI)处理以去除静态目标
    • 3 多普勒FFT
    • 4 呼吸检测器(RESPD): 应用于RDI, 50帧(2.5s)累积

4 Problem Statement & MCROOD

1 page

  • MCROOD用于检测OOD样本
    • 鲁棒性好、效果好:

      ICASSP 2023 | MCROOD: MULTI-CLASS RADAR OUT-OF-DISTRIBUTION DETECTION_第4张图片

4.1 Architecture and Training

  • 提出MCROOD架构进行OOD检测
    • 使用自动编码器和多个解码器结构
    • 每个解码器对应一个内部类
    • 使用MSE作为损失函数
  • 训练
    • 编码器同时encode多个class
    • 每个解码器只解码自己负责的类

4.2 OOD Detection

  • 推理
    • 输入编码器,输出每个解码器
    • 比较输入和输出的MSE
    • 根据MSE阈值判定OOD

5 Experiment

1 page

  • 实验平台
    • NVIDIA GeForce RTX 3070 GPU
    • Intel Core i7-11800H CPU
    • 32GB DDR4 RAM

5.1. Dataset and Evaluation Metr

  • Infineon BGT60TR13C 60GHz FMCW雷达
  • 收集环境:
    • 16个房间(10个用于训练,6个用于推理)
  • 数据集
    • 分布内样本和OOD
    • 分布内样本:行走、坐着和站立
    • OOD样本:电扇、遥控小车、摇晃的植物、窗帘、洗衣服和吸尘器
    • 111416帧内部样本
    • 推理时: 使用47210帧分布内样本和16050帧OOD
    • 距离范围:1米到5米

ICASSP 2023 | MCROOD: MULTI-CLASS RADAR OUT-OF-DISTRIBUTION DETECTION_第5张图片

5.2 Ablation

  • 验证RESPD的作用

    ICASSP 2023 | MCROOD: MULTI-CLASS RADAR OUT-OF-DISTRIBUTION DETECTION_第6张图片

Conclusion

0.2 page

  • 提出了MCROOD和RESPD

    • MCROOD:采用新颖的一编码器多解码器结构

      因其模块化特性,可以适用于任意数量的内部类别

    • RESPD:简单有效的preprocessing method,目标是检测呼吸等微小人体运动

  • 在毫米波雷达数据上实现了快速、准确的OOD检测

    • 对坐着、站立、行走三个类别进行OOD检测,获得了97.45%、92.13%、96.58%的AUROC

你可能感兴趣的:(#,#,Deep,Learning,毫米波雷达,OOD,无线感知)