基于单目视觉的手势识别(本科毕业作品)

-----------------------------------更新-----------------------------------------------

实在抱歉没有及时回复大家的评论。代码的话我这边暂时找不到了,所以很抱歉,但可以分享核心的技术细节。

首先你看到的这个演示只能在限定的场景中使用,因为对手势的检测和跟踪是基于肤色的,所以对于复杂背景是不适用的,完全达不到工业级的使用要求,所以工业界的小伙伴们还是请关注最新的手势识别相关论文,不用在这个玩具上浪费时间啦。关键技术如下:

  1. 手势检测和跟踪:基于HSV肤色模型的Camshift跟踪算法,OpenCV有现成的Demo实现,请搜索。本文的系统在每次初始化的时候都会采集当前手势的颜色作为分割和跟踪的标准。

    基于单目视觉的手势识别(本科毕业作品)_第1张图片

    基于单目视觉的手势识别(本科毕业作品)_第2张图片

    从左往右分别是RGB图、颜色概率分布图、二值化后的概率分布图、根据跟踪结果去除掉脸部区域的结果。

  2. 手势识别:根据检测结果确定连通域的中心作为掌心,以掌心为圆心,以一定的半径(超参数,请自行调整,可通过凸包检测找到中指)画圆,会与手指有相交的区域,统计区域个数即可知道当前几根手指。

    基于单目视觉的手势识别(本科毕业作品)_第3张图片

    基于单目视觉的手势识别(本科毕业作品)_第4张图片

     

  3. 手势轨迹识别:隐马尔可夫模型。固定时间间隔对手势轨迹采样,将采样点进行编码,生成一些训练样本用于模型训练。

    基于单目视觉的手势识别(本科毕业作品)_第5张图片

    ------------------------------------分割线----------------------------------------------

本科的毕业作品,用电脑的Web camera做的手势识别。

实现了手势跟踪、手势识别、距离识别、轨迹识别。并做成了虚拟鼠标,能单击、长按、滑动、翻页、缩放。

下面是视频链接,忙过了我会写了一些文章介绍一下。请大家先睹为快:

单目视觉手势识别视频

你可能感兴趣的:(识别,图像处理)