Multi Object Tracking 高级之孪生网络siamese-fc

一,孪生网络siamese-fc,两个相同的全卷积网络,共享权重。reference image为参考图像,一般为视频的初始帧,包含Tracking Object,透过孪生网络,生成Object特征图。
search image可以是视频帧图的ROI,也透过孪生网络,生成search image特征图,再使用Object特征图在search image特征图上进行卷积,相当于滑动比较相似度,生成一个相似度map,相似度最高的地方,就是Object的位置,实现对Object的定位及跟踪了。网络只要训练好了,只要有reference image,就可以实现追踪了,无需要针对特定物体再进行训练,而且网络不是很深,计算及推理速度很快,可以满足实时性需求。
Multi Object Tracking 高级之孪生网络siamese-fc_第1张图片
二,孪生网络siamese-fc结构
Multi Object Tracking 高级之孪生网络siamese-fc_第2张图片

三,效果
Multi Object Tracking 高级之孪生网络siamese-fc_第3张图片

你可能感兴趣的:(AI,tensorflow,图像的处理)