成果名称：基于多模式深度特征融合的RGB-D目标跟踪方法

发 明 人：姜明新;荣康

获批时间：2021/04/06

成果类型：发明授权

专 利 号：CN201811054223.0

成果简介

本发明公开了一种基于多模式深度特征融合的RGB‑D目标跟踪方法，它将Depth图像编码为深度、高度和角度三个通道，利用基于Depth模式的CNN网络提取其多层深度特征；利用基于RGB模式的CNN网络提取RGB图像的多层深度特征；将基于Depth模式的和基于RGB模式的CNN网络的底层输出特征输入到RGB和Depth相关计算的CNN提取相关特征；计算RGB图像序列光流图，将光流图输入到基于运动模式的CNN网络中提取深度特征。将上述各种模式下的深度特征输入到深度特征融合模块中，将模块的输出送入C‑COT跟踪器中，完成目标跟踪。本方法与现有技术相比，既提取了RGB、Depth模式的各自的特征，又提取了两种模式的相关特征，还提取了视频中帧与帧之间的动态特征，有效提高了视频目标跟踪的准确性和鲁棒性。

联系人：陈帅

电话：0517-83591025

联系地址：江苏省淮安市枚乘东路1号

邮编：223005

电子邮箱：11000080@hyit.edu.cn