海南多系统适配目标跟踪

在目标跟踪领域，场景信息与目标状态的融合十分重要，首先，场景信息包含了丰富的环境上下文信息,对场景信息进行分析及充分利用,能够有效地获取场景的先验知识,降低复杂的背景环境以及场景中与目标相似的物体的干扰;同样地,对目标的准确描述有助于提升检测与跟踪算法的准确性与鲁棒性.总之,尝试研究结合背景信息和前景目标信息的分析方法,融合场景信息与目标状态,将有助于提高算法的实用性能。慧视光电开发的图像处理板，具备高性能、高精度的特点，能够进行精确的目标跟踪。AI图像处理板能实现24小时、无间隙信息化监控。海南多系统适配目标跟踪

相关滤波的跟踪算法始于2012年P.Martins提出的CSK方法，作者提出了一种基于循环矩阵的核跟踪方法，并且从数学上完美解决了密集采样（Dense Sampling）的问题，利用傅立叶变换快速实现了检测的过程。在训练分类器时，一般认为离目标位置较近的是正样本，而离目标较远的认为是负样本。回顾前面提到的TLD或Struck，他们都会在每一帧中随机地挑选一些块进行训练，学习到的特征是这些随机子窗口的特征，而CSK作者设计了一个密集采样的框架，能够学习到一个区域内所有图像块的特征。光纤数据目标跟踪RK3588作为慧视光电开发的全国产化工业级板卡，具备高性能、高精度的优点。

视频自动跟踪系统，一般都是用在露天的、较大地域范围的监控系统中，且边跟踪边录像。在自动跟踪系统的发展上，jun用上的视频自动跟踪、毫米波雷达跟踪以及激光雷达跟踪等是比较成熟的；非jun用领域，存在一些固定画面、摄像机从不运动的的目标检测与跟踪系统；基于带红外线的、常用在演播室或者会议室的、很近距离的跟踪系统，目前主要局限于简单背景(如室内环境下)、大目标(即目标在视频图像中占较大区域)，而且一般无法实现控制摄像机转动来对目标进行跟踪。

在许多领域，无人机的作业环境相对复杂，需要识别处理图像背景目标众多，这种环境下，要想实现更高精度的检测识别效果，图像处理板的性能至关重要。在慧视光电开发的多款图像处理板中，Viztra-HE030图像处理板以6.0TOPS得以胜任。这款板卡采用了瑞芯微旗舰级芯片RK3588，8nmLP制程，搭载八核64位CPU，主频高达2.4GHz。集成ARMMali-G610MP4四核GPU，内置AI加速器NPU，支持主流的深度学习框架。性能强劲的RK3588可为无人机AI识别的应用场景带来更强大的性能表现。RV1126图像处理板是我司自主研发的目标跟踪板，该板卡采用国产高性能CPU，搭载自研目标跟踪及跟踪算法。

另外，经典的跟踪方法还有基于特征点的光流跟踪，在目标上提取一些特征点，然后在下一帧计算这些特征点的光流匹配点，统计得到目标的位置。在跟踪的过程中，需要不断补充新的特征点，删除置信度不佳的特征点，以此来适应目标在运动中的形状变化。本质上可以认为光流跟踪属于用特征点的来表征目标模型的方法。在深度学习和相关滤波的跟踪方法出现后，经典的跟踪方法都被舍弃，这主要是因为这些经典方法无法处理和适应复杂的跟踪变化，它们的鲁棒性和准确度都被前沿的算法所超越，但是，了解它们对理解跟踪过程是有必要的，有些方法在工程上仍然有十分重要的应用，常常被当作一种重要的辅助手段。RK3588图像处理板识别概率超过85%。光纤数据目标跟踪

AI算法赋能下的图像处理板能够进行智能目标识别。海南多系统适配目标跟踪

设想这样一个场景：孙悟空在飞行过程中完成了一次变化（这里假设他变成了一只鸟），但这个变化并不是像西游记拍摄中有烟雾效果完成的，而就是通过身体结构发生渐变来完成的，这种情况下，检测器应该会在后续的检测任务中失败，因为设计好的检测器只是为了检测目标孙悟空的存在，孙悟空变身之后已经不存在这个目标，检测器是不会有火眼金睛继续检测到变化后的孙悟空的。但是，对于跟踪设备就不一样了，跟踪目标，哪怕目标在跟踪过程中发生了巨大变化，这些都是跟踪设备的本质能力。理想的跟踪设备应该可以很好的跟上孙悟空渐变的整个过程，并且可以继续后面变身之后对鸟的跟踪。海南多系统适配目标跟踪