湖北智能图像识别模块解决方案

多目标跟踪是指在连续的图像中，通过目标检测算法识别出每一帧中的目标，并在时间上跟踪它们的位置和状态。但目标会不断发生尺度、形变、遮挡等变化，而且还会有目标出现和消失的情况，再加上视频采集端的相机所处环境可能受到外界影响导致抖动的情况（例如无人机高空检测），就会给多目标跟踪造成一定的困难。由于我们不能控制目标，所以只能从视频采集端维护跟踪的稳定性。因此，成都慧视针对于多目标检测跟踪抖动丢失的优化方法是：1.改进目标检测,使用更加鲁棒的目标检测算法。2.增强特征描述，利用深度学习提取更高级别的语义特征，这些特征对于小范围内的视角变化具有更好的不变性3.改进运动模型，在算法中加入对摄像头运动的估计，通过补偿摄像头运动来减小目标真实运动与预测之间的差距。4.数据关联策略，设计更灵活的数据关联算法，允许更大的距离阈值来匹配候选目标。利用RK3399Pro开发而成的Viztra-ME025图像处理板。湖北智能图像识别模块解决方案

传统的吊舱只能如上述那样工作，而要打造更加智能化的边海防无人机巡逻，则可以在光电吊舱中植入高性能的图像处理板，通过目标识别、检测算法的赋能，就能够让无人机实现目标识别检测、目标锁定跟踪等功能。为了进行有效结合，成都慧视开发了多块高性能的具备图像处理能力的光电吊舱。例如慧视VIZ-100T三轴三光目标定位吊舱，集10倍光学变倍可见光相机、640×512高分辨率红外相机、测程1.2km半导体激光测距机于一体，在边海防巡逻时能够昼夜成像工作。三轴高稳定精度平台框架能够有效保障画面的清晰稳定，并对目标点位的定位。吊舱内置我司自主开发的高性能AI图像处理板Viztra-HE030，该板卡采用瑞芯微旗舰级芯片RK3588，能够在算法的作用下实现高空目标识别检测、锁定跟踪人、车、船等目标，再通过和地面巡逻人员协调统一，就能够打造边海防的智能化体系。云南车载辅助图像识别模块研发成都慧视开发的Viztra-LE034图像处理板拥有2.0TOPS的算力。

夏季，为了消减酷暑的炎热，下水消暑成了老老少少的选择，这也就给溺水事故埋下了隐患。以前，人工巡视虽然能够起到一定作用，但是仍不能避免时间差带来的弊端，每当发现后可能就为时已晚。而利用无人机，则可以开展不间断、高密度、大范围的巡视工作，其灵活机动的特点在巡湖巡河中十分高效。无人机搭载吊舱后升空，能够看得更远、更清晰，并且能够轻松飞到一些盲区进行巡视。如果只是搭载吊舱仍属于手动巡视的一种。如果要实现更加智能化的巡视，则可以在无人机光电吊舱的基础上定制植入具备智能识别检测的AI图像跟踪板，板卡在定制的对“人”的识别算法的赋能下，就能够对河道内、靠近河道的人进行自动识别跟踪，一旦发现有人靠近水域出现涉水等行为，无人机就可以主动靠近，并通过人工喊话、大喇叭等形式对相关人员进行劝导。

长时间一直进行这样的图像标注工作，那无疑是枯燥而乏味的，手酸不说，更多的是精神上的折磨，进而效率大打折扣。但这又是算法提升的必要途径，无法跳过，当项目紧急时，甚至需要多人加班加点赶进度。这样的痛苦现状急需改变！慧视光电的算法工程师为了提高这一的效率，开发了一个深度学习算法开发平台SpeedDP。它的基本逻辑是基于一个手动标注一定量的数据集进行训练，形成一个可用的预选模型（如果已有模型可以直接使用），然后训练一定阶段后，可以评估此模型的能力，如果能够满足使用就可以对相同目标的新数据集（未进行任何标注）进行AI自动化标注。这一过程的省去了大量需要对新数据集的手动拉框工作，同时也在不断反哺此模型算法，帮助提升性能。成都慧视利用RK3399Pro芯片打造了一个高性能的Viztra-ME025图像处理板。

无人机在农业领域能够实现高效率的施肥、播种等操作。但是不同的作业环境对于无人机的工作性能要求不一样，同样的方案在平原地区适用，在高原地区就不行。因此针对于特殊作业环境需要制定不同的智慧化方案。像青藏高原这样地貌复杂、低气压、大温差的特点，参与智能化工作的各个部件需要符合这样作业环境特点的性能要求。不比平原的一马平川，高原由于环境复杂，地形起伏对于无人机的飞行也需要进行控制，无论是高度还是速度甚至距离都需要进行严格限制，防止出现撞机等事故。因此，这个方面的智慧化建设就需要无人机具备智能避障的功能，无人机需要在高速度或者远距离的情况下识别树木、电线杆、石头等障碍物，并能够实现避障。利用RK3588开发而成的Viztra-HE030图像处理板；小体积图像识别模块抗干扰

100Hz高帧频视频接入需要RK3588图像处理板。湖北智能图像识别模块解决方案

首先摄像机采用的是可见光高清摄像机，具备1920*1080的分辨率，系统视场31.11°×17.8°，其中搜索视场15.8°×15.8°（1080P像素）。而图像处理则采用慧视开发的RV1126高性能图像处理板，之所以采用这块板卡，一方面得益于其低功耗、微型外观的设计，非常契合“智慧眼”这样对于空间要求严格的应用场景；另一方面RV1126具备2.0TOPS的算力，在国产化方面也十分完整，安全性十足。两者结合，就能够形成重量不超过100g的“智慧眼”。在算法的作用下，能够达到≥50Hz的跟踪帧率，≥25Hz的检测帧率，实现捕获4m*4m目标超过800m、6m*6m目标超过1000m。这就是“机器狼”的智慧化措施，通过一个“小小的”“智慧眼”的加入，便能够让其实现许多自动化任务。随着技术的不断发展，“机器狼”的形态将会不断进步，满足更多多样化需求。湖北智能图像识别模块解决方案