湖北电力运维AI智能高效处理

多目标跟踪是指在连续的图像中，通过目标检测算法识别出每一帧中的目标，并在时间上跟踪它们的位置和状态。但目标会不断发生尺度、形变、遮挡等变化，而且还会有目标出现和消失的情况，再加上视频采集端的相机所处环境可能受到外界影响导致抖动的情况（例如无人机高空检测），就会给多目标跟踪造成一定的困难。由于我们不能控制目标，所以只能从视频采集端维护跟踪的稳定性。因此，成都慧视针对于多目标检测跟踪抖动丢失的优化方法是：1.改进目标检测,使用更加鲁棒的目标检测算法。2.增强特征描述，利用深度学习提取更高级别的语义特征，这些特征对于小范围内的视角变化具有更好的不变性3.改进运动模型，在算法中加入对摄像头运动的估计，通过补偿摄像头运动来减小目标真实运动与预测之间的差距。4.数据关联策略，设计更灵活的数据关联算法，允许更大的距离阈值来匹配候选目标。无人机识别算法找成都慧视。湖北电力运维AI智能高效处理

激光反无设备的摄像头中加装了高性能的AI图像处理板，将设备部署在预定区域，AI图像处理板在算法的加持下，实现对禁飞区域空中目标的24小时不间断AI巡逻，能够快速发现、锁定、处置目标，在数秒内利用高能激光毁伤无人机目标。要想到达更加精细的识别目的，板卡的性能很关键，同时视频数据的质量同样重要。高帧频的相机能够捕捉更多画面细节，这样高性能图像处理板在进行AI识别处理时，就能够获取更多信息，识别的精度就会提升。像成都慧视开发的高性能高帧频图像处理板就考虑到了这一点，通过RK3588和FPGA接口的深度定制，轻松打破高帧频视频的输入输出，让板卡实现更精细的数据处理。电力运维AI智能服务平台利用成都慧视推出的SpeedDP能够帮助训练AI识别算法。

AI的不断应用发展使得传统的人工工作的弊端得到了很好的弥补。比如在图像标注这个领域，传统的标注需要招聘大量的人员，并且标注图像所耗费的时间精力也是不可估量的，而AI模型的出现让这一切都成为过去。利用慧视光电打造的深度学习算法开发平台SpeedDP，就能够针对场景识别进行特有的模型部署训练，通过大量的训练，让AI学会自动标注图像。平台采用标准的AI算法开发流程，通过从需求分析、数据制作到模型训练、测试验证以及模型部署几个主要模块。SpeedDP用于模型训练和评估测试的数据集是由一系列的图像和标注文件组成的，平台支持多种开源数据格式如VOC和COCO。而目前平台共支持yolox系列和yolov8系列模型用于模型训练（分割任务*支持yolov8模型），通过不断额测试验证，就能够让AI实现海思、RockChip嵌入式硬件平台等模型部署的可视化AI开发功能。

今年各地陆陆续续出现大范围的强降雨，不少城市更是出现内涝的情况，而乡镇农村更是洪峰过境。突然降临的洪水内涝让受灾地不少人被困，同时也给防汛救援造成了不小的难题，为了尽可能节约救援时间，增加搜救率，前期的信息收集工作十分重要。这项工作交给无人机是当下比较高效的解决方案。无人机便捷灵活，能够轻松到达许多内涝区域搜集信息。搭载光电吊舱则能够实时回传现场画面，不少吊舱具备红外和可见光双光成像的能力，夜间工作也能够清晰成像。除了搜集洪水信息，无人机还可以通过智能化吊舱实现AI智能识别，例如高空飞行作业的无人机通过盘旋扫描，能够识别是否存在被困人员，识别被困人员数量。从而展开精细的救援转移，保障人民生命财产安全。FPV识别算法用SpeedDP帮助提升精度。

瑞芯微推出的RK3588系列图像处理板作为国产化板卡的性能前列，成为了各领域研究开发的优先，它能在诸多行业实现目标检测、识别以及跟踪等功能，具有重要的研究开发价值。特别是对于高校而言，将RK3588作为课题进行研究开发，是一个不错的选择。但是在这些功能实现过程中，算法的能力就十分重要，如何让算法更加精细的识别检测例如人、车、船等目标成为首要解决的问题。要想让AI算法更能精确的识别检测目标，可以利用AI的深度学习能力，让AI不断学习这些目标的特征，从而达到精细识别的能力。这个过程，可以通过大量的数据标注，来训练AI。但大量待标注工作，常常让开发者头疼。如果采用传统方式用人工挨个挨帧标注，将会耗费大量时间精力，让成本不可控。FPV跟踪算法用SpeedDP帮助提升精度。湖北电力运维AI智能高效处理

SpeedDP支持YOLOv8分割算法标注。湖北电力运维AI智能高效处理

但这也遇到很多难点，通常情况下，视频回传的延迟大概在200ms左右，随着大量的弹打出，视频传输所需带宽就面临压力，如何在通信带宽有限的情况下，保证视频顺畅、清晰、无卡顿地传输，是分析改进这个工作需要解决的前期难点。针对于这个问题，慧视光电利用GS弱网高清音视频传输系统和RK3588打造的Viztra-HE030图像处理板结合，推出了低延迟低带宽图传解决方案。在一个窄带收发信道内，例如在信道有效带宽0.5Mb/s~2Mb/s内，多路视频和交互控制共用一对收发信道，信道支持数据透传，外部系统可以使用该信道，传输任意格式的数据；可实时调整视频码率，在低至500K带宽情况下依然可以回传清晰流畅的图像。可以使设备飞的更远、走的更远;可实现视频中继转发；能够基于H265实时视频编码；可实现基于视频流的“人在回路低延迟控制”。基于普通60帧相机，实现15ms的低延迟编解码，加上数据链传输延迟时间在30ms左右，目前业界前列。通用性强，使用更加灵活，适用更多应用场景；支持多路SDI视频在低至500K带宽情况下的同时传输（1080P60FPS），彻底解决“带宽苦恼”；整体时延约60ms（含相机、编解码、显示，不含传输），实现实时控制、实时打击。湖北电力运维AI智能高效处理