四川高效目标检测解决

无人机要想实现上述操作，还需要另一个关键设备的辅助，那就是无人机光电吊舱。光电吊舱的作用是帮助无人机进行目标点定位，画面实时传输，从而让操作人员更加精细的操控无人机进行作业。成都慧视开发的VIZ-100T三轴三光目标定位吊舱，集成了10倍光学变倍可见光相机，640×512高分辨率红外相机，测程1.2km半导体激光测距机，通过三轴高稳定精度平台框架，在进行水流测速时能够远距离采集图像，对兴趣点目标进行定位，从而实现精细测量。同时高清摄像头能够实时输出1080P全高清可见光、红外视频，操控人员在后方能够清晰查看前方画面，并实现24小时昼夜作业的可能性。FPV检测识别可以搭载成都慧视开发的RK3399pro图像处理板。四川高效目标检测解决

“启明935A”系列芯片已经成功点亮，并完成各项功能性测试，达到车规级量产标准。启明935A是行业首颗基于Chiplet(芯粒/小芯片)异构集成范式的自动驾驶芯片，但并非单一芯片，而是一个家族系列。启明935HUBChiplet可以和不同数量的大熊星座AIChiplet互相搭配，再结合灵活的封装方式，快速形成不同性能等级的SoC芯片。它还支持高带宽的PBLink多芯互连，双芯双向带宽128GB/s，四芯双向带宽64GB/s。启明935A每颗芯片都支持比较大20路的1080p60摄像头输入，可应用于各类端侧AI部署。得益于大熊星座NPU天然支持Transformer结构，初步支持的模型有Yolo系列、ResNet50、PSPNet、PointNet++、TrafficSign_Retinanet、BevDet、miniCPM、Unet_ResNet50、PointPillars、PillarNest、M2track、BevFusion、PaliGemma、LLaMa-3B、8B等等。山东国产化目标检测成都慧视能够定制FPV图像检测套装。

实现这些功能的技术中，图像处理基于AI图像处理板这一传感器。板卡具备快速图像处理识别的硬件能力，植入相应的AI算法，无人机就相当于装上了“智慧眼”，而且这个“智慧眼”居于高空，能够在一个定点，俯瞰大范围，实时监控货物的存放状态。远程控制技术基于网络通信，通过和图像处理板的结合，能够实现低延时低带宽的图像传输处理。在实际落地应用中，可以采用成都慧视开发的高性能图像处理板，其中RV1126系列的Viztra-LE026图像处理板，就是无人机的完美搭子。这款图像处理板具备2.0TOPS的算力，能够根据无人机型号进行接口定制，整体尺寸在40mm×40mm×10mm左右（核心板+接口板），小巧的外形即便是小型无人机也能够装上。此外，板卡整体功耗在4W左右，不会过多增加无人机的负担。

多目标跟踪是指在连续的图像中，通过目标检测算法识别出每一帧中的目标，并在时间上跟踪它们的位置和状态。但目标会不断发生尺度、形变、遮挡等变化，而且还会有目标出现和消失的情况，再加上视频采集端的相机所处环境可能受到外界影响导致抖动的情况（例如无人机高空检测），就会给多目标跟踪造成一定的困难。由于我们不能控制目标，所以只能从视频采集端维护跟踪的稳定性。因此，成都慧视针对于多目标检测跟踪抖动丢失的优化方法是：1.改进目标检测,使用更加鲁棒的目标检测算法。2.增强特征描述，利用深度学习提取更高级别的语义特征，这些特征对于小范围内的视角变化具有更好的不变性3.改进运动模型，在算法中加入对摄像头运动的估计，通过补偿摄像头运动来减小目标真实运动与预测之间的差距。4.数据关联策略，设计更灵活的数据关联算法，允许更大的距离阈值来匹配候选目标。搭载慧视光电开发的图像处理板后，无人机能够实现自主检测。

随着生活品质的提升，现在无论是企业还是个人都对智能化的需求有所提升，这就对于摄像头提出了新的要求。现在市面上的传统摄像头都只具备记录功能，受限于镜头的视野范围，就算可以转动也必须是手动操作，尚不能实现自动化。但在智慧安防等领域，如果摄像头能够实现自动化转动，那将进一步提升安防水准。自动转动并不是目的，它的深层需求是需要对视野目标进行锁定跟踪，从而操控镜头转动。这就需要摄像头智能化。成都慧视可以根据使用的摄像头接口类型进行深度定制以满足不同的应用场景，通过专门的算法就能够实现摄像头的智慧化。自动化杀猪需要精确检测猪头。网络目标检测产品

目标检测的板卡可以用成都慧视开发的RV1126图像处理板。四川高效目标检测解决

但这也遇到很多难点，通常情况下，视频回传的延迟大概在200ms左右，随着大量的弹打出，视频传输所需带宽就面临压力，如何在通信带宽有限的情况下，保证视频顺畅、清晰、无卡顿地传输，是分析改进这个工作需要解决的前期难点。针对于这个问题，慧视光电利用GS弱网高清音视频传输系统和RK3588打造的Viztra-HE030图像处理板结合，推出了低延迟低带宽图传解决方案。在一个窄带收发信道内，例如在信道有效带宽0.5Mb/s~2Mb/s内，多路视频和交互控制共用一对收发信道，信道支持数据透传，外部系统可以使用该信道，传输任意格式的数据；可实时调整视频码率，在低至500K带宽情况下依然可以回传清晰流畅的图像。可以使设备飞的更远、走的更远;可实现视频中继转发；能够基于H265实时视频编码；可实现基于视频流的“人在回路低延迟控制”。基于普通60帧相机，实现15ms的低延迟编解码，加上数据链传输延迟时间在30ms左右，目前业界前列。通用性强，使用更加灵活，适用更多应用场景；支持多路SDI视频在低至500K带宽情况下的同时传输（1080P60FPS），彻底解决“带宽苦恼”；整体时延约60ms（含相机、编解码、显示，不含传输），实现实时控制、实时打击。四川高效目标检测解决