云南电力巡检AI智能图像处理

成都慧视开发的RK3588系列高性能图像处理板Viztra-HE030，能够在-40℃~65℃的环境中进行工作，用在寒冷的北方冬天电力巡检领域，可以有效支撑无人机的稳定工作。此外，这款板卡的存储温度范围在-55℃~75℃，遇到更加极端寒冷的天气时，不使用也能够有效抗寒。RK3588属于旗舰机芯片，搭载八核64位CPU，主频高达2.4GHz。集成ARMMali-G610MP4四核GPU，内置AI加速器NPU，可提供6Tops算力，用在电力巡检领域能够快速稳定处理复杂的场景，帮助进行保供电工作。AI算法训练帮助工具SpeedDP。云南电力巡检AI智能图像处理

这样的无人机智慧“眼”可以通过搭载吊舱实现，吊舱内置各种规格的摄像机，能够实现多角度观察。而智能化则可以在吊舱的基础上植入高性能AI图像处理板。图像处理板能够对摄像机获取的图像进行AI智能分析，这样无人机就能够自动识别缺陷，然后进行信息留存、回传。在这个领域，成都慧视光电可以根据需求进行多接口图像处理板的定制，选择成都慧视开发的RK3588系列图像处理板，支持选择SDI、CVBS、LVDS、USB、cameralink等接口。RK3588拥有6.0TOPS的算力，能够在各种复杂环境进行稳定工作。板卡和识别算法的强强联合下，无论白天黑夜，无人机都可以实现自助巡检，就不需要过多的人工参与。也是一种降本增效的举措。智慧城市AI智能方案**SpeedDP能够节约大量的图像标注时间。

无人机夜间工作时需要依靠红外机芯进行高清成像，而想要具备AI检测识别的能力则可以通过植入图像处理板。成都慧视可以根据需求提供整套的建设方案，实现快速集成开发。慧视Viztra-LE026图像处理板+MiNO 17红外机芯的组合方案，两款产品均使用小巧设计，整体组合重量在30g左右，并且都采用小功耗设计，用在无人机领域不会过多增加负担。在算法的赋能下，能够实现稳定的目标检测识别。Viztra-LE026图像处理板重量在10g左右，采用了瑞芯微全国产化芯片RV1126，能够输出2.0TOPS的算力，功耗不高于4W。能够以30Hz帧率跟踪像素2*2的目标，能够识别像素为12*12的目标，且识别率高于85%。而MiNO 17红外机芯重量在20g左右（净重5g（不含镜头）），像素分辨率为640*512，采用9/13/25mm三种定焦设计，支持18中伪彩选择，功耗小于0.75W。

图像标注就是给图像打上标签标记，例如矩形框等形式，在以前，需要招聘专门的图像标注师，随着AI的不断发展，这个行业正发生翻天覆地的变化。人工智能利用计算机和机器模仿人类思维来解决问题或制定决策。深度学习是人工智能的子领域，深度学习算法模型由神经网络组成。通过学习样本数据的特征表达以及数据分布来实现能够像人一样具备分析和识别目标的能力。目前，有许多功能性AI工具可以帮助我们进行图像标注，有的是纯手动拉框，有的则可以帮助我们进行自动标注。FPV识别算法用SpeedDP帮助提升精度。

在很长一段时间内，传统的粮库害虫检查方法是依靠人工巡检，用肉眼观察，逐仓筛查的方法，这种方法覆盖面不足且效率低下，筛查一次将耗费工作人员的大量时间精力。随着技术的发展，AI化的筛查逐步采用，通过算法的AI识别实现自动化筛查。方法基于高像素高清摄像机，实时远程监控粮库，一旦发现害虫就能够立即向管理平台发出告警，有效降低巡检成本和压力，提升工作效率。这之中，实现AI识别处理的传感器同样重要，面对复杂的粮库环境，一个高性能能够快速处理数据的图像处理板是关键。算法的提升得益于大量的数据标注。智慧园区AI智能高效处理

慧视SpeedDP已经迭代至3.0版本。云南电力巡检AI智能图像处理

多目标跟踪是指在连续的图像中，通过目标检测算法识别出每一帧中的目标，并在时间上跟踪它们的位置和状态。但目标会不断发生尺度、形变、遮挡等变化，而且还会有目标出现和消失的情况，再加上视频采集端的相机所处环境可能受到外界影响导致抖动的情况（例如无人机高空检测），就会给多目标跟踪造成一定的困难。由于我们不能控制目标，所以只能从视频采集端维护跟踪的稳定性。因此，成都慧视针对于多目标检测跟踪抖动丢失的优化方法是：1.改进目标检测,使用更加鲁棒的目标检测算法。2.增强特征描述，利用深度学习提取更高级别的语义特征，这些特征对于小范围内的视角变化具有更好的不变性3.改进运动模型，在算法中加入对摄像头运动的估计，通过补偿摄像头运动来减小目标真实运动与预测之间的差距。4.数据关联策略，设计更灵活的数据关联算法，允许更大的距离阈值来匹配候选目标。云南电力巡检AI智能图像处理