多目标跟踪是指在连续的图像中,通过目标检测算法识别出每一帧中的目标,并在时间上跟踪它们的位置和状态。但目标会不断发生尺度、形变、遮挡等变化,而且还会有目标出现和消失的情况,再加上视频采集端的相机所处环境可能受到外界影响导致抖动的情况(例如无人机高空检测),就会给多目标跟踪造成一定的困难。由于我们不能控制目标,所以只能从视频采集端维护跟踪的稳定性。因此,成都慧视针对于多目标检测跟踪抖动丢失的优化方法是:1.改进目标检测,使用更加鲁棒的目标检测算法。2.增强特征描述,利用深度学习提取更高级别的语义特征,这些特征对于小范围内的视角变化具有更好的不变性3.改进运动模型,在算法中加入对摄像头运动的估计,通过补偿摄像头运动来减小目标真实运动与预测之间的差距。4.数据关联策略,设计更灵活的数据关联算法,允许更大的距离阈值来匹配候选目标。慧视Viztra-LE034图像处理板。高效图像处理板工艺
这样的无人机智慧“眼”可以通过搭载吊舱实现,吊舱内置各种规格的摄像机,能够实现多角度观察。而智能化则可以在吊舱的基础上植入高性能AI图像处理板。图像处理板能够对摄像机获取的图像进行AI智能分析,这样无人机就能够自动识别缺陷,然后进行信息留存、回传。在这个领域,成都慧视光电可以根据需求进行多接口图像处理板的定制,选择成都慧视开发的RK3588系列图像处理板,支持选择SDI、CVBS、LVDS、USB、cameralink等接口。RK3588拥有6.0TOPS的算力,能够在各种复杂环境进行稳定工作。板卡和识别算法的强强联合下,无论白天黑夜,无人机都可以实现自助巡检,就不需要过多的人工参与。也是一种降本增效的举措。山西图像处理板生产企业全国产化图像处理板。
经过算法的不断升级验证,Viztra-LE026图像处理板能够以30Hz的帧率跟踪像素为2*2的目标,能够识别**小像素为12*12的目标,整个延迟不高于100ms,识别精度能够大于85%。无人机作业,续航是使用者首要考虑的。Viztra-LE026的设计正是考虑了这项因素,首先重量上就不会给无人机增加过多负担,尺寸方面也无需过多空间,低于4W的功耗对于整个无人机的续航影响也是微乎其微。综合这些特点,可见Viztra-LE026图像处理板和无人机的完美契合,将是各领域打造智能无人机的得力助手。
无人机的智能化是推动低空经济发展的重要引擎,打造智能无人机需要通信、控制、传感器等多种技术的共同作用,其中图像处理板的目标检测识别技术能够在智慧巡检、智慧交通管理、智慧河湖巡查等领域有着积极作用。在成都慧视开发的多款图像处理板中,Viztra-LE026以小型化、低功耗的特点深受行业青睐。Viztra-LE026图像处理板采用了全国产化芯片RV1126,板卡外形呈圆形设计,尺寸为Φ38mm*12mm,重量12g,虽然小巧,但是算力可达2.0TOPS,能够凭借1路MIPI视频输入和1路DVP视频输入实现对目标实时自主检测、识别,并自动或手动锁定跟踪人、车、船等目标。慧视光电能够定制dvp接口的RK3588图像处理板。
瑞芯微推出的RK3588系列图像处理板作为国产化板卡的性能前列,成为了各领域研究开发的优先,它能在诸多行业实现目标检测、识别以及跟踪等功能,具有重要的研究开发价值。特别是对于高校而言,将RK3588作为课题进行研究开发,是一个不错的选择。但是在这些功能实现过程中,算法的能力就十分重要,如何让算法更加精细的识别检测例如人、车、船等目标成为首要解决的问题。要想让AI算法更能精确的识别检测目标,可以利用AI的深度学习能力,让AI不断学习这些目标的特征,从而达到精细识别的能力。这个过程,可以通过大量的数据标注,来训练AI。但大量待标注工作,常常让开发者头疼。如果采用传统方式用人工挨个挨帧标注,将会耗费大量时间精力,让成本不可控。低功耗、小体积的图像处理板。靠谱的图像处理板零售价格
低延迟图像处理板哪里有?高效图像处理板工艺
但这也遇到很多难点,通常情况下,视频回传的延迟大概在200ms左右,随着大量的弹打出,视频传输所需带宽就面临压力,如何在通信带宽有限的情况下,保证视频顺畅、清晰、无卡顿地传输,是分析改进这个工作需要解决的前期难点。针对于这个问题,慧视光电利用GS弱网高清音视频传输系统和RK3588打造的Viztra-HE030图像处理板结合,推出了低延迟低带宽图传解决方案。在一个窄带收发信道内,例如在信道有效带宽0.5Mb/s~2Mb/s内,多路视频和交互控制共用一对收发信道,信道支持数据透传,外部系统可以使用该信道,传输任意格式的数据;可实时调整视频码率,在低至500K带宽情况下依然可以回传清晰流畅的图像。可以使设备飞的更远、走的更远;可实现视频中继转发;能够基于H265实时视频编码;可实现基于视频流的“人在回路低延迟控制”。基于普通60帧相机,实现15ms的低延迟编解码,加上数据链传输延迟时间在30ms左右,目前业界前列。通用性强,使用更加灵活,适用更多应用场景;支持多路SDI视频在低至500K带宽情况下的同时传输(1080P60FPS),彻底解决“带宽苦恼”;整体时延约60ms(含相机、编解码、显示,不含传输),实现实时控制、实时打击。高效图像处理板工艺