无人机夜间工作时需要依靠红外机芯进行高清成像,而想要具备AI检测识别的能力则可以通过植入图像处理板。成都慧视可以根据需求提供整套的建设方案,实现快速集成开发。慧视Viztra-LE026图像处理板+MiNO 17红外机芯的组合方案,两款产品均使用小巧设计,整体组合重量在30g左右,并且都采用小功耗设计,用在无人机领域不会过多增加负担。在算法的赋能下,能够实现稳定的目标检测识别。Viztra-LE026图像处理板重量在10g左右,采用了瑞芯微全国产化芯片RV1126,能够输出2.0TOPS的算力,功耗不高于4W。能够以30Hz帧率跟踪像素2*2的目标,能够识别像素为12*12的目标,且识别率高于85%。而MiNO 17红外机芯重量在20g左右(净重5g(不含镜头)),像素分辨率为640*512,采用9/13/25mm三种定焦设计,支持18中伪彩选择,功耗小于0.75W。慧视微型双光吊舱非常适用于无人机领域。附近目标跟踪解决
无人机在农业领域能够实现高效率的施肥、播种等操作。但是不同的作业环境对于无人机的工作性能要求不一样,同样的方案在平原地区适用,在高原地区就不行。因此针对于特殊作业环境需要制定不同的智慧化方案。像青藏高原这样地貌复杂、低气压、大温差的特点,参与智能化工作的各个部件需要符合这样作业环境特点的性能要求。不比平原的一马平川,高原由于环境复杂,地形起伏对于无人机的飞行也需要进行控制,无论是高度还是速度甚至距离都需要进行严格限制,防止出现撞机等事故。因此,这个方面的智慧化建设就需要无人机具备智能避障的功能,无人机需要在高速度或者远距离的情况下识别树木、电线杆、石头等障碍物,并能够实现避障。广东专业目标跟踪慧视光电基于AI图像处理的监控监管方案能够实现安全生产。
相关滤波的跟踪算法始于2012年P.Martins提出的CSK方法,作者提出了一种基于循环矩阵的核跟踪方法,并且从数学上完美解决了密集采样(Dense Sampling)的问题,利用傅立叶变换快速实现了检测的过程。在训练分类器时,一般认为离目标位置较近的是正样本,而离目标较远的认为是负样本。回顾前面提到的TLD或Struck,他们都会在每一帧中随机地挑选一些块进行训练,学习到的特征是这些随机子窗口的特征,而CSK作者设计了一个密集采样的框架,能够学习到一个区域内所有图像块的特征。
在周界安防领域,传统的摄像头有画无声并不具备报警功能。慧视AI图像处理板能够赋能监控进行AI识别,当出现可疑人物有翻越等入侵行为时,监控能够立即锁定跟踪目标人物,并向安保室发出警报,安保室人员能够通过监控的AI跟踪锁定找到可疑人员的移动轨迹,便于纠察。此外,针对于夜间监控的不足,慧视双光吊舱识别装置能够实现昼夜成像,白天通过可见光实现区域的监控画面,在夜晚通过红外实现道路或者目标区域的画面成像,使得一些光线较差的区域也能实现清晰成像,避免被可疑人员钻空。这样就能在小区出入口、室外路口、周界、园区活动空间、地下室以及高空抛物防控等重要区域,通过智能监控联动,实现小区全天候、24小时可视化报警监控。通过及时预警通知,规避安全风险,实现小区的安全管理。慧视光电开发的慧视RV1126图像处理板,采用了国产高性能CPU。
视觉跟踪技术是计算机视觉领域(人工智能分支)的一个重要课题,有着重要的研究意义;且在导弹制导、视频监控、机器人视觉导航、人机交互、以及医疗诊断等许多方面有着广泛的应用前景。随着研究人员不断地深入研究,视觉目标跟踪在近十几年里有了突破性的进展,使得视觉跟踪算法不只是局限于传统的机器学习方法,更是结合了近些年人工智能热潮—深度学习(神经网络)和相关滤波器等方法,并取得了鲁棒(robust)、精确、稳定的结果。Viztra-LE034图像跟踪板采用国内智能AI芯片。广东专业目标跟踪
慧视RK3399PRO板卡可以用于大型公共停车场。附近目标跟踪解决
但这也遇到很多难点,通常情况下,视频回传的延迟大概在200ms左右,随着大量的弹打出,视频传输所需带宽就面临压力,如何在通信带宽有限的情况下,保证视频顺畅、清晰、无卡顿地传输,是分析改进这个工作需要解决的前期难点。针对于这个问题,慧视光电利用GS弱网高清音视频传输系统和RK3588打造的Viztra-HE030图像处理板结合,推出了低延迟低带宽图传解决方案。在一个窄带收发信道内,例如在信道有效带宽0.5Mb/s~2Mb/s内,多路视频和交互控制共用一对收发信道,信道支持数据透传,外部系统可以使用该信道,传输任意格式的数据;可实时调整视频码率,在低至500K带宽情况下依然可以回传清晰流畅的图像。可以使设备飞的更远、走的更远;可实现视频中继转发;能够基于H265实时视频编码;可实现基于视频流的“人在回路低延迟控制”。基于普通60帧相机,实现15ms的低延迟编解码,加上数据链传输延迟时间在30ms左右,目前业界前列。通用性强,使用更加灵活,适用更多应用场景;支持多路SDI视频在低至500K带宽情况下的同时传输(1080P60FPS),彻底解决“带宽苦恼”;整体时延约60ms(含相机、编解码、显示,不含传输),实现实时控制、实时打击。附近目标跟踪解决