四川人流圖像識(shí)別模塊研發(fā)

在許多領(lǐng)域，無人機(jī)的作業(yè)環(huán)境相對(duì)復(fù)雜，需要識(shí)別處理圖像背景目標(biāo)眾多，這種環(huán)境下，要想實(shí)現(xiàn)更高精度的檢測識(shí)別效果，圖像處理板的性能至關(guān)重要。在慧視光電開發(fā)的多款圖像處理板中，Viztra-HE030圖像處理板以6.0TOPS得以勝任。這款板卡采用了瑞芯微旗艦級(jí)芯片RK3588，8nmLP制程，搭載八核64位CPU，主頻高達(dá)2.4GHz。集成ARMMali-G610MP4四核GPU，內(nèi)置AI加速器NPU，支持主流的深度學(xué)習(xí)框架。性能強(qiáng)勁的RK3588可為無人機(jī)AI識(shí)別的應(yīng)用場景帶來更強(qiáng)大的性能表現(xiàn)。成都慧視利用RK3588芯片打造了一個(gè)高性能的Viztra-HE030圖像處理板。四川人流圖像識(shí)別模塊研發(fā)

在如今的作業(yè)中，無人機(jī)路面巡查替代傳統(tǒng)的人工巡查，展現(xiàn)出巨大的效率優(yōu)勢。像高速施工工地這樣的環(huán)境下，施工方為了保障施工安全，就需要對(duì)施工范圍進(jìn)行嚴(yán)格管控，傳統(tǒng)的人工巡查效率低，受限于地形、時(shí)間等問題，容易出現(xiàn)盲點(diǎn)。相比人工，利用無人機(jī)進(jìn)行AI識(shí)別則可以逐幀圖像監(jiān)測，即便是夜晚也能夠利用紅外傳感器進(jìn)行數(shù)據(jù)收集，幾乎不會(huì)遺漏任何信息。而交通管理部門，則可以利用無人機(jī)快速到底事故地點(diǎn)進(jìn)行疏導(dǎo)，緩解交通壓力。河北目標(biāo)跟蹤圖像識(shí)別模塊定制方案成都慧視共開發(fā)有三款圖像處理板。

無人機(jī)夜間工作時(shí)需要依靠紅外機(jī)芯進(jìn)行高清成像，而想要具備AI檢測識(shí)別的能力則可以通過植入圖像處理板。成都慧視可以根據(jù)需求提供整套的建設(shè)方案，實(shí)現(xiàn)快速集成開發(fā)?；垡昖iztra-LE026圖像處理板+MiNO?17紅外機(jī)芯的組合方案，兩款產(chǎn)品均使用小巧設(shè)計(jì)，整體組合重量在30g左右，并且都采用小功耗設(shè)計(jì)，用在無人機(jī)領(lǐng)域不會(huì)過多增加負(fù)擔(dān)。在算法的賦能下，能夠?qū)崿F(xiàn)穩(wěn)定的目標(biāo)檢測識(shí)別。Viztra-LE026圖像處理板重量在10g左右，采用了瑞芯微全國產(chǎn)化芯片RV1126，能夠輸出2.0TOPS的算力，功耗不高于4W。能夠以30Hz幀率跟蹤像素2*2的目標(biāo)，能夠識(shí)別像素為12*12的目標(biāo)，且識(shí)別率高于85%。而MiNO?17紅外機(jī)芯重量在20g左右（凈重5g（不含鏡頭）），像素分辨率為640*512，采用9/13/25mm三種定焦設(shè)計(jì)，支持18中偽彩選擇，功耗小于0.75W。

利用圖像處理技術(shù)實(shí)現(xiàn)導(dǎo)彈的遠(yuǎn)程打擊是一項(xiàng)運(yùn)用了比較長時(shí)間的技術(shù)，相比于現(xiàn)代化的電子控制，它具備低受干擾的特點(diǎn)，特別是無人機(jī)在軍備領(lǐng)域的廣泛應(yīng)用，圖像處理的作用重新受到重視。遠(yuǎn)程打擊時(shí)，需要對(duì)整個(gè)彈的識(shí)別能力進(jìn)行深度學(xué)習(xí)訓(xùn)練，不斷的訓(xùn)練能夠讓AI更加聰明，讓AI知道該打擊什么，從而提升打擊精度。在前期的試驗(yàn)印證階段，需要進(jìn)行大量反復(fù)的試驗(yàn)訓(xùn)練，通過在導(dǎo)彈前端植入導(dǎo)引頭，給導(dǎo)彈裝上眼睛，可以實(shí)時(shí)記錄導(dǎo)彈打出后的視頻畫面，然后將大量的視頻數(shù)據(jù)采集到一起用于分析改進(jìn)。高幀頻視頻接入接口定制可以找慧視定制。

“啟明935A”系列芯片已經(jīng)成功點(diǎn)亮，并完成各項(xiàng)功能性測試，達(dá)到車規(guī)級(jí)量產(chǎn)標(biāo)準(zhǔn)。啟明935A是行業(yè)首顆基于Chiplet(芯粒/小芯片)異構(gòu)集成范式的自動(dòng)駕駛芯片，但并非單一芯片，而是一個(gè)家族系列。啟明935HUBChiplet可以和不同數(shù)量的大熊星座AIChiplet互相搭配，再結(jié)合靈活的封裝方式，快速形成不同性能等級(jí)的SoC芯片。它還支持高帶寬的PBLink多芯互連，雙芯雙向帶寬128GB/s，四芯雙向帶寬64GB/s。啟明935A每顆芯片都支持比較大20路的1080p60攝像頭輸入，可應(yīng)用于各類端側(cè)AI部署。得益于大熊星座NPU天然支持Transformer結(jié)構(gòu)，初步支持的模型有Yolo系列、ResNet50、PSPNet、PointNet++、TrafficSign_Retinanet、BevDet、miniCPM、Unet_ResNet50、PointPillars、PillarNest、M2track、BevFusion、PaliGemma、LLaMa-3B、8B等等。成都慧視開發(fā)的Viztra-HE032圖像處理板擁有6.0TOPS的算力。四川自主識(shí)別圖像識(shí)別模塊產(chǎn)品

打造一套完整的圖像識(shí)別模塊。四川人流圖像識(shí)別模塊研發(fā)

瑞芯微推出的RK3588系列圖像處理板作為國產(chǎn)化板卡的性能前列，成為了各領(lǐng)域研究開發(fā)的優(yōu)先，它能在諸多行業(yè)實(shí)現(xiàn)目標(biāo)檢測、識(shí)別以及跟蹤等功能，具有重要的研究開發(fā)價(jià)值。特別是對(duì)于高校而言，將RK3588作為課題進(jìn)行研究開發(fā)，是一個(gè)不錯(cuò)的選擇。但是在這些功能實(shí)現(xiàn)過程中，算法的能力就十分重要，如何讓算法更加精細(xì)的識(shí)別檢測例如人、車、船等目標(biāo)成為首要解決的問題。要想讓AI算法更能精確的識(shí)別檢測目標(biāo)，可以利用AI的深度學(xué)習(xí)能力，讓AI不斷學(xué)習(xí)這些目標(biāo)的特征，從而達(dá)到精細(xì)識(shí)別的能力。這個(gè)過程，可以通過大量的數(shù)據(jù)標(biāo)注，來訓(xùn)練AI。但大量待標(biāo)注工作，常常讓開發(fā)者頭疼。如果采用傳統(tǒng)方式用人工挨個(gè)挨幀標(biāo)注，將會(huì)耗費(fèi)大量時(shí)間精力，讓成本不可控。四川人流圖像識(shí)別模塊研發(fā)