這種智慧化的建設(shè)就是采用圖像處理。在無人機(jī)內(nèi)部安裝圖像處理板,這些圖像處理板和相機(jī)、算法的有機(jī)結(jié)合就形成了無人機(jī)的智慧眼,有了這個智慧眼,無人機(jī)就能夠?qū)σ曇胺秶鷥?nèi)的物體進(jìn)行AI識別,從而自動完成避障、巡檢等操作。成都慧視開發(fā)的小型化圖像處理板Viztra-LE026就是專門為無人機(jī)設(shè)計的一款“智慧眼”處理器。這塊板卡采用了RV1126開發(fā)而成,具備2.0TOPS的算力,外形呈圓形化設(shè)計,整體外觀大小為Ф38mm*12mm,重量只有12g,功耗不高于4W,用在無人機(jī)領(lǐng)域具有功耗低、尺寸小的優(yōu)勢,不會過多占用和消耗無人機(jī)的內(nèi)部空間和續(xù)航。成都慧視能夠定制RK3399pro芯片的圖像處理板。天津圖像處理板分析
激光反無設(shè)備的攝像頭中加裝了高性能的AI圖像處理板,將設(shè)備部署在預(yù)定區(qū)域,AI圖像處理板在算法的加持下,實現(xiàn)對禁飛區(qū)域空中目標(biāo)的24小時不間斷AI巡邏,能夠快速發(fā)現(xiàn)、鎖定、處置目標(biāo),在數(shù)秒內(nèi)利用高能激光毀傷無人機(jī)目標(biāo)。要想到達(dá)更加精細(xì)的識別目的,板卡的性能很關(guān)鍵,同時視頻數(shù)據(jù)的質(zhì)量同樣重要。高幀頻的相機(jī)能夠捕捉更多畫面細(xì)節(jié),這樣高性能圖像處理板在進(jìn)行AI識別處理時,就能夠獲取更多信息,識別的精度就會提升。像成都慧視開發(fā)的高性能高幀頻圖像處理板就考慮到了這一點,通過RK3588和FPGA接口的深度定制,輕松打破高幀頻視頻的輸入輸出,讓板卡實現(xiàn)更精細(xì)的數(shù)據(jù)處理。快速圖像處理板市場報價慧視光電開發(fā)的高性能AI圖像處理板。
但這也遇到很多難點,通常情況下,視頻回傳的延遲大概在200ms左右,隨著大量的彈打出,視頻傳輸所需帶寬就面臨壓力,如何在通信帶寬有限的情況下,保證視頻順暢、清晰、無卡頓地傳輸,是分析改進(jìn)這個工作需要解決的前期難點。針對于這個問題,慧視光電利用GS弱網(wǎng)高清音視頻傳輸系統(tǒng)和RK3588打造的Viztra-HE030圖像處理板結(jié)合,推出了低延遲低帶寬圖傳解決方案。在一個窄帶收發(fā)信道內(nèi),例如在信道有效帶寬0.5Mb/s~2Mb/s內(nèi),多路視頻和交互控制共用一對收發(fā)信道,信道支持?jǐn)?shù)據(jù)透傳,外部系統(tǒng)可以使用該信道,傳輸任意格式的數(shù)據(jù);可實時調(diào)整視頻碼率,在低至500K帶寬情況下依然可以回傳清晰流暢的圖像。可以使設(shè)備飛的更遠(yuǎn)、走的更遠(yuǎn);可實現(xiàn)視頻中繼轉(zhuǎn)發(fā);能夠基于H265實時視頻編碼;可實現(xiàn)基于視頻流的“人在回路低延遲控制”。基于普通60幀相機(jī),實現(xiàn)15ms的低延遲編解碼,加上數(shù)據(jù)鏈傳輸延遲時間在30ms左右,目前業(yè)界前列。通用性強(qiáng),使用更加靈活,適用更多應(yīng)用場景;支持多路SDI視頻在低至500K帶寬情況下的同時傳輸(1080P60FPS),徹底解決“帶寬苦惱”;整體時延約60ms(含相機(jī)、編解碼、顯示,不含傳輸),實現(xiàn)實時控制、實時打擊。
新疆地緣遼闊、日照豐富,因此是我國光伏儲能發(fā)達(dá)的區(qū)域之一。為了保障光伏基地的正常運(yùn)作,周期性的巡檢必不可少,傳統(tǒng)模式下需要人工一步一個腳印走出來,隨著現(xiàn)在無人機(jī)的廣落地應(yīng)用,這種大面積大范圍的巡檢也迎來了效率的飛躍。光伏基地每隔一段地方就會有一個鐵塔,這些“駐塔式”機(jī)巢就是無人機(jī)的“巢穴”,無人機(jī)從這里起飛,進(jìn)行巡邏,再回到這里進(jìn)行充電,循環(huán)往復(fù)。得益于智慧化的建設(shè),這些巡檢無人機(jī)有自主巡飛、自動巡檢的能力,可完成以機(jī)巢為中心5公里范圍內(nèi)的輸配電線路和變電設(shè)備網(wǎng)格化巡檢任務(wù)。慧視光電AI圖像處理板。
實現(xiàn)這些功能的技術(shù)中,圖像處理基于AI圖像處理板這一傳感器。板卡具備快速圖像處理識別的硬件能力,植入相應(yīng)的AI算法,無人機(jī)就相當(dāng)于裝上了“智慧眼”,而且這個“智慧眼”居于高空,能夠在一個定點,俯瞰大范圍,實時監(jiān)控貨物的存放狀態(tài)。遠(yuǎn)程控制技術(shù)基于網(wǎng)絡(luò)通信,通過和圖像處理板的結(jié)合,能夠?qū)崿F(xiàn)低延時低帶寬的圖像傳輸處理。在實際落地應(yīng)用中,可以采用成都慧視開發(fā)的高性能圖像處理板,其中RV1126系列的Viztra-LE026圖像處理板,就是無人機(jī)的完美搭子。這款圖像處理板具備2.0TOPS的算力,能夠根據(jù)無人機(jī)型號進(jìn)行接口定制,整體尺寸在40mm×40mm×10mm左右(核心板+接口板),小巧的外形即便是小型無人機(jī)也能夠裝上。此外,板卡整體功耗在4W左右,不會過多增加無人機(jī)的負(fù)擔(dān)。慧視Viztra-LE026圖像處理板。天津自主可控圖像處理板
慧視光電能夠定制LVDS接口的RK3588圖像處理板。天津圖像處理板分析
無人機(jī)夜間工作時需要依靠紅外機(jī)芯進(jìn)行高清成像,而想要具備AI檢測識別的能力則可以通過植入圖像處理板。成都慧視可以根據(jù)需求提供整套的建設(shè)方案,實現(xiàn)快速集成開發(fā)?;垡昖iztra-LE026圖像處理板+MiNO?17紅外機(jī)芯的組合方案,兩款產(chǎn)品均使用小巧設(shè)計,整體組合重量在30g左右,并且都采用小功耗設(shè)計,用在無人機(jī)領(lǐng)域不會過多增加負(fù)擔(dān)。在算法的賦能下,能夠?qū)崿F(xiàn)穩(wěn)定的目標(biāo)檢測識別。Viztra-LE026圖像處理板重量在10g左右,采用了瑞芯微全國產(chǎn)化芯片RV1126,能夠輸出2.0TOPS的算力,功耗不高于4W。能夠以30Hz幀率跟蹤像素2*2的目標(biāo),能夠識別像素為12*12的目標(biāo),且識別率高于85%。而MiNO?17紅外機(jī)芯重量在20g左右(凈重5g(不含鏡頭)),像素分辨率為640*512,采用9/13/25mm三種定焦設(shè)計,支持18中偽彩選擇,功耗小于0.75W。天津圖像處理板分析