湖北車(chē)載輔助圖像識(shí)別模塊

來(lái)源: 發(fā)布時(shí)間:2025-03-02

城市濕地公園是“城市之肺”,是生態(tài)建設(shè)的重要一環(huán),因此對(duì)于濕地公園的日常巡邏必不可少。但是大面積的濕地公園地形復(fù)雜交錯(cuò),許多區(qū)域依靠傳統(tǒng)的人工巡邏,無(wú)法到達(dá)。此外,人工巡邏的效率遠(yuǎn)遠(yuǎn)不夠,無(wú)法做到及時(shí)響應(yīng)和精確記錄,久而久之,成本就不斷累計(jì)增加。無(wú)人機(jī)的落地應(yīng)用,能夠有效減少人工成本的問(wèn)題。無(wú)人機(jī)能夠憑借小巧的身型,在濕地錯(cuò)綜復(fù)雜的環(huán)境中自由穿梭,確保無(wú)死角。利用無(wú)人機(jī)打造智能巡檢系統(tǒng),通過(guò)高清攝像頭抵近觀察,能夠?qū)崿F(xiàn)濕地全域的高效巡檢。其中,智能化的措施在于可以在攝像頭的基礎(chǔ)上加裝圖像處理板,通過(guò)圖像處理板和算法的共同作用,能夠讓無(wú)人機(jī)攝像頭變成“智慧眼”,這只“智慧眼”能夠精細(xì)AI識(shí)別動(dòng)物、樹(shù)木、水中的雜物等等信息,通過(guò)大量的數(shù)據(jù)收集,為管理決策提供依據(jù)。高性能的圖像識(shí)別處理板RK3399Pro。湖北車(chē)載輔助圖像識(shí)別模塊

圖像識(shí)別模塊

而這個(gè)過(guò)程中,如何讓無(wú)人機(jī)理解并提取分析圖像很關(guān)鍵,這就需要高精尖的目標(biāo)識(shí)別算法。成都慧視開(kāi)發(fā)的AI智能算法分析是一種計(jì)算機(jī)的“分析”和“識(shí)別”技術(shù),是一種計(jì)算機(jī)“視覺(jué)”科技,也就是把攝像機(jī)當(dāng)作人的“眼睛”,智能設(shè)備終端作為人的“大腦”,讓視頻系統(tǒng)具有人一樣的判斷危險(xiǎn)或者其他特殊情況發(fā)生的能力。圖像處理板和這樣的目標(biāo)識(shí)別算法的合力之下,就可實(shí)時(shí)對(duì)目標(biāo)進(jìn)行識(shí)別或者人為的的鎖定,同時(shí)可以根據(jù)輸出目標(biāo)的靶量信息,對(duì)目標(biāo)進(jìn)行實(shí)時(shí)跟蹤。這就是無(wú)人機(jī)實(shí)現(xiàn)智能識(shí)別的一種高效方法,通過(guò)實(shí)時(shí)的目標(biāo)識(shí)別處理無(wú)人機(jī)獲取的數(shù)據(jù),讓無(wú)人機(jī)的工作更加高效。湖北車(chē)載輔助圖像識(shí)別模塊打造一套完整的圖像識(shí)別模塊。

湖北車(chē)載輔助圖像識(shí)別模塊,圖像識(shí)別模塊

多目標(biāo)跟蹤是指在連續(xù)的圖像中,通過(guò)目標(biāo)檢測(cè)算法識(shí)別出每一幀中的目標(biāo),并在時(shí)間上跟蹤它們的位置和狀態(tài)。但目標(biāo)會(huì)不斷發(fā)生尺度、形變、遮擋等變化,而且還會(huì)有目標(biāo)出現(xiàn)和消失的情況,再加上視頻采集端的相機(jī)所處環(huán)境可能受到外界影響導(dǎo)致抖動(dòng)的情況(例如無(wú)人機(jī)高空檢測(cè)),就會(huì)給多目標(biāo)跟蹤造成一定的困難。由于我們不能控制目標(biāo),所以只能從視頻采集端維護(hù)跟蹤的穩(wěn)定性。因此,成都慧視針對(duì)于多目標(biāo)檢測(cè)跟蹤抖動(dòng)丟失的優(yōu)化方法是:1.改進(jìn)目標(biāo)檢測(cè),使用更加魯棒的目標(biāo)檢測(cè)算法。2.增強(qiáng)特征描述,利用深度學(xué)習(xí)提取更高級(jí)別的語(yǔ)義特征,這些特征對(duì)于小范圍內(nèi)的視角變化具有更好的不變性3.改進(jìn)運(yùn)動(dòng)模型,在算法中加入對(duì)攝像頭運(yùn)動(dòng)的估計(jì),通過(guò)補(bǔ)償攝像頭運(yùn)動(dòng)來(lái)減小目標(biāo)真實(shí)運(yùn)動(dòng)與預(yù)測(cè)之間的差距。4.數(shù)據(jù)關(guān)聯(lián)策略,設(shè)計(jì)更靈活的數(shù)據(jù)關(guān)聯(lián)算法,允許更大的距離閾值來(lái)匹配候選目標(biāo)。

這樣的無(wú)人機(jī)智慧“眼”可以通過(guò)搭載吊艙實(shí)現(xiàn),吊艙內(nèi)置各種規(guī)格的攝像機(jī),能夠?qū)崿F(xiàn)多角度觀察。而智能化則可以在吊艙的基礎(chǔ)上植入高性能AI圖像處理板。圖像處理板能夠?qū)z像機(jī)獲取的圖像進(jìn)行AI智能分析,這樣無(wú)人機(jī)就能夠自動(dòng)識(shí)別缺陷,然后進(jìn)行信息留存、回傳。在這個(gè)領(lǐng)域,成都慧視光電可以根據(jù)需求進(jìn)行多接口圖像處理板的定制,選擇成都慧視開(kāi)發(fā)的RK3588系列圖像處理板,支持選擇SDI、CVBS、LVDS、USB、cameralink等接口。RK3588擁有6.0TOPS的算力,能夠在各種復(fù)雜環(huán)境進(jìn)行穩(wěn)定工作。板卡和識(shí)別算法的強(qiáng)強(qiáng)聯(lián)合下,無(wú)論白天黑夜,無(wú)人機(jī)都可以實(shí)現(xiàn)自助巡檢,就不需要過(guò)多的人工參與。也是一種降本增效的舉措?;垡暱梢远ㄖ茍D像識(shí)別模塊。

湖北車(chē)載輔助圖像識(shí)別模塊,圖像識(shí)別模塊

傳統(tǒng)的吊艙只能如上述那樣工作,而要打造更加智能化的邊海防無(wú)人機(jī)巡邏,則可以在光電吊艙中植入高性能的圖像處理板,通過(guò)目標(biāo)識(shí)別、檢測(cè)算法的賦能,就能夠讓無(wú)人機(jī)實(shí)現(xiàn)目標(biāo)識(shí)別檢測(cè)、目標(biāo)鎖定跟蹤等功能。為了進(jìn)行有效結(jié)合,成都慧視開(kāi)發(fā)了多塊高性能的具備圖像處理能力的光電吊艙。例如慧視VIZ-100T三軸三光目標(biāo)定位吊艙,集10倍光學(xué)變倍可見(jiàn)光相機(jī)、640×512高分辨率紅外相機(jī)、測(cè)程1.2km半導(dǎo)體激光測(cè)距機(jī)于一體,在邊海防巡邏時(shí)能夠晝夜成像工作。三軸高穩(wěn)定精度平臺(tái)框架能夠有效保障畫(huà)面的清晰穩(wěn)定,并對(duì)目標(biāo)點(diǎn)位的定位。吊艙內(nèi)置我司自主開(kāi)發(fā)的高性能AI圖像處理板Viztra-HE030,該板卡采用瑞芯微旗艦級(jí)芯片RK3588,能夠在算法的作用下實(shí)現(xiàn)高空目標(biāo)識(shí)別檢測(cè)、鎖定跟蹤人、車(chē)、船等目標(biāo),再通過(guò)和地面巡邏人員協(xié)調(diào)統(tǒng)一,就能夠打造邊海防的智能化體系。如何實(shí)現(xiàn)高幀頻的無(wú)人機(jī)反制?湖北車(chē)載輔助圖像識(shí)別模塊

成都慧視可以定制DVP接口的RK3588圖像處理板。湖北車(chē)載輔助圖像識(shí)別模塊

無(wú)人機(jī)在農(nóng)業(yè)領(lǐng)域能夠?qū)崿F(xiàn)高效率的施肥、播種等操作。但是不同的作業(yè)環(huán)境對(duì)于無(wú)人機(jī)的工作性能要求不一樣,同樣的方案在平原地區(qū)適用,在高原地區(qū)就不行。因此針對(duì)于特殊作業(yè)環(huán)境需要制定不同的智慧化方案。像青藏高原這樣地貌復(fù)雜、低氣壓、大溫差的特點(diǎn),參與智能化工作的各個(gè)部件需要符合這樣作業(yè)環(huán)境特點(diǎn)的性能要求。不比平原的一馬平川,高原由于環(huán)境復(fù)雜,地形起伏對(duì)于無(wú)人機(jī)的飛行也需要進(jìn)行控制,無(wú)論是高度還是速度甚至距離都需要進(jìn)行嚴(yán)格限制,防止出現(xiàn)撞機(jī)等事故。因此,這個(gè)方面的智慧化建設(shè)就需要無(wú)人機(jī)具備智能避障的功能,無(wú)人機(jī)需要在高速度或者遠(yuǎn)距離的情況下識(shí)別樹(shù)木、電線桿、石頭等障礙物,并能夠?qū)崿F(xiàn)避障。湖北車(chē)載輔助圖像識(shí)別模塊