甘肅RK3399處理板圖像識(shí)別模塊算法定制

來源: 發(fā)布時(shí)間:2025-04-14

城市管理的智慧化轉(zhuǎn)型是智慧城市建設(shè)的重要部分。隨著無人機(jī)的廣泛應(yīng)用,一個(gè)由人、機(jī)組合的智慧化無人機(jī)綜合監(jiān)管網(wǎng)絡(luò)正逐步形成,讓城市風(fēng)險(xiǎn)無處遁形。無人機(jī)搭載吊艙起飛,能夠按照航線進(jìn)行巡飛,吊艙的智能化攝像頭能夠?qū)σ曇皟?nèi)的目標(biāo)進(jìn)行智能識(shí)別,通過數(shù)據(jù)分析向監(jiān)管發(fā)出信息,助理開展現(xiàn)場(chǎng)執(zhí)法行動(dòng)。無人機(jī)的優(yōu)勢(shì)在于不受時(shí)空限制,全天候的巡檢不在話下。夜晚可以通過紅外傳感器形成高清成像,機(jī)動(dòng)靈活的特點(diǎn)可以快速到達(dá)許多人工巡查不變?nèi)サ降膮^(qū)域。與傳統(tǒng)的人工巡查方法相比,有著早發(fā)現(xiàn)、早介入、快處理的優(yōu)勢(shì),極大提升了工作效率。分別是利用RV1126開發(fā)而成的Viztra-LE026圖像處理板;甘肅RK3399處理板圖像識(shí)別模塊算法定制

圖像識(shí)別模塊

而維修機(jī)器人則能夠通過圖像識(shí)別、精細(xì)遠(yuǎn)程控制技術(shù),實(shí)現(xiàn)遠(yuǎn)程快速維修,通過加裝高性能圖像處理板,機(jī)器人能夠精細(xì)電網(wǎng)缺陷以及損壞程度,并通過攝像頭實(shí)時(shí)回傳高清畫面,工程師只需要遠(yuǎn)程操控機(jī)器人進(jìn)行修補(bǔ),實(shí)現(xiàn)精細(xì)縫合。整個(gè)過程只需要極少數(shù)的人員參與,整個(gè)巡檢維修的時(shí)間能夠從7小時(shí)縮減到1小時(shí),極大地保障了電力供應(yīng)。成都慧視光電采用RK3588開發(fā)而成的Viztra-HE030圖像處理板,具備八核處理器,采用BTB傳輸接口,擁有極強(qiáng)傳輸能力,成都慧視能夠憑借豐富的經(jīng)驗(yàn),快速集成開發(fā)SDI、CVBS、DVP、LVDS、cameralink等接口以及金屬外殼和散熱器。通過6.0TOPS的算力,以及豐富的接口定制,板卡能夠快速適配不同的無人機(jī)和機(jī)器人,用在我國西部電力運(yùn)維領(lǐng)域,將是工程師打造智能化維護(hù)的關(guān)鍵技術(shù)。重慶邊海防圖像識(shí)別模塊目標(biāo)檢測(cè)RK3588是目前國產(chǎn)圖像處理板的性能數(shù)一數(shù)二存在。

甘肅RK3399處理板圖像識(shí)別模塊算法定制,圖像識(shí)別模塊

如今,AI已走入萬千企業(yè),其展現(xiàn)出的強(qiáng)大賦能作用,讓無數(shù)企業(yè)受益。尤其實(shí)在制造業(yè)中,AI能夠賦能多個(gè)領(lǐng)域,讓企業(yè)更加高效、更加節(jié)能。例如許多大型的紡織工廠,定期的機(jī)器巡檢以及對(duì)產(chǎn)品的質(zhì)檢至關(guān)重要。傳統(tǒng)模式是采用人工巡檢,大量的巡檢人員對(duì)很大程度上小小的紡織機(jī)器和產(chǎn)品進(jìn)行肉眼質(zhì)檢,雖然這種模式效率低、精度無法掌握,但也是無賴之舉。隨著AI的發(fā)展應(yīng)用,利用AI進(jìn)行質(zhì)檢,能夠彌補(bǔ)了這些缺陷。通過在攝像頭的基礎(chǔ)上集成具備圖像識(shí)別的AI圖像處理板、AI算法以及大數(shù)據(jù)分析技術(shù),就能夠搭建一套簡易但功能強(qiáng)大的AI質(zhì)檢系統(tǒng)。

而AI標(biāo)注則好很多,通過AI算法開發(fā)的基本流程,就能夠?qū)I進(jìn)行深度訓(xùn)練,讓其能夠像人眼一樣對(duì)圖像上的目標(biāo)進(jìn)行判斷分類,然后不同目標(biāo)自動(dòng)框選標(biāo)注。這個(gè)工作主要是前期的模型訓(xùn)練需要大量時(shí)間,而后期的圖像標(biāo)注就很節(jié)省時(shí)間,通常情況下,一張圖片,只需要7-8ms就能夠精細(xì)標(biāo)注完成,無論圖片上的目標(biāo)數(shù)量和復(fù)雜程度,這是人工遠(yuǎn)不能及的。目前,慧視SpeedDP經(jīng)過多個(gè)版本的迭代,能夠支持YOLO系列算法以及YOLOv8算法的分割標(biāo)注,標(biāo)注的精度進(jìn)一步提升。目前我司能夠提供完整的針對(duì)于人、車、船的標(biāo)注模型,如果有其他目標(biāo)標(biāo)注的需求,則可以自行進(jìn)行針對(duì)性訓(xùn)練。毫無疑問,AI標(biāo)注的出現(xiàn)能夠?yàn)槠髽I(yè)大量的數(shù)據(jù)標(biāo)注工作節(jié)省時(shí)間,從而節(jié)省成本。隨著AI的進(jìn)一步發(fā)展,未來傳統(tǒng)標(biāo)注的模式勢(shì)必會(huì)被完全取代。利用RK3588開發(fā)而成的Viztra-HE030圖像處理板;

甘肅RK3399處理板圖像識(shí)別模塊算法定制,圖像識(shí)別模塊

多目標(biāo)跟蹤是指在連續(xù)的圖像中,通過目標(biāo)檢測(cè)算法識(shí)別出每一幀中的目標(biāo),并在時(shí)間上跟蹤它們的位置和狀態(tài)。但目標(biāo)會(huì)不斷發(fā)生尺度、形變、遮擋等變化,而且還會(huì)有目標(biāo)出現(xiàn)和消失的情況,再加上視頻采集端的相機(jī)所處環(huán)境可能受到外界影響導(dǎo)致抖動(dòng)的情況(例如無人機(jī)高空檢測(cè)),就會(huì)給多目標(biāo)跟蹤造成一定的困難。由于我們不能控制目標(biāo),所以只能從視頻采集端維護(hù)跟蹤的穩(wěn)定性。因此,成都慧視針對(duì)于多目標(biāo)檢測(cè)跟蹤抖動(dòng)丟失的優(yōu)化方法是:1.改進(jìn)目標(biāo)檢測(cè),使用更加魯棒的目標(biāo)檢測(cè)算法。2.增強(qiáng)特征描述,利用深度學(xué)習(xí)提取更高級(jí)別的語義特征,這些特征對(duì)于小范圍內(nèi)的視角變化具有更好的不變性3.改進(jìn)運(yùn)動(dòng)模型,在算法中加入對(duì)攝像頭運(yùn)動(dòng)的估計(jì),通過補(bǔ)償攝像頭運(yùn)動(dòng)來減小目標(biāo)真實(shí)運(yùn)動(dòng)與預(yù)測(cè)之間的差距。4.數(shù)據(jù)關(guān)聯(lián)策略,設(shè)計(jì)更靈活的數(shù)據(jù)關(guān)聯(lián)算法,允許更大的距離閾值來匹配候選目標(biāo)。也需要AI等算法的支持。四川低功耗圖像識(shí)別模塊板卡公司

如何提升目標(biāo)識(shí)別的精度?甘肅RK3399處理板圖像識(shí)別模塊算法定制

實(shí)現(xiàn)這些功能的技術(shù)中,圖像處理基于AI圖像處理板這一傳感器。板卡具備快速圖像處理識(shí)別的硬件能力,植入相應(yīng)的AI算法,無人機(jī)就相當(dāng)于裝上了“智慧眼”,而且這個(gè)“智慧眼”居于高空,能夠在一個(gè)定點(diǎn),俯瞰大范圍,實(shí)時(shí)監(jiān)控貨物的存放狀態(tài)。遠(yuǎn)程控制技術(shù)基于網(wǎng)絡(luò)通信,通過和圖像處理板的結(jié)合,能夠?qū)崿F(xiàn)低延時(shí)低帶寬的圖像傳輸處理。在實(shí)際落地應(yīng)用中,可以采用成都慧視開發(fā)的高性能圖像處理板,其中RV1126系列的Viztra-LE026圖像處理板,就是無人機(jī)的完美搭子。這款圖像處理板具備2.0TOPS的算力,能夠根據(jù)無人機(jī)型號(hào)進(jìn)行接口定制,整體尺寸在40mm×40mm×10mm左右(核心板+接口板),小巧的外形即便是小型無人機(jī)也能夠裝上。此外,板卡整體功耗在4W左右,不會(huì)過多增加無人機(jī)的負(fù)擔(dān)。甘肅RK3399處理板圖像識(shí)別模塊算法定制