成都慧視開發(fā)的RK3588系列高性能圖像處理板Viztra-HE030,能夠在-40℃~65℃的環(huán)境中進(jìn)行工作,用在寒冷的北方冬天電力巡檢領(lǐng)域,可以有效支撐無人機(jī)的穩(wěn)定工作。此外,這款板卡的存儲溫度范圍在-55℃~75℃,遇到更加極端寒冷的天氣時(shí),不使用也能夠有效抗寒。RK3588屬于旗艦機(jī)芯片,搭載八核64位CPU,主頻高達(dá)2.4GHz。集成ARMMali-G610MP4四核GPU,內(nèi)置AI加速器NPU,可提供6Tops算力,用在電力巡檢領(lǐng)域能夠快速穩(wěn)定處理復(fù)雜的場景,幫助進(jìn)行保供電工作。低延遲圖像處理板哪里有?內(nèi)蒙古圖像處理板技術(shù)含量
多目標(biāo)跟蹤是指在連續(xù)的圖像中,通過目標(biāo)檢測算法識別出每一幀中的目標(biāo),并在時(shí)間上跟蹤它們的位置和狀態(tài)。但目標(biāo)會不斷發(fā)生尺度、形變、遮擋等變化,而且還會有目標(biāo)出現(xiàn)和消失的情況,再加上視頻采集端的相機(jī)所處環(huán)境可能受到外界影響導(dǎo)致抖動(dòng)的情況(例如無人機(jī)高空檢測),就會給多目標(biāo)跟蹤造成一定的困難。由于我們不能控制目標(biāo),所以只能從視頻采集端維護(hù)跟蹤的穩(wěn)定性。因此,成都慧視針對于多目標(biāo)檢測跟蹤抖動(dòng)丟失的優(yōu)化方法是:1.改進(jìn)目標(biāo)檢測,使用更加魯棒的目標(biāo)檢測算法。2.增強(qiáng)特征描述,利用深度學(xué)習(xí)提取更高級別的語義特征,這些特征對于小范圍內(nèi)的視角變化具有更好的不變性3.改進(jìn)運(yùn)動(dòng)模型,在算法中加入對攝像頭運(yùn)動(dòng)的估計(jì),通過補(bǔ)償攝像頭運(yùn)動(dòng)來減小目標(biāo)真實(shí)運(yùn)動(dòng)與預(yù)測之間的差距。4.數(shù)據(jù)關(guān)聯(lián)策略,設(shè)計(jì)更靈活的數(shù)據(jù)關(guān)聯(lián)算法,允許更大的距離閾值來匹配候選目標(biāo)??煽繄D像處理板技術(shù)慧視光電能夠定制CVBS接口的RK3588圖像處理板。
在無人機(jī)攝像頭的基礎(chǔ)上加裝慧視光電開發(fā)的Viztra-LE026圖像處理板,這是一塊輕型化、低功耗的圖像處理板,用在無人機(jī)上面既不會過多占用空間,也不會過多消耗續(xù)航,通過目標(biāo)識別算法的賦能,就可以針對像東北虎這樣的動(dòng)物AI自動(dòng)識別,一旦識別到老虎的特征物體,無人機(jī)就能夠立即鎖定并抵近觀察,為消防和公安提供精確坐標(biāo)。Viztra-LE026圖像處理板采用的是瑞芯微RV1126芯片,能夠輸出2.0TOPS的算力。而在算法方面,成都慧視能夠提供一站式AI算法訓(xùn)練平臺SpeedDP,通過對大量動(dòng)物的標(biāo)注數(shù)據(jù)集的模型訓(xùn)練,能夠?qū)崿F(xiàn)對新數(shù)據(jù)集的快速AI自動(dòng)標(biāo)注,然后提升識別算法的性能。
美國再度要求臺積電停止出口7納米芯片給大陸,目前看來國產(chǎn)AI圖像處理的性能還得由RK3588穩(wěn)坐,不久前傳出了瑞芯微RK3688至少在一兩年內(nèi)無法推出,因此對于許多有高性能AI圖像處理板需求的客戶無需再等了。當(dāng)下,選擇RK3588至少還可以保持性能***兩三年,而在國內(nèi)進(jìn)行RK3588開發(fā)的廠家中,成都慧視憑借多年的豐富經(jīng)驗(yàn),已經(jīng)形成一整套快速的開發(fā)流程,針對于RK3588這樣的高性能圖像處理板,能夠快速定制SDI、CVBS、DVP、Cameralink等接口,滿足不同行業(yè)的需求。并且,隨著不少領(lǐng)域等目標(biāo)跟蹤穩(wěn)定性的進(jìn)一步提升,針對于高幀頻目標(biāo)跟蹤這塊,成都慧視也完成了成熟的方案,通過RK358+FPGA,實(shí)現(xiàn)高幀頻相機(jī)的輸入輸出,為目標(biāo)跟蹤提供更多的細(xì)節(jié)信息?;垡暪怆娔軌蚨ㄖ苖ipi接口的圖像處理板。
這種智慧化的建設(shè)就是采用圖像處理。在無人機(jī)內(nèi)部安裝圖像處理板,這些圖像處理板和相機(jī)、算法的有機(jī)結(jié)合就形成了無人機(jī)的智慧眼,有了這個(gè)智慧眼,無人機(jī)就能夠?qū)σ曇胺秶鷥?nèi)的物體進(jìn)行AI識別,從而自動(dòng)完成避障、巡檢等操作。成都慧視開發(fā)的小型化圖像處理板Viztra-LE026就是專門為無人機(jī)設(shè)計(jì)的一款“智慧眼”處理器。這塊板卡采用了RV1126開發(fā)而成,具備2.0TOPS的算力,外形呈圓形化設(shè)計(jì),整體外觀大小為Ф38mm*12mm,重量只有12g,功耗不高于4W,用在無人機(jī)領(lǐng)域具有功耗低、尺寸小的優(yōu)勢,不會過多占用和消耗無人機(jī)的內(nèi)部空間和續(xù)航?;垡暪怆娔軌蚨ㄖ芁VDS接口的RK3588圖像處理板。內(nèi)蒙古圖像處理板技術(shù)含量
無人機(jī)吊艙智慧化措施。內(nèi)蒙古圖像處理板技術(shù)含量
在許多領(lǐng)域,無人機(jī)的作業(yè)環(huán)境相對復(fù)雜,需要識別處理圖像背景目標(biāo)眾多,這種環(huán)境下,要想實(shí)現(xiàn)更高精度的檢測識別效果,圖像處理板的性能至關(guān)重要。在慧視光電開發(fā)的多款圖像處理板中,Viztra-HE030圖像處理板以6.0TOPS得以勝任。這款板卡采用了瑞芯微旗艦級芯片RK3588,8nmLP制程,搭載八核64位CPU,主頻高達(dá)2.4GHz。集成ARMMali-G610MP4四核GPU,內(nèi)置AI加速器NPU,支持主流的深度學(xué)習(xí)框架。性能強(qiáng)勁的RK3588可為無人機(jī)AI識別的應(yīng)用場景帶來更強(qiáng)大的性能表現(xiàn)。內(nèi)蒙古圖像處理板技術(shù)含量