多目標(biāo)跟蹤是指在連續(xù)的圖像中,通過目標(biāo)檢測算法識別出每一幀中的目標(biāo),并在時間上跟蹤它們的位置和狀態(tài)。但目標(biāo)會不斷發(fā)生尺度、形變、遮擋等變化,而且還會有目標(biāo)出現(xiàn)和消失的情況,再加上視頻采集端的相機(jī)所處環(huán)境可能受到外界影響導(dǎo)致抖動的情況(例如無人機(jī)高空檢測),就會給多目標(biāo)跟蹤造成一定的困難。由于我們不能控制目標(biāo),所以只能從視頻采集端維護(hù)跟蹤的穩(wěn)定性。因此,成都慧視針對于多目標(biāo)檢測跟蹤抖動丟失的優(yōu)化方法是:1.改進(jìn)目標(biāo)檢測,使用更加魯棒的目標(biāo)檢測算法。2.增強(qiáng)特征描述,利用深度學(xué)習(xí)提取更高級別的語義特征,這些特征對于小范圍內(nèi)的視角變化具有更好的不變性3.改進(jìn)運(yùn)動模型,在算法中加入對攝像頭運(yùn)動的估計,通過補(bǔ)償攝像頭運(yùn)動來減小目標(biāo)真實運(yùn)動與預(yù)測之間的差距。4.數(shù)據(jù)關(guān)聯(lián)策略,設(shè)計更靈活的數(shù)據(jù)關(guān)聯(lián)算法,允許更大的距離閾值來匹配候選目標(biāo)。HDMI相機(jī)目標(biāo)識別用圖像處理板。福建目標(biāo)識別軟件
RK3588作為瑞芯微國產(chǎn)化旗艦級芯片,用在目標(biāo)跟蹤領(lǐng)域,通常情況下跟蹤幀率都在50Hz左右,這已經(jīng)足夠滿足大多數(shù)應(yīng)用領(lǐng)域的需求。但在許多特殊領(lǐng)域,如軍備、邊防,高幀頻的視頻輸出能夠在極短的時間內(nèi)捕捉到更多的畫面,實現(xiàn)高速動態(tài)場景的連續(xù)拍攝。高幀頻的目標(biāo)跟蹤則能夠獲得更多的目標(biāo)細(xì)節(jié),便于做出下一步判斷。許多中低端性能的由于算力等因素?zé)o法達(dá)到這樣的需求,但RK3588作為性能怪,6.0TOPS的算力開發(fā)潛力無限。成都慧視就針對于這樣的需求場景,在硬件的支持下,定制開發(fā)出能夠支撐100Hz跟蹤算法,從而打造出能夠穩(wěn)定實現(xiàn)100Hz目標(biāo)跟蹤的整合方案。福建目標(biāo)識別軟件Viztra-LE034是采用RV1126開發(fā)而成的AI識別模塊。
經(jīng)過算法的不斷升級驗證,Viztra-LE026圖像處理板能夠以30Hz的幀率跟蹤像素為2*2的目標(biāo),能夠識別**小像素為12*12的目標(biāo),整個延遲不高于100ms,識別精度能夠大于85%。無人機(jī)作業(yè),續(xù)航是使用者首要考慮的。Viztra-LE026的設(shè)計正是考慮了這項因素,首先重量上就不會給無人機(jī)增加過多負(fù)擔(dān),尺寸方面也無需過多空間,低于4W的功耗對于整個無人機(jī)的續(xù)航影響也是微乎其微。綜合這些特點(diǎn),可見Viztra-LE026圖像處理板和無人機(jī)的完美契合,將是各領(lǐng)域打造智能無人機(jī)的得力助手。
而維修機(jī)器人則能夠通過圖像識別、精細(xì)遠(yuǎn)程控制技術(shù),實現(xiàn)遠(yuǎn)程快速維修,通過加裝高性能圖像處理板,機(jī)器人能夠精細(xì)電網(wǎng)缺陷以及損壞程度,并通過攝像頭實時回傳高清畫面,工程師只需要遠(yuǎn)程操控機(jī)器人進(jìn)行修補(bǔ),實現(xiàn)精細(xì)縫合。整個過程只需要極少數(shù)的人員參與,整個巡檢維修的時間能夠從7小時縮減到1小時,極大地保障了電力供應(yīng)。成都慧視光電采用RK3588開發(fā)而成的Viztra-HE030圖像處理板,具備八核處理器,采用BTB傳輸接口,擁有極強(qiáng)傳輸能力,成都慧視能夠憑借豐富的經(jīng)驗,快速集成開發(fā)SDI、CVBS、DVP、LVDS、cameralink等接口以及金屬外殼和散熱器。通過6.0TOPS的算力,以及豐富的接口定制,板卡能夠快速適配不同的無人機(jī)和機(jī)器人,用在我國西部電力運(yùn)維領(lǐng)域,將是工程師打造智能化維護(hù)的關(guān)鍵技術(shù)。如何打造一個完整的目標(biāo)識別方案?
東北虎作為生活在我國東北地區(qū)的保護(hù)動物,時不時會闖入居民區(qū),給居民生命安全造成威脅,此前不就黑龍江七臺河市勃利縣一村落就出現(xiàn)了東北虎傷人事件,傷人后東北虎不知去向,消防和公安緊急尋找。值得關(guān)注的是,公安采用了無人機(jī)進(jìn)行巡查,這種方式不僅比傳統(tǒng)的地毯式搜索效率更高,而且面對東北虎這樣危險的生物,安全性也更高。但是傳統(tǒng)的無人機(jī)需要手動操控觀察,同樣費(fèi)時費(fèi)力,想要更進(jìn)一步提升效率,則可以通過無人機(jī)智能化建設(shè)實現(xiàn)。成都慧視定制的RK3588系列AI識別模塊能夠快速集成于無人機(jī)吊艙中。上海企業(yè)目標(biāo)識別經(jīng)驗豐富
鳥類識別的模塊定制。福建目標(biāo)識別軟件
目前,采用圖像識別技術(shù)來實現(xiàn)無人機(jī)規(guī)避其他障礙物是一個有效的方法。通過在無人機(jī)上植入圖像識別模塊,這個模塊由圖像處理板和相機(jī)組合而成,通過算法的賦能,就能針對不同物體實現(xiàn)快速AI識別,然后實現(xiàn)規(guī)避。而在圖像處理板的選擇上,成都慧視開發(fā)的Viztra-LE026圖像處理板就十分合適。這塊板卡采用了RV1126開發(fā)設(shè)計而成,外形呈圓形,體積小巧,尺寸為Ф38mm*12mm,重量只有12g,用在無人機(jī)上不會過多占用空間。此外,該板卡功耗≤4W,也不會增加無人機(jī)的續(xù)航負(fù)擔(dān)。福建目標(biāo)識別軟件