首先攝像機(jī)采用的是可見(jiàn)光高清攝像機(jī),具備1920*1080的分辨率,系統(tǒng)視場(chǎng)31.11°×17.8°,其中搜索視場(chǎng)15.8°×15.8°(1080P像素)。而圖像處理則采用慧視開(kāi)發(fā)的RV1126高性能圖像處理板,之所以采用這塊板卡,一方面得益于其低功耗、微型外觀的設(shè)計(jì),非常契合“智慧眼”這樣對(duì)于空間要求嚴(yán)格的應(yīng)用場(chǎng)景;另一方面RV1126具備2.0TOPS的算力,在國(guó)產(chǎn)化方面也十分完整,安全性十足。兩者結(jié)合,就能夠形成重量不超過(guò)100g的“智慧眼”。在算法的作用下,能夠達(dá)到≥50Hz的跟蹤幀率,≥25Hz的檢測(cè)幀率,實(shí)現(xiàn)捕獲4m*4m目標(biāo)超過(guò)800m、6m*6m目標(biāo)超過(guò)1000m。這就是“機(jī)器狼”的智慧化措施,通過(guò)一個(gè)“小小的”“智慧眼”的加入,便能夠讓其實(shí)現(xiàn)許多自動(dòng)化任務(wù)。隨著技術(shù)的不斷發(fā)展,“機(jī)器狼”的形態(tài)將會(huì)不斷進(jìn)步,滿足更多多樣化需求。慧視光電能夠根據(jù)需求定制RK3588系列圖像處理板。海南流暢圖像處理板
這樣的無(wú)人機(jī)智慧“眼”可以通過(guò)搭載吊艙實(shí)現(xiàn),吊艙內(nèi)置各種規(guī)格的攝像機(jī),能夠?qū)崿F(xiàn)多角度觀察。而智能化則可以在吊艙的基礎(chǔ)上植入高性能AI圖像處理板。圖像處理板能夠?qū)z像機(jī)獲取的圖像進(jìn)行AI智能分析,這樣無(wú)人機(jī)就能夠自動(dòng)識(shí)別缺陷,然后進(jìn)行信息留存、回傳。在這個(gè)領(lǐng)域,成都慧視光電可以根據(jù)需求進(jìn)行多接口圖像處理板的定制,選擇成都慧視開(kāi)發(fā)的RK3588系列圖像處理板,支持選擇SDI、CVBS、LVDS、USB、cameralink等接口。RK3588擁有6.0TOPS的算力,能夠在各種復(fù)雜環(huán)境進(jìn)行穩(wěn)定工作。板卡和識(shí)別算法的強(qiáng)強(qiáng)聯(lián)合下,無(wú)論白天黑夜,無(wú)人機(jī)都可以實(shí)現(xiàn)自助巡檢,就不需要過(guò)多的人工參與。也是一種降本增效的舉措。海南流暢圖像處理板低延遲圖像處理板哪里有?
多目標(biāo)跟蹤是指在連續(xù)的圖像中,通過(guò)目標(biāo)檢測(cè)算法識(shí)別出每一幀中的目標(biāo),并在時(shí)間上跟蹤它們的位置和狀態(tài)。但目標(biāo)會(huì)不斷發(fā)生尺度、形變、遮擋等變化,而且還會(huì)有目標(biāo)出現(xiàn)和消失的情況,再加上視頻采集端的相機(jī)所處環(huán)境可能受到外界影響導(dǎo)致抖動(dòng)的情況(例如無(wú)人機(jī)高空檢測(cè)),就會(huì)給多目標(biāo)跟蹤造成一定的困難。由于我們不能控制目標(biāo),所以只能從視頻采集端維護(hù)跟蹤的穩(wěn)定性。因此,成都慧視針對(duì)于多目標(biāo)檢測(cè)跟蹤抖動(dòng)丟失的優(yōu)化方法是:1.改進(jìn)目標(biāo)檢測(cè),使用更加魯棒的目標(biāo)檢測(cè)算法。2.增強(qiáng)特征描述,利用深度學(xué)習(xí)提取更高級(jí)別的語(yǔ)義特征,這些特征對(duì)于小范圍內(nèi)的視角變化具有更好的不變性3.改進(jìn)運(yùn)動(dòng)模型,在算法中加入對(duì)攝像頭運(yùn)動(dòng)的估計(jì),通過(guò)補(bǔ)償攝像頭運(yùn)動(dòng)來(lái)減小目標(biāo)真實(shí)運(yùn)動(dòng)與預(yù)測(cè)之間的差距。4.數(shù)據(jù)關(guān)聯(lián)策略,設(shè)計(jì)更靈活的數(shù)據(jù)關(guān)聯(lián)算法,允許更大的距離閾值來(lái)匹配候選目標(biāo)。
SpeedDP作為一個(gè)服務(wù)型AI平臺(tái),它能提供從數(shù)據(jù)標(biāo)注、模型訓(xùn)練、測(cè)試驗(yàn)證到RockChip嵌入式硬件平臺(tái)模型部署的可視化AI開(kāi)發(fā)功能。平臺(tái)所需算法并不是固定的,使用者可以根據(jù)自身實(shí)際應(yīng)用場(chǎng)景進(jìn)行AI算法的定制化開(kāi)發(fā),例如平臺(tái)經(jīng)過(guò)不斷的迭代,目前能夠支持YOLOv8系列算法進(jìn)行圖像標(biāo)注。SpeedDP這個(gè)平臺(tái)使用起來(lái)十分簡(jiǎn)便,在圖像標(biāo)注領(lǐng)域其基本使用方法是:1.首先有一個(gè)比較好的預(yù)選模型2.用這個(gè)預(yù)選模型做自動(dòng)標(biāo)注3.后期人工審核修正成都慧視能夠定制RK3588芯片的圖像處理板。
RK3588作為瑞芯微旗艦級(jí)芯片,工業(yè)級(jí)的算力受到了很多領(lǐng)域的青睞,但是由于前端相機(jī)的選擇不同,并不是每塊RK3588的圖像處理板都可以直接拿來(lái)使用,需要的是根據(jù)相機(jī)接口和應(yīng)用場(chǎng)景進(jìn)行深度定制。成都慧視光電技術(shù)有限公司就有這樣的快速集成定制的能力。作為擁有多年圖像處理板開(kāi)發(fā)經(jīng)驗(yàn)的團(tuán)隊(duì),成都慧視能夠快速定制SDI、CVBS、CAMERALINK、USB、LVDS、DVP等豐富接口的RK3588系列圖像處理板,并能夠根據(jù)應(yīng)用環(huán)境定制外殼、散熱器等?;垡暪怆娔軌蚨ㄖ芻amera link接口的RK3588圖像處理板。青海視頻圖像處理板
慧視光電能夠定制LVDS接口的圖像處理板。海南流暢圖像處理板
瑞芯微推出的RK3588系列圖像處理板作為國(guó)產(chǎn)化板卡的性能前列,成為了各領(lǐng)域研究開(kāi)發(fā)的優(yōu)先,它能在諸多行業(yè)實(shí)現(xiàn)目標(biāo)檢測(cè)、識(shí)別以及跟蹤等功能,具有重要的研究開(kāi)發(fā)價(jià)值。特別是對(duì)于高校而言,將RK3588作為課題進(jìn)行研究開(kāi)發(fā),是一個(gè)不錯(cuò)的選擇。但是在這些功能實(shí)現(xiàn)過(guò)程中,算法的能力就十分重要,如何讓算法更加精細(xì)的識(shí)別檢測(cè)例如人、車、船等目標(biāo)成為首要解決的問(wèn)題。要想讓AI算法更能精確的識(shí)別檢測(cè)目標(biāo),可以利用AI的深度學(xué)習(xí)能力,讓AI不斷學(xué)習(xí)這些目標(biāo)的特征,從而達(dá)到精細(xì)識(shí)別的能力。這個(gè)過(guò)程,可以通過(guò)大量的數(shù)據(jù)標(biāo)注,來(lái)訓(xùn)練AI。但大量待標(biāo)注工作,常常讓開(kāi)發(fā)者頭疼。如果采用傳統(tǒng)方式用人工挨個(gè)挨幀標(biāo)注,將會(huì)耗費(fèi)大量時(shí)間精力,讓成本不可控。海南流暢圖像處理板