在如今的作業(yè)中，無(wú)人機(jī)路面巡查替代傳統(tǒng)的人工巡查，展現(xiàn)出巨大的效率優(yōu)勢(shì)。像高速施工工地這樣的環(huán)境下，施工方為了保障施工安全，就需要對(duì)施工范圍進(jìn)行嚴(yán)格管控，傳統(tǒng)的人工巡查效率低，受限于地形、時(shí)間等問(wèn)題，容易出現(xiàn)盲點(diǎn)。相比人工，利用無(wú)人機(jī)進(jìn)行AI識(shí)別則可以逐幀圖像監(jiān)測(cè)，即便是夜晚也能夠利用紅外傳感器進(jìn)行數(shù)據(jù)收集，幾乎不會(huì)遺漏任何信息。而交通管理部門(mén)，則可以利用無(wú)人機(jī)快速到底事故地點(diǎn)進(jìn)行疏導(dǎo)，緩解交通壓力。成都慧視開(kāi)發(fā)的Viztra-HE030圖像處理板擁有6.0TOPS的算力。陜西智慧工業(yè)圖像識(shí)別模塊技術(shù)

多目標(biāo)跟蹤是指在連續(xù)的圖像中，通過(guò)目標(biāo)檢測(cè)算法識(shí)別出每一幀中的目標(biāo)，并在時(shí)間上跟蹤它們的位置和狀態(tài)。但目標(biāo)會(huì)不斷發(fā)生尺度、形變、遮擋等變化，而且還會(huì)有目標(biāo)出現(xiàn)和消失的情況，再加上視頻采集端的相機(jī)所處環(huán)境可能受到外界影響導(dǎo)致抖動(dòng)的情況（例如無(wú)人機(jī)高空檢測(cè)），就會(huì)給多目標(biāo)跟蹤造成一定的困難。由于我們不能控制目標(biāo)，所以只能從視頻采集端維護(hù)跟蹤的穩(wěn)定性。因此，成都慧視針對(duì)于多目標(biāo)檢測(cè)跟蹤抖動(dòng)丟失的優(yōu)化方法是：1.改進(jìn)目標(biāo)檢測(cè),使用更加魯棒的目標(biāo)檢測(cè)算法。2.增強(qiáng)特征描述，利用深度學(xué)習(xí)提取更高級(jí)別的語(yǔ)義特征，這些特征對(duì)于小范圍內(nèi)的視角變化具有更好的不變性3.改進(jìn)運(yùn)動(dòng)模型，在算法中加入對(duì)攝像頭運(yùn)動(dòng)的估計(jì)，通過(guò)補(bǔ)償攝像頭運(yùn)動(dòng)來(lái)減小目標(biāo)真實(shí)運(yùn)動(dòng)與預(yù)測(cè)之間的差距。4.數(shù)據(jù)關(guān)聯(lián)策略，設(shè)計(jì)更靈活的數(shù)據(jù)關(guān)聯(lián)算法，允許更大的距離閾值來(lái)匹配候選目標(biāo)。湖北人臉識(shí)別圖像識(shí)別模塊AI智能越高性能的圖像處理板越能處理復(fù)雜的場(chǎng)景。

無(wú)人裝備作戰(zhàn)狼群，有“狼”負(fù)責(zé)偵查，有“狼”負(fù)責(zé)打擊，而有的“狼”則負(fù)責(zé)后勤保障，這種無(wú)人裝備集群作戰(zhàn)能夠有效輔助特種作戰(zhàn)。“機(jī)器狼”的升級(jí)之所以能夠滿足多樣化的任務(wù)，得益于其智能化的建設(shè)。就是下面這樣的一個(gè)"智慧眼"的加入，使得機(jī)器狼能夠自主完成許多任務(wù)。這個(gè)智慧眼由光學(xué)系統(tǒng)（彩色圖像）、攝像機(jī)、圖像處理、電源系統(tǒng)及機(jī)械結(jié)構(gòu)組成，然后在外面加上外殼，形成一個(gè)整體。而拆分來(lái)看，產(chǎn)品主要就由高清攝像機(jī)和高性能的圖像處理板組成。

無(wú)人機(jī)夜間工作時(shí)需要依靠紅外機(jī)芯進(jìn)行高清成像，而想要具備AI檢測(cè)識(shí)別的能力則可以通過(guò)植入圖像處理板。成都慧視可以根據(jù)需求提供整套的建設(shè)方案，實(shí)現(xiàn)快速集成開(kāi)發(fā)。慧視Viztra-LE026圖像處理板+MiNO?17紅外機(jī)芯的組合方案，兩款產(chǎn)品均使用小巧設(shè)計(jì)，整體組合重量在30g左右，并且都采用小功耗設(shè)計(jì)，用在無(wú)人機(jī)領(lǐng)域不會(huì)過(guò)多增加負(fù)擔(dān)。在算法的賦能下，能夠?qū)崿F(xiàn)穩(wěn)定的目標(biāo)檢測(cè)識(shí)別。Viztra-LE026圖像處理板重量在10g左右，采用了瑞芯微全國(guó)產(chǎn)化芯片RV1126，能夠輸出2.0TOPS的算力，功耗不高于4W。能夠以30Hz幀率跟蹤像素2*2的目標(biāo)，能夠識(shí)別像素為12*12的目標(biāo)，且識(shí)別率高于85%。而MiNO?17紅外機(jī)芯重量在20g左右（凈重5g（不含鏡頭）），像素分辨率為640*512，采用9/13/25mm三種定焦設(shè)計(jì)，支持18中偽彩選擇，功耗小于0.75W。高幀頻視頻接入接口定制可以找慧視定制。

但這也遇到很多難點(diǎn)，通常情況下，視頻回傳的延遲大概在200ms左右，隨著大量的彈打出，視頻傳輸所需帶寬就面臨壓力，如何在通信帶寬有限的情況下，保證視頻順暢、清晰、無(wú)卡頓地傳輸，是分析改進(jìn)這個(gè)工作需要解決的前期難點(diǎn)。針對(duì)于這個(gè)問(wèn)題，慧視光電利用GS弱網(wǎng)高清音視頻傳輸系統(tǒng)和RK3588打造的Viztra-HE030圖像處理板結(jié)合，推出了低延遲低帶寬圖傳解決方案。在一個(gè)窄帶收發(fā)信道內(nèi)，例如在信道有效帶寬0.5Mb/s~2Mb/s內(nèi)，多路視頻和交互控制共用一對(duì)收發(fā)信道，信道支持?jǐn)?shù)據(jù)透?jìng)鳎獠肯到y(tǒng)可以使用該信道，傳輸任意格式的數(shù)據(jù)；可實(shí)時(shí)調(diào)整視頻碼率，在低至500K帶寬情況下依然可以回傳清晰流暢的圖像。可以使設(shè)備飛的更遠(yuǎn)、走的更遠(yuǎn);可實(shí)現(xiàn)視頻中繼轉(zhuǎn)發(fā)；能夠基于H265實(shí)時(shí)視頻編碼；可實(shí)現(xiàn)基于視頻流的“人在回路低延遲控制”。基于普通60幀相機(jī)，實(shí)現(xiàn)15ms的低延遲編解碼，加上數(shù)據(jù)鏈傳輸延遲時(shí)間在30ms左右，目前業(yè)界前列。通用性強(qiáng)，使用更加靈活，適用更多應(yīng)用場(chǎng)景；支持多路SDI視頻在低至500K帶寬情況下的同時(shí)傳輸（1080P60FPS），徹底解決“帶寬苦惱”；整體時(shí)延約60ms（含相機(jī)、編解碼、顯示，不含傳輸），實(shí)現(xiàn)實(shí)時(shí)控制、實(shí)時(shí)打擊。 利用AI算法實(shí)現(xiàn)圖像的精確識(shí)別。四川圖像識(shí)別模塊專業(yè)團(tuán)隊(duì)

如何提升目標(biāo)識(shí)別的精度？陜西智慧工業(yè)圖像識(shí)別模塊技術(shù)

無(wú)人機(jī)用于目標(biāo)識(shí)別跟蹤具有靈活便捷的優(yōu)勢(shì)，從高空俯瞰，視野也很廣闊，但是如果飛行高度越高，就會(huì)造成視覺(jué)上地面目標(biāo)變小的情況，這時(shí)候如果無(wú)人機(jī)所攜帶的攝像頭像素不足，則容易跟丟目標(biāo)。這個(gè)難點(diǎn)采用成都慧視光電的AI圖像處理板可以有效解決。慧視AI目標(biāo)跟蹤基于我司開(kāi)發(fā)的瑞芯微高性能AI圖像處理板，搭配自研的目標(biāo)識(shí)別、跟蹤算法，將這一套整合植入吊艙中，就能夠?qū)μ囟繕?biāo)進(jìn)行鎖定跟蹤，即便是無(wú)人機(jī)飛行高度的變化，肉眼很難辨別目標(biāo)時(shí)，也不會(huì)丟失跟蹤目標(biāo)。陜西智慧工業(yè)圖像識(shí)別模塊技術(shù)