慧視光電開發的Viztra-HE030圖像處理板采用了工業級芯片RK3588,內部植入公司自主研發的智能圖像算法,架構更先進,核心數8核(4大4小),算力6.0TOPS,支持豐富的輸出接口,同時支持H264、H265兩類視頻編碼。可實時對目標進行識別或者人為的的鎖定,同時可以根據輸出目標的靶量信息,對目標進行實時跟蹤。這是達成目的的硬件條件。在算法領域,則需要一些特殊的算法。無人機執行任務時飛在高空,地面的物體就會顯得較小,小目標通常指圖像中像素面積小于32*32的物體,一般的AI算法難以實現精細鎖定跟蹤。RK3588小而輕,非常適合無人機吊艙。河南RV1126主板圖像識別模塊算法定制
機器人是AI落地應用的一個很重要載體,AI賦能的機器人能夠在安防巡檢、自動化作業、應急救援等領域發揮重要作用。在電力巡檢當中,傳統的模式需要人工一步一步走出來,面對假設在各種環境中的輸電線,這種模式弊端重重,費時費力。而常年經受風吹雨曬的輸電線,在使用久了之后,難免會出現電力設備損壞缺失等問題,AI賦能下的機器人的出現,為這項行業的工作效率的提升提供了新思路。巡檢機器人內置可見光和紅外攝像頭,能夠實現晝夜巡檢,然后再內置高性能的AI圖像處理板,就能夠運用AI識別、多機協同、數字孿生、巡檢監控等技術,實現自動巡視、缺陷和表計自動識別和告警、巡視報表自動生成和發送等功能,實現場站式巡檢場景的全息感知和全域決策輔助。吉林RK3399Pro開發板圖像識別模塊軟件開發工程師以RK3588核心板為基礎進行定制開發,讓攝像頭更加智能高效,能夠輸出高清流的圖像視頻。
水上交通是我國內陸運輸的一大命脈,尤其是長江沿岸,從長江一路向東走向世界是比較經濟的運輸模式,為了保障水路運輸的通暢,維護通航秩序,就需要相關部門對航道進行定期巡航,保障水上交通安全。傳統的航道巡查采用的是人工巡檢,每段航道每個航標都要靠人力驅動船只到達目標區域進行巡查,這種模式不僅效率低下,遇到極端天氣時,還會出現視野受阻、爬標困難等問題,甚至可能對巡檢人員人身安全造成威脅。如今,隨著無人機的使用,整個流程變得更加簡潔高效,以前需要1條船、6個人做的工作,現在只需要1臺電腦、1名工作人員就可以完成。
要解決這個難題,慧視光電的算法工程師給出了小目標識別算法的方案,通過加強目標特征、數據增廣、放大輸入圖像、使用高分辨率的特征、設計合適的標簽分配方法,以讓小目標有更多的正樣本、利用小目標所處的環境信息或者其他容易檢測的物體之間的關系來輔助小目標的檢測。此外,利用自研的深度學習算法開發平臺,通過不斷的深度學習,能夠讓AI更加精細的識別目標。這個方法在瑞芯微RK3588、RV1126、RK3399pro等系列圖像跟蹤板上得到了較好地驗證。因此,將這個算法用在無人機高空識別領域,完全能夠彌補傳統算法的不足,達到更加穩定鎖定跟蹤的目的。無人機小吊艙可以采用慧視圖像處理板實現遠程目標鎖定。
無人機搭載如光電吊艙等帶有攝像頭的設備后,達到了實現智能識別的硬件條件,但是傳統的攝像頭只能獲取圖像,并不具備AI識別的功能。無人機AI識別算法的關鍵還是在于模仿人眼一樣進行視覺處理,然后AI進行智能提取和分析圖像,再和訓練模型進行快速比對,從而在無人機快速飛行的過程中做到實時目標識別。要想實現目標識別需要的硬件支持就是AI圖像處理板。圖像處理板通過算法的賦能,就能夠對目標區域的物體進行AI識別分析,從而做出判斷。由于無人機作業的環境復雜,因此對于圖像處理板的要求需要進一步提升。成都慧視開發的Viztra-HE030圖像處理板,采用了工業級芯片RK3588,采用先進架構,8核(4大4小)處理,算力能夠達到6.0TOPS。同時,慧視光電能夠根據需求環境定制豐富的輸出接口。RK3399圖像處理板識別概率超過85%。吉林RK3399Pro開發板圖像識別模塊軟件開發
RV1126圖像處理板能夠用于工地安全監控。河南RV1126主板圖像識別模塊算法定制
橋梁助航標志的正常顯示有助于引導船舶正常航行,防止出現撞上大橋等事故的發生。因此需要定期定時對水上標志進行檢查,尤其是夜間。由于傳統的人工巡檢模式存在局限性和檢查盲區,巡查范圍不夠細致、作業效率低下、執法人員存在人身安全隱患等問題,逐漸被逐步淘汰,取而代之的是無人機搭載吊艙后實行遠程定期巡檢。無人機搭載慧視光電開發的慧視VIZ-YWT201微型雙光吊艙集成了可見光攝像機、紅外熱像儀等傳感器,能夠實現晝夜成像,內置成都慧視自研全國產化RV1126圖像跟蹤板,搭載自研AI跟蹤算法,重量280g,能夠對橋梁上助航標志進行位置、顏色、結構的晝夜觀察識別,輔助上報目標的圖像及坐標信息。河南RV1126主板圖像識別模塊算法定制