實現(xiàn)這些功能的技術(shù)中,圖像處理基于AI圖像處理板這一傳感器。板卡具備快速圖像處理識別的硬件能力,植入相應(yīng)的AI算法,無人機就相當(dāng)于裝上了“智慧眼”,而且這個“智慧眼”居于高空,能夠在一個定點,俯瞰大范圍,實時監(jiān)控貨物的存放狀態(tài)。遠程控制技術(shù)基于網(wǎng)絡(luò)通信,通過和圖像處理板的結(jié)合,能夠?qū)崿F(xiàn)低延時低帶寬的圖像傳輸處理。在實際落地應(yīng)用中,可以采用成都慧視開發(fā)的高性能圖像處理板,其中RV1126系列的Viztra-LE026圖像處理板,就是無人機的完美搭子。這款圖像處理板具備2.0TOPS的算力,能夠根據(jù)無人機型號進行接口定制,整體尺寸在40mm×40mm×10mm左右(核心板+接口板),小巧的外形即便是小型無人機也能夠裝上。此外,板卡整體功耗在4W左右,不會過多增加無人機的負擔(dān)。鳥類識別的模塊定制。上??焖倌繕?biāo)識別供應(yīng)商
長時間一直進行這樣的圖像標(biāo)注工作,那無疑是枯燥而乏味的,手酸不說,更多的是精神上的折磨,進而效率大打折扣。但這又是算法提升的必要途徑,無法跳過,當(dāng)項目緊急時,甚至需要多人加班加點趕進度。這樣的痛苦現(xiàn)狀急需改變!慧視光電的算法工程師為了提高這一的效率,開發(fā)了一個深度學(xué)習(xí)算法開發(fā)平臺SpeedDP。它的基本邏輯是基于一個手動標(biāo)注一定量的數(shù)據(jù)集進行訓(xùn)練,形成一個可用的預(yù)選模型(如果已有模型可以直接使用),然后訓(xùn)練一定階段后,可以評估此模型的能力,如果能夠滿足使用就可以對相同目標(biāo)的新數(shù)據(jù)集(未進行任何標(biāo)注)進行AI自動化標(biāo)注。這一過程的省去了大量需要對新數(shù)據(jù)集的手動拉框工作,同時也在不斷反哺此模型算法,幫助提升性能。黑龍江高效目標(biāo)識別Viztra-HE030是采用RK3588開發(fā)而成的AI識別模塊。
瑞芯微推出的RK3588系列圖像處理板作為國產(chǎn)化板卡的性能前列,成為了各領(lǐng)域研究開發(fā)的優(yōu)先,它能在諸多行業(yè)實現(xiàn)目標(biāo)檢測、識別以及跟蹤等功能,具有重要的研究開發(fā)價值。特別是對于高校而言,將RK3588作為課題進行研究開發(fā),是一個不錯的選擇。但是在這些功能實現(xiàn)過程中,算法的能力就十分重要,如何讓算法更加精細的識別檢測例如人、車、船等目標(biāo)成為首要解決的問題。要想讓AI算法更能精確的識別檢測目標(biāo),可以利用AI的深度學(xué)習(xí)能力,讓AI不斷學(xué)習(xí)這些目標(biāo)的特征,從而達到精細識別的能力。這個過程,可以通過大量的數(shù)據(jù)標(biāo)注,來訓(xùn)練AI。但大量待標(biāo)注工作,常常讓開發(fā)者頭疼。如果采用傳統(tǒng)方式用人工挨個挨幀標(biāo)注,將會耗費大量時間精力,讓成本不可控。
無人機能夠通過高空拍攝快速獲取大范圍、多角度的地面信息。但是傳統(tǒng)的攝像頭只能獲取視頻數(shù)據(jù),對于許多需要進行數(shù)據(jù)分析的行業(yè)來說顯然不夠智能化,從無人機視頻數(shù)據(jù)中快速獲取提煉大量有價值的信息,不僅能夠提升工作效率,還能夠減少不小的成本支出。這就是無人機的AI識別能力。通過識別算法,在無人機工作時就對目標(biāo)范圍進行AI檢測識別,從而提煉所需信息。這就需要對無人機進行智能化改造,可以在傳統(tǒng)無人機吊艙中植入成都慧視開發(fā)的高性能AI圖像處理板,如利用RK3588深度開發(fā)而成的Viztra-HE030圖像處理板,6.0TOPS的算力能夠快速處理無人機識別到的復(fù)雜畫面信息,這樣就有了硬件基礎(chǔ),剩下的就需要對自身算法進行不斷優(yōu)化提升。導(dǎo)引頭智慧眼哪里有?
“啟明935A”系列芯片已經(jīng)成功點亮,并完成各項功能性測試,達到車規(guī)級量產(chǎn)標(biāo)準。啟明935A是行業(yè)首顆基于Chiplet(芯粒/小芯片)異構(gòu)集成范式的自動駕駛芯片,但并非單一芯片,而是一個家族系列。啟明935HUBChiplet可以和不同數(shù)量的大熊星座AIChiplet互相搭配,再結(jié)合靈活的封裝方式,快速形成不同性能等級的SoC芯片。它還支持高帶寬的PBLink多芯互連,雙芯雙向帶寬128GB/s,四芯雙向帶寬64GB/s。啟明935A每顆芯片都支持比較大20路的1080p60攝像頭輸入,可應(yīng)用于各類端側(cè)AI部署。得益于大熊星座NPU天然支持Transformer結(jié)構(gòu),初步支持的模型有Yolo系列、ResNet50、PSPNet、PointNet++、TrafficSign_Retinanet、BevDet、miniCPM、Unet_ResNet50、PointPillars、PillarNest、M2track、BevFusion、PaliGemma、LLaMa-3B、8B等等。AI識別怎么選擇合適的模塊?江西移動目標(biāo)識別遠程協(xié)助
各類船只識別的模塊定制。上??焖倌繕?biāo)識別供應(yīng)商
無人機追逐識別可以用在許多領(lǐng)域,如軍備、安防。通過專業(yè)傳感器設(shè)備的植入,讓攝像頭智能化,就可以對無人機進行追蹤識別。成都慧視作為一家深耕圖像處理領(lǐng)域的企業(yè),在這方面也有著豐富的解決經(jīng)驗。在硬件領(lǐng)域,我們能夠定制開發(fā)不同接口的圖像處理板,如CVBS、SDI、LVDS、DVP、USB、Cameralink等,只要您提出需求,我們就能通過應(yīng)用場景需要定制合適的接口。這是進行無人機識別的基礎(chǔ)條件。目前,成都慧視能夠提供不同等級算力的圖像處理板,RV1126、RK3399Pro、RK3588等系列,滿足多場景、廣領(lǐng)域。上??焖倌繕?biāo)識別供應(yīng)商