“啟明935A”系列芯片已經(jīng)成功點(diǎn)亮,并完成各項(xiàng)功能性測(cè)試,達(dá)到車規(guī)級(jí)量產(chǎn)標(biāo)準(zhǔn)。啟明935A是行業(yè)首顆基于Chiplet(芯粒/小芯片)異構(gòu)集成范式的自動(dòng)駕駛芯片,但并非單一芯片,而是一個(gè)家族系列。啟明935HUBChiplet可以和不同數(shù)量的大熊星座AIChiplet互相搭配,再結(jié)合靈活的封裝方式,快速形成不同性能等級(jí)的SoC芯片。它還支持高帶寬的PBLink多芯互連,雙芯雙向帶寬128GB/s,四芯雙向帶寬64GB/s。啟明935A每顆芯片都支持比較大20路的1080p60攝像頭輸入,可應(yīng)用于各類端側(cè)AI部署。得益于大熊星座NPU天然支持Transformer結(jié)構(gòu),初步支持的模型有Yolo系列、ResNet50、PSPNet、PointNet++、TrafficSign_Retinanet、BevDet、miniCPM、Unet_ResNet50、PointPillars、PillarNest、M2track、BevFusion、PaliGemma、LLaMa-3B、8B等等。鳥類識(shí)別的模塊定制。陜西車載輔助圖像識(shí)別模塊
利用圖像處理技術(shù)實(shí)現(xiàn)導(dǎo)彈的遠(yuǎn)程打擊是一項(xiàng)運(yùn)用了比較長(zhǎng)時(shí)間的技術(shù),相比于現(xiàn)代化的電子控制,它具備低受干擾的特點(diǎn),特別是無(wú)人機(jī)在軍備領(lǐng)域的廣泛應(yīng)用,圖像處理的作用重新受到重視。遠(yuǎn)程打擊時(shí),需要對(duì)整個(gè)彈的識(shí)別能力進(jìn)行深度學(xué)習(xí)訓(xùn)練,不斷的訓(xùn)練能夠讓AI更加聰明,讓AI知道該打擊什么,從而提升打擊精度。在前期的試驗(yàn)印證階段,需要進(jìn)行大量反復(fù)的試驗(yàn)訓(xùn)練,通過(guò)在導(dǎo)彈前端植入導(dǎo)引頭,給導(dǎo)彈裝上眼睛,可以實(shí)時(shí)記錄導(dǎo)彈打出后的視頻畫面,然后將大量的視頻數(shù)據(jù)采集到一起用于分析改進(jìn)。成都雙光成像圖像識(shí)別模塊平臺(tái)如何提升識(shí)別算法的性能?
RK3588作為瑞芯微國(guó)產(chǎn)化旗艦級(jí)芯片,用在目標(biāo)跟蹤領(lǐng)域,通常情況下跟蹤幀率都在50Hz左右,這已經(jīng)足夠滿足大多數(shù)應(yīng)用領(lǐng)域的需求。但在許多特殊領(lǐng)域,如軍備、邊防,高幀頻的視頻輸出能夠在極短的時(shí)間內(nèi)捕捉到更多的畫面,實(shí)現(xiàn)高速動(dòng)態(tài)場(chǎng)景的連續(xù)拍攝。高幀頻的目標(biāo)跟蹤則能夠獲得更多的目標(biāo)細(xì)節(jié),便于做出下一步判斷。許多中低端性能的由于算力等因素?zé)o法達(dá)到這樣的需求,但RK3588作為性能怪,6.0TOPS的算力開發(fā)潛力無(wú)限。成都慧視就針對(duì)于這樣的需求場(chǎng)景,在硬件的支持下,定制開發(fā)出能夠支撐100Hz跟蹤算法,從而打造出能夠穩(wěn)定實(shí)現(xiàn)100Hz目標(biāo)跟蹤的整合方案。
此前,九號(hào)電動(dòng)車的自平衡技術(shù)一次次刷新人們的認(rèn)知,而其中一款探索版車型,甚至加入了智能攝像頭,能夠識(shí)別行人、障礙物,自動(dòng)規(guī)劃行駛路線,達(dá)成自動(dòng)駕駛的目的。很多人好奇這種怎么做到的,其實(shí)很簡(jiǎn)單,車輛內(nèi)部攝像頭安裝了具備圖像處理的傳感器。這種傳感器就是圖像處理板,這類AI板卡在目標(biāo)識(shí)別算法的賦能下,就能夠?qū)σ曇胺秶奈矬w進(jìn)行AI分類識(shí)別,從而幫助車輛進(jìn)行避障。像成都慧視開發(fā)的高性能AI圖像處理板Viztra-HE030,采用的是RK3588開發(fā)而成,憑借其工業(yè)級(jí)的性能,6.0TOPS的算力,就能夠在車輛行駛過(guò)程中的復(fù)雜環(huán)境下進(jìn)行周邊環(huán)境的快速AI識(shí)別分類。當(dāng)然,算法的能力也十分關(guān)鍵,由于車輛行駛環(huán)境的不斷變化,算法面臨的識(shí)別畫面也不斷變化,如何精細(xì)的進(jìn)行識(shí)別,關(guān)系到車輛的行駛安全。慧視AI圖像處理板都可以定制哪些接口?

無(wú)人機(jī)在農(nóng)業(yè)領(lǐng)域能夠?qū)崿F(xiàn)高效率的施肥、播種等操作。但是不同的作業(yè)環(huán)境對(duì)于無(wú)人機(jī)的工作性能要求不一樣,同樣的方案在平原地區(qū)適用,在高原地區(qū)就不行。因此針對(duì)于特殊作業(yè)環(huán)境需要制定不同的智慧化方案。像青藏高原這樣地貌復(fù)雜、低氣壓、大溫差的特點(diǎn),參與智能化工作的各個(gè)部件需要符合這樣作業(yè)環(huán)境特點(diǎn)的性能要求。不比平原的一馬平川,高原由于環(huán)境復(fù)雜,地形起伏對(duì)于無(wú)人機(jī)的飛行也需要進(jìn)行控制,無(wú)論是高度還是速度甚至距離都需要進(jìn)行嚴(yán)格限制,防止出現(xiàn)撞機(jī)等事故。因此,這個(gè)方面的智慧化建設(shè)就需要無(wú)人機(jī)具備智能避障的功能,無(wú)人機(jī)需要在高速度或者遠(yuǎn)距離的情況下識(shí)別樹木、電線桿、石頭等障礙物,并能夠?qū)崿F(xiàn)避障。Viztra-HE030是采用RK3588開發(fā)而成的AI識(shí)別模塊。重慶RK3399開發(fā)板圖像識(shí)別模塊算法定制
導(dǎo)引頭智慧眼哪里有?陜西車載輔助圖像識(shí)別模塊
要打造更加智能化的邊海防無(wú)人機(jī)巡邏,則可以在光電吊艙中植入高性能的圖像處理板,通過(guò)目標(biāo)識(shí)別、檢測(cè)算法的賦能,就能夠讓無(wú)人機(jī)實(shí)現(xiàn)目標(biāo)識(shí)別檢測(cè)、目標(biāo)鎖定跟蹤等功能。為了進(jìn)行有效結(jié)合,成都慧視開發(fā)了多塊高性能的具備圖像處理能力的光電吊艙。例如慧視VIZ-100T三軸三光目標(biāo)定位吊艙,集10倍光學(xué)變倍可見光相機(jī)、640×512高分辨率紅外相機(jī)、測(cè)程1.2km半導(dǎo)體激光測(cè)距機(jī)于一體,在邊海防巡邏時(shí)能夠晝夜成像工作。三軸高穩(wěn)定精度平臺(tái)框架能夠有效保障畫面的清晰穩(wěn)定,并對(duì)目標(biāo)點(diǎn)位的定位。吊艙內(nèi)置我司自主開發(fā)的高性能AI圖像處理板Viztra-HE030,該板卡采用瑞芯微旗艦級(jí)芯片RK3588,能夠在算法的作用下實(shí)現(xiàn)高空目標(biāo)識(shí)別檢測(cè)、鎖定跟蹤人、車、船等目標(biāo),再通過(guò)和地面巡邏人員協(xié)調(diào)統(tǒng)一,就能夠打造邊海防的智能化體系。陜西車載輔助圖像識(shí)別模塊