此前，九號(hào)電動(dòng)車的自平衡技術(shù)一次次刷新人們的認(rèn)知，而其中一款探索版車型，甚至加入了智能攝像頭，能夠識(shí)別行人、障礙物，自動(dòng)規(guī)劃行駛路線，達(dá)成自動(dòng)駕駛的目的。很多人好奇這種怎么做到的，其實(shí)很簡(jiǎn)單，車輛內(nèi)部攝像頭安裝了具備圖像處理的傳感器。這種傳感器就是圖像處理板，這類AI板卡在目標(biāo)識(shí)別算法的賦能下，就能夠?qū)σ曇胺秶奈矬w進(jìn)行AI分類識(shí)別，從而幫助車輛進(jìn)行避障。像成都慧視開發(fā)的高性能AI圖像處理板Viztra-HE030，采用的是RK3588開發(fā)而成，憑借其工業(yè)級(jí)的性能，6.0TOPS的算力，就能夠在車輛行駛過(guò)程中的復(fù)雜環(huán)境下進(jìn)行周邊環(huán)境的快速AI識(shí)別分類。當(dāng)然，算法的能力也十分關(guān)鍵，由于車輛行駛環(huán)境的不斷變化，算法面臨的識(shí)別畫面也不斷變化，如何精細(xì)的進(jìn)行識(shí)別，關(guān)系到車輛的行駛安全。工程師以RK3588核心板為基礎(chǔ)進(jìn)行定制開發(fā)，讓攝像頭更加智能高效，能夠輸出高清流的圖像視頻。陜西移動(dòng)目標(biāo)跟蹤

“啟明935A”系列芯片已經(jīng)成功點(diǎn)亮，并完成各項(xiàng)功能性測(cè)試，達(dá)到車規(guī)級(jí)量產(chǎn)標(biāo)準(zhǔn)。啟明935A是行業(yè)首顆基于Chiplet(芯粒/小芯片)異構(gòu)集成范式的自動(dòng)駕駛芯片，但并非單一芯片，而是一個(gè)家族系列。啟明935HUBChiplet可以和不同數(shù)量的大熊星座AIChiplet互相搭配，再結(jié)合靈活的封裝方式，快速形成不同性能等級(jí)的SoC芯片。它還支持高帶寬的PBLink多芯互連，雙芯雙向帶寬128GB/s，四芯雙向帶寬64GB/s。啟明935A每顆芯片都支持比較大20路的1080p60攝像頭輸入，可應(yīng)用于各類端側(cè)AI部署。得益于大熊星座NPU天然支持Transformer結(jié)構(gòu)，初步支持的模型有Yolo系列、ResNet50、PSPNet、PointNet++、TrafficSign_Retinanet、BevDet、miniCPM、Unet_ResNet50、PointPillars、PillarNest、M2track、BevFusion、PaliGemma、LLaMa-3B、8B等等。山東低壓線目標(biāo)跟蹤RK3588圖像處理板識(shí)別概率超過(guò)85%。

多目標(biāo)跟蹤是指在連續(xù)的圖像中，通過(guò)目標(biāo)檢測(cè)算法識(shí)別出每一幀中的目標(biāo)，并在時(shí)間上跟蹤它們的位置和狀態(tài)。但目標(biāo)會(huì)不斷發(fā)生尺度、形變、遮擋等變化，而且還會(huì)有目標(biāo)出現(xiàn)和消失的情況，再加上視頻采集端的相機(jī)所處環(huán)境可能受到外界影響導(dǎo)致抖動(dòng)的情況（例如無(wú)人機(jī)高空檢測(cè)），就會(huì)給多目標(biāo)跟蹤造成一定的困難。由于我們不能控制目標(biāo)，所以只能從視頻采集端維護(hù)跟蹤的穩(wěn)定性。因此，成都慧視針對(duì)于多目標(biāo)檢測(cè)跟蹤抖動(dòng)丟失的優(yōu)化方法是：1.改進(jìn)目標(biāo)檢測(cè),使用更加魯棒的目標(biāo)檢測(cè)算法。2.增強(qiáng)特征描述，利用深度學(xué)習(xí)提取更高級(jí)別的語(yǔ)義特征，這些特征對(duì)于小范圍內(nèi)的視角變化具有更好的不變性3.改進(jìn)運(yùn)動(dòng)模型，在算法中加入對(duì)攝像頭運(yùn)動(dòng)的估計(jì)，通過(guò)補(bǔ)償攝像頭運(yùn)動(dòng)來(lái)減小目標(biāo)真實(shí)運(yùn)動(dòng)與預(yù)測(cè)之間的差距。4.數(shù)據(jù)關(guān)聯(lián)策略，設(shè)計(jì)更靈活的數(shù)據(jù)關(guān)聯(lián)算法，允許更大的距離閾值來(lái)匹配候選目標(biāo)。

在智慧農(nóng)業(yè)領(lǐng)域可以分為人工干涉和無(wú)人值守2種。系統(tǒng)提供了良好的人機(jī)界面，用戶可以通過(guò)系統(tǒng)的視頻顯示區(qū)觀看攝像機(jī)攝制的現(xiàn)場(chǎng)視頻，此時(shí)，用戶可以人工通過(guò)系統(tǒng)提供的按鈕以各種方式控制云臺(tái)，即人工可以干涉監(jiān)控的過(guò)程。系統(tǒng)在大部分情況下處于無(wú)人值守的工作狀態(tài)，當(dāng)監(jiān)控中心的計(jì)算機(jī)系統(tǒng)收到外場(chǎng)設(shè)備的預(yù)警信號(hào)后，將自動(dòng)向攝像機(jī)云臺(tái)發(fā)出控制信號(hào)，控制攝像機(jī)將發(fā)生報(bào)警區(qū)域的圖像鎖定在監(jiān)視器上，并同時(shí)按系統(tǒng)的設(shè)定調(diào)整好焦距，視野大小等。然后系統(tǒng)自動(dòng)轉(zhuǎn)入運(yùn)動(dòng)檢測(cè)，檢測(cè)當(dāng)前區(qū)域是否有運(yùn)動(dòng)目標(biāo)，如果有運(yùn)動(dòng)目標(biāo)，則系統(tǒng)給出目標(biāo)的一般性描述，提交給目標(biāo)跟蹤模塊，對(duì)目標(biāo)進(jìn)行跟蹤。在這過(guò)程中，系統(tǒng)將作日志，記錄事故位置、時(shí)間等，同時(shí)對(duì)采集到的圖像作硬盤錄像。慧視微型雙光吊艙非常適用于無(wú)人機(jī)領(lǐng)域。

識(shí)別算法的性能提升依靠大量的圖像標(biāo)注，傳統(tǒng)模式下，需要人工對(duì)同一識(shí)別目標(biāo)的數(shù)據(jù)集進(jìn)行一步一步手動(dòng)拉框，但是這個(gè)過(guò)程的痛苦只有做過(guò)的人才知道。越多素材的數(shù)據(jù)集對(duì)于算法的提升越有幫助，常規(guī)情況下，一個(gè)20秒時(shí)長(zhǎng)30幀的視頻就多達(dá)兩三百?gòu)埉嬅嫘枰獦?biāo)注，如果視頻時(shí)長(zhǎng)或者視頻的幀速率增加，需要標(biāo)注的幀畫面將會(huì)更多。小編曾試過(guò)標(biāo)注一個(gè)時(shí)長(zhǎng)為1分30秒幀速率為60的視頻，需要標(biāo)注的畫面竟然多達(dá)5000多張，當(dāng)我標(biāo)注到500張的時(shí)候，整個(gè)人都已經(jīng)麻木，并且出現(xiàn)情緒波動(dòng)，望著剩下的4500多張待標(biāo)注畫面，看著都頭皮發(fā)麻，怎么都不想繼續(xù)了。AI算法賦能下的圖像處理板能夠進(jìn)行智能目標(biāo)識(shí)別。山東目標(biāo)跟蹤要多少錢

如何實(shí)現(xiàn)目標(biāo)識(shí)別及跟蹤？陜西移動(dòng)目標(biāo)跟蹤

成都慧視光電技術(shù)有限公司開發(fā)的Viztra-HE030圖像處理板，利用國(guó)產(chǎn)化高性能芯片RK3588開發(fā)而成，它能夠?qū)崿F(xiàn)6.0TOPS的算力，能夠輕松應(yīng)對(duì)糧庫(kù)內(nèi)部復(fù)雜的環(huán)境，成都慧視可以根據(jù)客戶使用的相機(jī)接口進(jìn)行圖像處理板的接口深度定制，實(shí)現(xiàn)快速的AI害蟲識(shí)別。在算法方面，可以使用自己的算法，我司還可以根據(jù)需求定制提供算法性能訓(xùn)練提升工具SpeedDP，平臺(tái)可以通過(guò)大量的糧庫(kù)害蟲AI識(shí)別模型訓(xùn)練，提升自身算法精度，進(jìn)而提升攝像頭害蟲識(shí)別精度。陜西移動(dòng)目標(biāo)跟蹤