重慶穩(wěn)定目標(biāo)識別工具

在如今的作業(yè)中，無人機(jī)路面巡查替代傳統(tǒng)的人工巡查，展現(xiàn)出巨大的效率優(yōu)勢。像高速施工工地這樣的環(huán)境下，施工方為了保障施工安全，就需要對施工范圍進(jìn)行嚴(yán)格管控，傳統(tǒng)的人工巡查效率低，受限于地形、時間等問題，容易出現(xiàn)盲點(diǎn)。相比人工，利用無人機(jī)進(jìn)行AI識別則可以逐幀圖像監(jiān)測，即便是夜晚也能夠利用紅外傳感器進(jìn)行數(shù)據(jù)收集，幾乎不會遺漏任何信息。而交通管理部門，則可以利用無人機(jī)快速到底事故地點(diǎn)進(jìn)行疏導(dǎo)，緩解交通壓力。紅外AI識別模塊定制選擇成都慧視。重慶穩(wěn)定目標(biāo)識別工具

但這也遇到很多難點(diǎn)，通常情況下，視頻回傳的延遲大概在200ms左右，隨著大量的彈打出，視頻傳輸所需帶寬就面臨壓力，如何在通信帶寬有限的情況下，保證視頻順暢、清晰、無卡頓地傳輸，是分析改進(jìn)這個工作需要解決的前期難點(diǎn)。針對于這個問題，慧視光電利用GS弱網(wǎng)高清音視頻傳輸系統(tǒng)和RK3588打造的Viztra-HE030圖像處理板結(jié)合，推出了低延遲低帶寬圖傳解決方案。在一個窄帶收發(fā)信道內(nèi)，例如在信道有效帶寬0.5Mb/s~2Mb/s內(nèi)，多路視頻和交互控制共用一對收發(fā)信道，信道支持?jǐn)?shù)據(jù)透傳，外部系統(tǒng)可以使用該信道，傳輸任意格式的數(shù)據(jù)；可實時調(diào)整視頻碼率，在低至500K帶寬情況下依然可以回傳清晰流暢的圖像?？梢允乖O(shè)備飛的更遠(yuǎn)、走的更遠(yuǎn);可實現(xiàn)視頻中繼轉(zhuǎn)發(fā)；能夠基于H265實時視頻編碼；可實現(xiàn)基于視頻流的“人在回路低延遲控制”?；谄胀?0幀相機(jī)，實現(xiàn)15ms的低延遲編解碼，加上數(shù)據(jù)鏈傳輸延遲時間在30ms左右，目前業(yè)界前列。通用性強(qiáng)，使用更加靈活，適用更多應(yīng)用場景；支持多路SDI視頻在低至500K帶寬情況下的同時傳輸（1080P60FPS），徹底解決“帶寬苦惱”；整體時延約60ms（含相機(jī)、編解碼、顯示，不含傳輸），實現(xiàn)實時控制、實時打擊。廣東網(wǎng)絡(luò)目標(biāo)識別定制機(jī)器狗AI識別模塊定制。

多邊形標(biāo)注能夠能夠幫助我們標(biāo)注一些規(guī)則復(fù)雜的物體，如動物、人、車、建筑物等，與矩形標(biāo)注框等方法相比，多邊形標(biāo)注更能精確展示被標(biāo)注物體的形狀、大小以及實時形態(tài)，通過大量的多邊形標(biāo)注工作，能夠更好的幫助我們提高算法模型的準(zhǔn)確性和魯棒性。傳統(tǒng)的多邊形標(biāo)注方法中，標(biāo)注者需要在物體的邊緣上依次單擊鼠標(biāo)或使用繪圖工具，將點(diǎn)連接起來形成一個封閉的多邊形。標(biāo)注的難度取決于被標(biāo)注物體的復(fù)雜程度，相較于矩形框標(biāo)注更加費(fèi)時費(fèi)力，如果遇到大量待標(biāo)注目標(biāo)，則極大地影響工作效率。

首先攝像機(jī)采用的是可見光高清攝像機(jī)，具備1920*1080的分辨率，系統(tǒng)視場31.11°×17.8°，其中搜索視場15.8°×15.8°（1080P像素）。而圖像處理則采用慧視開發(fā)的RV1126高性能圖像處理板，之所以采用這塊板卡，一方面得益于其低功耗、微型外觀的設(shè)計，非常契合“智慧眼”這樣對于空間要求嚴(yán)格的應(yīng)用場景；另一方面RV1126具備2.0TOPS的算力，在國產(chǎn)化方面也十分完整，安全性十足。兩者結(jié)合，就能夠形成重量不超過100g的“智慧眼”。在算法的作用下，能夠達(dá)到≥50Hz的跟蹤幀率，≥25Hz的檢測幀率，實現(xiàn)捕獲4m*4m目標(biāo)超過800m、6m*6m目標(biāo)超過1000m。這就是“機(jī)器狼”的智慧化措施，通過一個“小小的”“智慧眼”的加入，便能夠讓其實現(xiàn)許多自動化任務(wù)。隨著技術(shù)的不斷發(fā)展，“機(jī)器狼”的形態(tài)將會不斷進(jìn)步，滿足更多多樣化需求。各類飛行器識別的模塊定制。

RK3588作為瑞芯微旗艦級芯片，工業(yè)級的算力受到了很多領(lǐng)域的青睞，但是由于前端相機(jī)的選擇不同，并不是每塊RK3588的圖像處理板都可以直接拿來使用，需要的是根據(jù)相機(jī)接口和應(yīng)用場景進(jìn)行深度定制。成都慧視光電技術(shù)有限公司就有這樣的快速集成定制的能力。作為擁有多年圖像處理板開發(fā)經(jīng)驗的團(tuán)隊，成都慧視能夠快速定制SDI、CVBS、CAMERALINK、USB、LVDS、DVP等豐富接口的RK3588系列圖像處理板，并能夠根據(jù)應(yīng)用環(huán)境定制外殼、散熱器等。無人機(jī)吊艙用AI識別模塊定制。國產(chǎn)化目標(biāo)識別開發(fā)

Viztra-HE030是采用RK3588開發(fā)而成的AI識別模塊。重慶穩(wěn)定目標(biāo)識別工具

多目標(biāo)跟蹤是指在連續(xù)的圖像中，通過目標(biāo)檢測算法識別出每一幀中的目標(biāo)，并在時間上跟蹤它們的位置和狀態(tài)。但目標(biāo)會不斷發(fā)生尺度、形變、遮擋等變化，而且還會有目標(biāo)出現(xiàn)和消失的情況，再加上視頻采集端的相機(jī)所處環(huán)境可能受到外界影響導(dǎo)致抖動的情況（例如無人機(jī)高空檢測），就會給多目標(biāo)跟蹤造成一定的困難。由于我們不能控制目標(biāo)，所以只能從視頻采集端維護(hù)跟蹤的穩(wěn)定性。因此，成都慧視針對于多目標(biāo)檢測跟蹤抖動丟失的優(yōu)化方法是：1.改進(jìn)目標(biāo)檢測,使用更加魯棒的目標(biāo)檢測算法。2.增強(qiáng)特征描述，利用深度學(xué)習(xí)提取更高級別的語義特征，這些特征對于小范圍內(nèi)的視角變化具有更好的不變性3.改進(jìn)運(yùn)動模型，在算法中加入對攝像頭運(yùn)動的估計，通過補(bǔ)償攝像頭運(yùn)動來減小目標(biāo)真實運(yùn)動與預(yù)測之間的差距。4.數(shù)據(jù)關(guān)聯(lián)策略，設(shè)計更靈活的數(shù)據(jù)關(guān)聯(lián)算法，允許更大的距離閾值來匹配候選目標(biāo)。重慶穩(wěn)定目標(biāo)識別工具