成都慧視光電技術(shù)有限公司開發(fā)的RK3588系列圖像處理板Viztra-HE030圖像處理板能夠在算法的支持下,對(duì)高速公路上的車輛進(jìn)行檢測(cè)識(shí)別,對(duì)個(gè)別車輛進(jìn)行指定安全跟蹤和檢測(cè),這將有助于有關(guān)部門進(jìn)行測(cè)速和安全駕駛的管理偵查。通過實(shí)時(shí)數(shù)據(jù)的采集分析,還能夠找出高速擁堵源頭,為交通疏導(dǎo)提供精細(xì)信息,為提升整條道路的通行效率提供幫助。在夜間,圖像處理板也可以和紅外相機(jī)有機(jī)結(jié)合,實(shí)現(xiàn)AI檢測(cè)識(shí)別的功能。24小時(shí)工作能力也為全天時(shí)的交通管理提供技術(shù)支撐。低功耗、小體積的圖像處理板。電力應(yīng)急圖像處理板標(biāo)準(zhǔn)
但這也遇到很多難點(diǎn),通常情況下,視頻回傳的延遲大概在200ms左右,隨著大量的彈打出,視頻傳輸所需帶寬就面臨壓力,如何在通信帶寬有限的情況下,保證視頻順暢、清晰、無卡頓地傳輸,是分析改進(jìn)這個(gè)工作需要解決的前期難點(diǎn)。針對(duì)于這個(gè)問題,慧視光電利用GS弱網(wǎng)高清音視頻傳輸系統(tǒng)和RK3588打造的Viztra-HE030圖像處理板結(jié)合,推出了低延遲低帶寬圖傳解決方案。在一個(gè)窄帶收發(fā)信道內(nèi),例如在信道有效帶寬0.5Mb/s~2Mb/s內(nèi),多路視頻和交互控制共用一對(duì)收發(fā)信道,信道支持?jǐn)?shù)據(jù)透?jìng)鳎獠肯到y(tǒng)可以使用該信道,傳輸任意格式的數(shù)據(jù);可實(shí)時(shí)調(diào)整視頻碼率,在低至500K帶寬情況下依然可以回傳清晰流暢的圖像??梢允乖O(shè)備飛的更遠(yuǎn)、走的更遠(yuǎn);可實(shí)現(xiàn)視頻中繼轉(zhuǎn)發(fā);能夠基于H265實(shí)時(shí)視頻編碼;可實(shí)現(xiàn)基于視頻流的“人在回路低延遲控制”。基于普通60幀相機(jī),實(shí)現(xiàn)15ms的低延遲編解碼,加上數(shù)據(jù)鏈傳輸延遲時(shí)間在30ms左右,目前業(yè)界前列。通用性強(qiáng),使用更加靈活,適用更多應(yīng)用場(chǎng)景;支持多路SDI視頻在低至500K帶寬情況下的同時(shí)傳輸(1080P60FPS),徹底解決“帶寬苦惱”;整體時(shí)延約60ms(含相機(jī)、編解碼、顯示,不含傳輸),實(shí)現(xiàn)實(shí)時(shí)控制、實(shí)時(shí)打擊。電力應(yīng)急圖像處理板標(biāo)準(zhǔn)慧視光電能夠定制CVBS接口的RK3588圖像處理板。
多目標(biāo)跟蹤是指在連續(xù)的圖像中,通過目標(biāo)檢測(cè)算法識(shí)別出每一幀中的目標(biāo),并在時(shí)間上跟蹤它們的位置和狀態(tài)。但目標(biāo)會(huì)不斷發(fā)生尺度、形變、遮擋等變化,而且還會(huì)有目標(biāo)出現(xiàn)和消失的情況,再加上視頻采集端的相機(jī)所處環(huán)境可能受到外界影響導(dǎo)致抖動(dòng)的情況(例如無人機(jī)高空檢測(cè)),就會(huì)給多目標(biāo)跟蹤造成一定的困難。由于我們不能控制目標(biāo),所以只能從視頻采集端維護(hù)跟蹤的穩(wěn)定性。因此,成都慧視針對(duì)于多目標(biāo)檢測(cè)跟蹤抖動(dòng)丟失的優(yōu)化方法是:1.改進(jìn)目標(biāo)檢測(cè),使用更加魯棒的目標(biāo)檢測(cè)算法。2.增強(qiáng)特征描述,利用深度學(xué)習(xí)提取更高級(jí)別的語義特征,這些特征對(duì)于小范圍內(nèi)的視角變化具有更好的不變性3.改進(jìn)運(yùn)動(dòng)模型,在算法中加入對(duì)攝像頭運(yùn)動(dòng)的估計(jì),通過補(bǔ)償攝像頭運(yùn)動(dòng)來減小目標(biāo)真實(shí)運(yùn)動(dòng)與預(yù)測(cè)之間的差距。4.數(shù)據(jù)關(guān)聯(lián)策略,設(shè)計(jì)更靈活的數(shù)據(jù)關(guān)聯(lián)算法,允許更大的距離閾值來匹配候選目標(biāo)。
這個(gè)過程中,采用無人機(jī)是個(gè)高效的辦法。無人機(jī)高空觀察能夠獲得更多的視野,并且針對(duì)許多人無法到達(dá)的地方,還能夠快速抵近觀察,防止驚擾。此外,更高效的措施是在無人機(jī)上加裝具備圖像處理的板卡,這時(shí)候無人機(jī)就是一個(gè)智慧眼,它能夠在算法的輔助下,對(duì)野豬等動(dòng)物進(jìn)行AI搜尋,并且具備目標(biāo)鎖定功能。當(dāng)無人機(jī)發(fā)現(xiàn)疑似目標(biāo)就可以抵近觀察,一旦確認(rèn)目標(biāo)就能夠立即鎖定跟蹤,這樣,地面圍剿人員就可以快速像區(qū)域靠攏,對(duì)野豬進(jìn)行逮捕驅(qū)逐。這樣的無人機(jī)智慧眼可以用成都慧視開發(fā)的Viztra-HE030圖像處理板來實(shí)現(xiàn),這塊板卡采用瑞芯微旗艦級(jí)芯片RK3588,算力能夠達(dá)到6.0TOPS,處理村落、樹林等復(fù)雜環(huán)境不在話下。同時(shí),針對(duì)于野生動(dòng)物目標(biāo)識(shí)別算法的AI訓(xùn)練,成都慧視還可以提供專門的AI訓(xùn)練平臺(tái)SpeedDP,通過大量的模型訓(xùn)練實(shí)現(xiàn)AI自動(dòng)圖像標(biāo)注,進(jìn)而幫助提升算法識(shí)別性能?;垡暪怆夾I圖像處理板。
無人機(jī)只需要從基地起飛,就能夠?qū)χ付▍^(qū)域進(jìn)行巡檢,智能攝像頭能夠自動(dòng)問診地面,識(shí)別護(hù)欄錯(cuò)位、路面積水、凹陷、裂縫、交通事故、車流異常等問題,然后標(biāo)記位置。而控制中心能夠?qū)崟r(shí)查看前方畫面,接收無人機(jī)回傳的數(shù)據(jù),并進(jìn)行診斷分析,整個(gè)過程無需過多的人工干預(yù)。這種無人機(jī)智能問診,是通過向無人機(jī)植入高性能的AI圖像處理板以及定制專門的目標(biāo)識(shí)別算法來實(shí)現(xiàn)的。成都慧視開發(fā)的Viztra-LE026圖像處理板,就非常適合用在無人機(jī)智能化領(lǐng)域。這塊板卡外形呈圓形設(shè)計(jì),尺寸為ф38*12mm,功率不超過4W,整體呈現(xiàn)功耗低、尺寸小的特點(diǎn)。用在緊湊型的無人機(jī)當(dāng)中也不會(huì)因?yàn)榭臻g問題而苦惱,并且不會(huì)過多消耗無人機(jī)的續(xù)航。此外,Viztra-LE026這款圖像處理板采用的是RV1126芯片,2.0TOPS的算力用在路面識(shí)別領(lǐng)域十分合適?;垡暪怆娔軌蚋鶕?jù)需求定制RV1126系列圖像處理板。電力應(yīng)急圖像處理板標(biāo)準(zhǔn)
邊海防智慧化升級(jí)可以用哪些圖像處理板?電力應(yīng)急圖像處理板標(biāo)準(zhǔn)
無人機(jī)的智能化是推動(dòng)低空經(jīng)濟(jì)發(fā)展的重要引擎,打造智能無人機(jī)需要通信、控制、傳感器等多種技術(shù)的共同作用,其中圖像處理板的目標(biāo)檢測(cè)識(shí)別技術(shù)能夠在智慧巡檢、智慧交通管理、智慧河湖巡查等領(lǐng)域有著積極作用。在成都慧視開發(fā)的多款圖像處理板中,Viztra-LE026以小型化、低功耗的特點(diǎn)深受行業(yè)青睞。Viztra-LE026圖像處理板采用了全國產(chǎn)化芯片RV1126,板卡外形呈圓形設(shè)計(jì),尺寸為Φ38mm*12mm,重量12g,雖然小巧,但是算力可達(dá)2.0TOPS,能夠憑借1路MIPI視頻輸入和1路DVP視頻輸入實(shí)現(xiàn)對(duì)目標(biāo)實(shí)時(shí)自主檢測(cè)、識(shí)別,并自動(dòng)或手動(dòng)鎖定跟蹤人、車、船等目標(biāo)。電力應(yīng)急圖像處理板標(biāo)準(zhǔn)