2025-05-01 04:04:54
目前,采用圖像識別技術(shù)來實現(xiàn)無人機(jī)規(guī)避其他障礙物是一個有效的方法。通過在無人機(jī)上植入圖像識別模塊,這個模塊由圖像處理板和相機(jī)組合而成,通過算法的賦能,就能針對不同物體實現(xiàn)快速AI識別,然后實現(xiàn)規(guī)避。而在圖像處理板的選擇上,成都慧視開發(fā)的Viztra-LE026圖像處理板就十分合適。這塊板卡采用了RV1126開發(fā)設(shè)計而成,外形呈圓形,體積小巧,尺寸為Ф38mm*12mm,重量只有12g,用在無人機(jī)上不會過多占用空間。此外,該板卡功耗≤4W,也不會增加無人機(jī)的續(xù)航負(fù)擔(dān)。利用慧視SpeedDP能夠幫助提高FPV跟蹤精度。成都智慧交通AI智能視覺
騰訊開發(fā)的機(jī)器人小五,采用輪、腿、足復(fù)合設(shè)計,使得它具備越障能力的同時,也保持了輪式機(jī)器人的運(yùn)行效率。每條腿都可以單獨(dú)伸長縮短,能有效提升承載能力。裝上了雙編碼器大扭矩密度的執(zhí)行器后,就能承受住一般成年人的重量。將機(jī)器人用于養(yǎng)老服務(wù)領(lǐng)域,能夠幫老人取快遞,抱老人起床,帶老人進(jìn)行活動。機(jī)器人內(nèi)置RGBD相機(jī),在圖像處理板的賦能下,能夠?qū)崟r檢測周邊環(huán)境,進(jìn)行路線規(guī)劃和避障,以高效完成各項工作指令。同時能夠?qū)ξ矬w進(jìn)行AI識別,判斷老人位置、行為動作,為老人的行動做出幫助。成都高性能低功耗AI智能視覺系統(tǒng)成都慧視能夠幫助訓(xùn)練算法嗎?
AI的不斷應(yīng)用發(fā)展使得傳統(tǒng)的人工工作的弊端得到了很好的彌補(bǔ)。比如在圖像標(biāo)注這個領(lǐng)域,傳統(tǒng)的標(biāo)注需要招聘大量的人員,并且標(biāo)注圖像所耗費(fèi)的時間精力也是不可估量的,而AI模型的出現(xiàn)讓這一切都成為過去。利用慧視光電打造的深度學(xué)習(xí)算法開發(fā)平臺SpeedDP,就能夠針對場景識別進(jìn)行特有的模型部署訓(xùn)練,通過大量的訓(xùn)練,讓AI學(xué)會自動標(biāo)注圖像。平臺采用標(biāo)準(zhǔn)的AI算法開發(fā)流程,通過從需求分析、數(shù)據(jù)制作到模型訓(xùn)練、測試驗證以及模型部署幾個主要模塊。SpeedDP用于模型訓(xùn)練和評估測試的數(shù)據(jù)集是由一系列的圖像和標(biāo)注文件組成的,平臺支持多種開源數(shù)據(jù)格式如VOC和COCO。而目前平臺共支持yolox系列和yolov8系列模型用于模型訓(xùn)練(分割任務(wù)*支持yolov8模型),通過不斷額測試驗證,就能夠讓AI實現(xiàn)海思、RockChip嵌入式硬件平臺等模型部署的可視化AI開發(fā)功能。
無人機(jī)是巡檢領(lǐng)域的空中巡檢員,搭載智慧“眼”的無人機(jī)能夠替代人工,實現(xiàn)自主巡檢。無人機(jī)可以搭載紅外光和可見光兩種傳感器,實現(xiàn)晝夜巡檢也不是夢,一基桿塔*用十分鐘的時間便可完成巡檢工作。例如在電力巡檢中,傳統(tǒng)模式下,工人只能采用望遠(yuǎn)鏡遠(yuǎn)程查看線路,不僅費(fèi)眼睛,還費(fèi)時間。同時,由于光線等外界因素的干擾,缺陷的確認(rèn)也加大了難度,不得不背著**帶近距離校驗,工人的**也受到威脅。而無人機(jī)則可以在發(fā)現(xiàn)缺陷后,通過抵近觀察的方式進(jìn)行仔細(xì)查看,收集缺陷周圍360°照片回去分析,不僅**也高效率。SpeedDP作為一個AI訓(xùn)練平臺。
多目標(biāo)跟蹤是指在連續(xù)的圖像中,通過目標(biāo)檢測算法識別出每一幀中的目標(biāo),并在時間上跟蹤它們的位置和狀態(tài)。但目標(biāo)會不斷發(fā)生尺度、形變、遮擋等變化,而且還會有目標(biāo)出現(xiàn)和消失的情況,再加上視頻采集端的相機(jī)所處環(huán)境可能受到外界影響導(dǎo)致抖動的情況(例如無人機(jī)高空檢測),就會給多目標(biāo)跟蹤造成一定的困難。由于我們不能控制目標(biāo),所以只能從視頻采集端維護(hù)跟蹤的穩(wěn)定性。因此,成都慧視針對于多目標(biāo)檢測跟蹤抖動丟失的優(yōu)化方法是:1.改進(jìn)目標(biāo)檢測,使用更加魯棒的目標(biāo)檢測算法。2.增強(qiáng)特征描述,利用深度學(xué)習(xí)提取更高級別的語義特征,這些特征對于小范圍內(nèi)的視角變化具有更好的不變性3.改進(jìn)運(yùn)動模型,在算法中加入對攝像頭運(yùn)動的估計,通過補(bǔ)償攝像頭運(yùn)動來減小目標(biāo)真實運(yùn)動與預(yù)測之間的差距。4.數(shù)據(jù)關(guān)聯(lián)策略,設(shè)計更靈活的數(shù)據(jù)關(guān)聯(lián)算法,允許更大的距離閾值來匹配候選目標(biāo)??梢詭椭M(jìn)行算法訓(xùn)練的工具有哪些?成都智慧交通AI智能視覺
節(jié)約圖像標(biāo)注的時間就是節(jié)約成本。成都智慧交通AI智能視覺
在許多領(lǐng)域,無人機(jī)的作業(yè)環(huán)境相對復(fù)雜,需要識別處理圖像背景目標(biāo)眾多,這種環(huán)境下,要想實現(xiàn)更高精度的檢測識別效果,圖像處理板的性能至關(guān)重要。在慧視光電開發(fā)的多款圖像處理板中,Viztra-HE030圖像處理板以6.0TOPS得以勝任。這款板卡采用了瑞芯微旗艦級芯片RK3588,8nmLP制程,搭載八核64位CPU,主頻高達(dá)2.4GHz。集成ARMMali-G610MP4四核GPU,內(nèi)置AI加速器NPU,支持主流的深度學(xué)習(xí)框架。性能強(qiáng)勁的RK3588可為無人機(jī)AI識別的應(yīng)用場景帶來更強(qiáng)大的性能表現(xiàn)。成都智慧交通AI智能視覺