人工智能已經(jīng)成為新一輪產(chǎn)業(yè)變革的核心驅(qū)動(dòng)力,正在對(duì)世界經(jīng)濟(jì)、社會(huì)進(jìn)步和人類生活產(chǎn)生廣泛的影響,機(jī)器視覺(jué)在產(chǎn)業(yè)和消費(fèi)升級(jí)的大潮中將發(fā)揮重要的作用。2020年至2022年,中國(guó)機(jī)器視覺(jué)市場(chǎng)規(guī)模將從108億元增長(zhǎng)至162億元人民幣,年均復(fù)合增長(zhǎng)率達(dá)22.5%,釋放巨大的市場(chǎng)潛力。
機(jī)器視覺(jué)即用機(jī)器代替人眼來(lái)做測(cè)量和判斷,工作流程大致為:被攝取目標(biāo)——經(jīng)圖像攝取裝臵——圖像信號(hào)——經(jīng)圖像處理系統(tǒng)——數(shù)字信號(hào)——經(jīng)抽取目標(biāo)特征——判斷結(jié)果并控制設(shè)備。該流程的實(shí)現(xiàn)需相應(yīng)的硬件作為基礎(chǔ),典型的工業(yè)機(jī)器視覺(jué)系統(tǒng)構(gòu)成有照明、鏡頭、相機(jī)、圖像采集卡、視覺(jué)處理器等。
利用機(jī)器視覺(jué)技術(shù),東土科技可為用戶提供自動(dòng)檢測(cè)識(shí)別解決方案。方案搭載東土邊緣通用控制器,東土科技 Intewell 工業(yè)級(jí)網(wǎng)絡(luò)操作系統(tǒng),視覺(jué)軟件等組件,并利用 5G 和現(xiàn)場(chǎng)工業(yè)網(wǎng)絡(luò)提供數(shù)據(jù)通道。目前,整套系統(tǒng)在芯片檢測(cè)、工程機(jī)械、風(fēng)電、石化領(lǐng)域已形成典型性應(yīng)用。
比如,在智慧礦山泡沫浮選過(guò)程中,大多數(shù)是由工人直接根據(jù)自身經(jīng)驗(yàn)來(lái)判斷浮選工況并做出調(diào)整,如礦漿濃度、浮選藥劑用量等。通過(guò)建立煤泥浮選機(jī)器視覺(jué)系統(tǒng),用機(jī)器視覺(jué)代替“人眼”實(shí)時(shí)地監(jiān)控浮選狀態(tài),并調(diào)整浮選參數(shù);將圖像識(shí)別技術(shù)應(yīng)用到浮選工藝中,提高浮選工藝水平,實(shí)現(xiàn)浮選過(guò)程的智能化操作與信息化展示,對(duì)浮選過(guò)程的自動(dòng)化發(fā)展具有重要研究意義和應(yīng)用價(jià)值。
東土科技基于深度學(xué)習(xí)--目標(biāo)檢測(cè)實(shí)現(xiàn)浮選液面泡沫目標(biāo)識(shí)別及定位模型,研發(fā)出一套智能泡沫檢測(cè)系統(tǒng),系統(tǒng)主要運(yùn)行在東土科技NewPre AI 邊緣通用控制器之上,以“核心浮選視頻檢測(cè)程序”為基礎(chǔ),其核心是基于GPU的Yolo 目標(biāo)檢測(cè)模型引擎,實(shí)現(xiàn)對(duì)獲取的每一幀視頻幀的快速檢測(cè)與結(jié)果輸出。
搭載NewPre AI邊緣通用控制器的智能泡沫浮選系統(tǒng),在“實(shí)時(shí)在線處理”模塊,實(shí)現(xiàn)對(duì)原始攝像頭視頻流的解碼、抽幀,格式轉(zhuǎn)換處理,并將轉(zhuǎn)換后的圖像幀送到深度學(xué)習(xí)模型中進(jìn)行識(shí)別,并最終將檢測(cè)結(jié)果標(biāo)注在視頻流中,重新編碼視頻流推送給前端UI進(jìn)行展示與預(yù)警。核心圖像識(shí)別引擎,采用pytorch+yoloV5模型,通過(guò)對(duì)5000+張樣本數(shù)據(jù)集的訓(xùn)練,實(shí)現(xiàn)對(duì)液面泡沫的識(shí)別、定位于標(biāo)注,該模型運(yùn)行在前端設(shè)備的GPU硬件之上,實(shí)現(xiàn)GPU算力加速。
NewPre邊緣通用控制器產(chǎn)品,在滿足運(yùn)動(dòng)控制、數(shù)據(jù)采集和處理、AI聯(lián)合學(xué)習(xí)算法、惡劣工況下穩(wěn)定運(yùn)行等優(yōu)勢(shì)下,可實(shí)現(xiàn)實(shí)時(shí)控制與非實(shí)時(shí)控制穩(wěn)定運(yùn)行,是一種新型的AI+運(yùn)動(dòng)控制的應(yīng)用。NewPre采用微內(nèi)核架構(gòu),以軟件定義生產(chǎn)流程和控制系統(tǒng),通過(guò)虛擬化技術(shù),實(shí)現(xiàn)高實(shí)時(shí)和非實(shí)時(shí)業(yè)務(wù)融合,可滿足運(yùn)動(dòng)控制應(yīng)用需求;通過(guò)非實(shí)時(shí)系統(tǒng)提供視覺(jué)檢測(cè)方案,同步啟用實(shí)時(shí)控制系統(tǒng),提高生產(chǎn)效率和產(chǎn)品質(zhì)量。