久久久91-久久久91精品国产一区二区-久久久91精品国产一区二区三区-久久久999国产精品-久久久999久久久精品

ABB
關注中國自動化產(chǎn)業(yè)發(fā)展的先行者!
CAIAC 2025
2025工業(yè)安全大會
OICT公益講堂
當前位置:首頁 >> 案例 >> 案例首頁

案例頻道

基于視頻分析的視覺檢測算法研究
  • 企業(yè):     領域:機器視覺     行業(yè):煙草    
  • 點擊數(shù):1360     發(fā)布時間:2024-05-15 19:37:50
  • 分享到:
本文針對運動煙支的動態(tài)監(jiān)測、視頻合成、缺陷分析等關鍵問題展開研究,并取得了一定理論和實用價值的成果。本文的工作包括:(1)視頻合成的研究:一般工業(yè)相機采集的數(shù)據(jù)為單張的圖像數(shù)據(jù),并不能直接進行視頻的保存。本研究采用FFmpeg開源視頻處理庫對采集到的圖像進行視頻合成,并利用視頻的幀內(nèi)壓縮以及幀間壓縮技術,成功實現(xiàn)海量圖像的視頻化動態(tài)存儲。(2)基于卷積神經(jīng)網(wǎng)絡進行的深度學習研究:利用主流深度學習框架Pytorch對卷積神經(jīng)網(wǎng)絡的數(shù)據(jù)輸入層、卷積計算層、激勵層、池化層、全連接層等層進行研究并修改,在測試數(shù)據(jù)集上的實驗結(jié)果表明了卷積神經(jīng)網(wǎng)絡在缺陷檢測方面的優(yōu)勢。

文獻標識碼:B文章編號:1003-0492(2024)04-074-04中圖分類號:TP29

★王俊鵬,蔡革英,韓梅(紅安卷煙廠,湖北黃岡438400)

關鍵詞:視頻分析;視覺檢測;煙支檢測

1 基于視頻分析的煙支視覺檢測算法概述

目前,針對煙支的視覺檢測主要有兩種方法:第一種是通過對焦距離來實現(xiàn)的;第二種則是利用光學系統(tǒng)中的焦距和光圈等參數(shù)來進行識別。在實際應用過程中,由于拍攝角度以及成像質(zhì)量等因素的影響,會導致所得到的圖像存在一定程度上的失真現(xiàn)象。一般工業(yè)相機采集的數(shù)據(jù)為單張的圖像數(shù)據(jù),并不能直接進行視頻的保存。而且因為煙支本身具有特殊性,所以需要采用一些其他技術手段來保證數(shù)據(jù)信息的準確性。例如,可以使用機器學習或者深度學習等方式來完成對煙支的檢測工作。然而,這些方法都無法滿足煙支檢測系統(tǒng)對實時性要求較高的需求。為此,國內(nèi)外學者開始將目光轉(zhuǎn)向了計算機技術領域,希望借助計算機技術來解決這一難題。其中,最為常見的一種手段即為視頻分析法。該方法主要通過攝像頭獲取煙支圖像,然后根據(jù)煙支圖像特征選擇合適的閾值對其進行分割,最后再結(jié)合相應的數(shù)學模型計算出煙支的具體位置[1]。KIM等人針對煙支圖像中的像素點分布不均勻以及煙支圖像邊緣模糊等問題,提出了一種基于灰度共生矩陣(GrayscaleCommunity Matrix)的煙支圖像分割模型[2-3]。首先,他們從原始煙支圖像中隨機選取一定數(shù)量的像素點作為初始化的訓練樣本集;接著,在此基礎上,分別使用3個不同尺度的卷積核對每一個樣本進行卷積操作,并且利用最大類間方差、平均值和標準偏差三個指標來衡量這三組參數(shù)之間的差異程度,以此來確定最佳的卷積層數(shù);隨后,采用多尺度融合技術對不同尺度的煙支圖像進行處理,最終得到具有較高分辨率的煙支圖像。該方法不僅能夠有效地提高煙支圖像分割精度,而且還可以降低計算成本。還有研究人員將殘煙支鏈與其他圖像處理技術相結(jié)合,以便更好地提取殘煙支鏈的邊緣輪廓特征。

目前,國內(nèi)外學者已經(jīng)將深度學習應用于煙支圖像分割領域,并取得了不錯的效果。文獻所用的方法主要包括有監(jiān)督的自適應加權(quán)網(wǎng)絡結(jié)構(gòu)、無監(jiān)督的半監(jiān)督結(jié)構(gòu)、混合式的卷積神經(jīng)網(wǎng)絡結(jié)構(gòu)、基于注意力機制的卷積神經(jīng)網(wǎng)絡結(jié)構(gòu)等。

基于視頻分析的視覺檢測算法通常由特征提取模塊(Feature Extraction)、特征融合模塊(Convolutional Encoding)以及特征通道處理模塊組成。其中,特征提取模塊負責對輸入的原始數(shù)據(jù)進行預處理,并且利用卷積神經(jīng)網(wǎng)絡來獲取特征通道,然后再使用特征融合模塊對特征通道進行特征提取,最后將特征通道輸出到分類器當中。特征融合模塊則通過計算每個像素點與其他所有像素點之間的距離來實現(xiàn),其目的就是為了提高模型的泛化能力。而特征通道處理模塊則是根據(jù)不同顏色區(qū)域的灰度值來判斷該區(qū)域是否屬于同一類別,如果不是就會直接丟棄該類別的數(shù)據(jù)。目前,基于視頻分析的煙支視覺檢測算法已經(jīng)被廣泛應用于煙草行業(yè)的生產(chǎn)過程中。

2 運動目標二值化分割

2.1 常用的運動目標檢測方法

目前,針對運動目標檢測的主流技術包括圖像處理(如去霧)、特征提取以及目標定位等。其中,對于運動目標檢測而言,最為常見的就是采用深度學習模型來實現(xiàn)。對運動目標進行二值化處理,可以有效地提高檢測精度[4]。此外,還有一些其他的運動目標檢測方法也被應用到了運動目標檢測當中,例如基于卷積神經(jīng)網(wǎng)絡的運動目標檢測、基于多尺度融合的運動目標檢測、基于注意力機制的運動目標檢測等等。但是這些方法均存在一定的不足之處,主要表現(xiàn)為以下幾點:(1)需要大量的數(shù)據(jù)作為訓練樣本,這就導致其計算成本過高;(2)無法保證運動目標的準確度;(3)難以實現(xiàn)大規(guī)模的推廣應用。

2.2 基于HSV空間的運動目標檢測

由于運動目標的復雜性和多樣性,需要對其進行分類識別。因此,首先將采集到的運動目標數(shù)據(jù)轉(zhuǎn)換成HOG顏色空間下的RGB三通道分量圖;然后根據(jù)每一個像素點對應的RGB三個通道分量圖計算出該點所在位置的三維空間坐標(x,y);最后通過坐標變換得到該點在整個圖像中所占的比例。

利用上述方法可以實現(xiàn)運動目標的二值化分割,但是這種方法只能針對單一的前景目標進行分割,而無法滿足多個前景目標的情況。因此本文提出了一種基于HSV空間的運動目標二值化分割方法。具體步驟如下:

(1)提取運動目標的特征信息。采用HSV空間模型對運動目標進行二值化分割,以便于后續(xù)的前景檢測與定位。

(2)建立HSV空間模型。首先根據(jù)運動目標的位置信息確定待測對象的大致范圍,然后使用HSV空間模型計算出該點到所有像素的距離,再用該距離除以該點到物體中心的距離即可得出該點的三維空間坐標。

3 運動目標特征提取與計數(shù)—以運動煙支為例

3.1 基于幀差法的運動煙支視頻分析法

在對運動煙支進行識別之前需要先對其進行預處理。通常情況下,可以采用二值化處理或者去噪處理等方式去除噪聲、增強細節(jié)信息;然后再根據(jù)不同的運動目標采取相應的檢測手段。一般來說,如果兩個像素點的灰度值相差較大且差值越大則表示該像素點所對應的運動目標就越明顯,反之則越不明顯。因此本文將利用幀差法來對運動煙支進行檢測。幀差法是一種常用于圖像分割和定位的技術手段,它能夠有效地提取出圖像中的每一個像素點并且使得這些像素點具有一定的相似性。具體來講就是利用閾值來判斷是否存在運動目標,若存在則認為該像素點屬于運動目標,否則就不是。

在實際的檢測過程中,首先要確定運動目標的位置,然后再對其進行檢測。由于運動目標的形狀比較復雜,所以很難直接用肉眼觀察到,而是需要借助一些工具才能實現(xiàn)。目前,最常見的方法包括:(1)Sobel算子。這個算子是一種經(jīng)典的量測算法,適用范圍廣,但是精度不高。因此,通常會采用其他方式來代替。例如,可以使用霍夫變換等方法來消除噪聲點、減少計算量以及降低運算難度。(2)K-means聚類分析。這是一種簡單實用的聚類方法,主要原理是根據(jù)給定的坐標值計算兩個對象之間的差異程度,從而得到兩對象之間的距離。該方法具有一定的局限性,只能識別出特定范圍內(nèi)的運動目標,并且無法區(qū)分同一區(qū)域內(nèi)的多個對象。(3)Fisher判別器。它能夠?qū)⒁粋€二維矩陣分解成若干個互不相交的子集,每個子集中都有一個對應于某個類別的中心點,這些中心點就是被選中的運動目標。

本文利用Fisher判別器來實現(xiàn)運動目標的分類。首先需要確定運動目標的位置信息,然后再用其作為輸入數(shù)據(jù),經(jīng)過處理后輸出相應的RGB三通道彩色圖像。由于運動目標的亮度值會隨著時間不斷發(fā)生變化,所以要先對采集到的原始數(shù)據(jù)進行預處理,包括去色、平滑化等操作;最后通過計算得到各個顏色分量之間的相關系數(shù)來判斷運動目標是否存在。

3.2 基于背景減除法的前景提取

由于運動目標的復雜性,對其進行分割時會產(chǎn)生大量噪聲點,因此需要對其進行去噪處理。目前,針對運動目標的去噪主要采用背景減去法(BackgroundDenoising),即通過計算背景像素點之間的距離來去除噪聲點。這種方法簡單易行且效果較好,但是會導致運算量較大;而基于深度神經(jīng)網(wǎng)絡的檢測方法則是利用卷積層和激活函數(shù)將原始輸入數(shù)據(jù)映射到更高層次上來提高檢測精度。本文選用了一種基于深度神經(jīng)網(wǎng)絡的檢測方法,該方法首先使用一個濾波器濾掉圖像中的大部分灰度信息,然后再使用另外一個濾波器對這些噪聲點進行進一步的過濾,最后根據(jù)閾值判斷是否存在運動目標。

3.3 實驗結(jié)果與分析

我們分別采用了兩種不同光照條件下的動視頻作為本文所提出的運動目標檢測算法,即在黑暗環(huán)境下采用普通攝像頭拍攝的動視頻;在白天光線充足時采用SONY A7S2攝像機拍攝的動視頻。首先,通過對比兩組數(shù)據(jù)集上的平均精度來驗證本文算法的可行性。其次,將本文算法與其他幾種常用的運動目標檢測算法進行比較,并且從實驗結(jié)果來看,本文算法相較于其他幾種算法具有更好的性能表現(xiàn)。

首先,通過對比不同類型的運動視頻和正常視頻可以發(fā)現(xiàn),當視頻幀數(shù)較少時(如2幀或5幀),卷積神經(jīng)網(wǎng)絡能夠更好地學習到運動目標的細節(jié)特征。其次,由于運動目標的遮擋、背景噪聲等因素影響,導致運動目標的識別效果較差,而卷積神經(jīng)網(wǎng)絡則具有良好的魯棒性,即使存在輕微的噪聲也不會造成嚴重的干擾。最后,卷積神經(jīng)網(wǎng)絡還可有效降低模型的計算成本,并且隨著訓練次數(shù)的增加,模型的泛化性能會不斷增強。因此,相比于傳統(tǒng)的運動目標檢測方法而言,卷積神經(jīng)網(wǎng)絡不僅能夠顯著提高運動目標檢測的準確率,同時還能夠減少模型的訓練時間,進而達到縮短檢測時間的目的。

4 小結(jié)

本文首先針對運動煙支的動態(tài)監(jiān)測、視頻合成、缺陷分析等關鍵問題展開研究,提出了一種基于視頻分析的視覺檢測方法,并結(jié)合實際案例驗證了該方法的有效性;其次,本文從算法設計角度出發(fā),總結(jié)出該方法存在的不足之處及未來的研究方向。

(1)算法設計方面。首先,在算法實現(xiàn)過程中,應當考慮光照強度以及光源亮度變化情況,若光照強度過大或是光源亮度過小都會影響算法運行效果,進而導致算法無法正常運行。其次,為了提高算法運行速度和準確率,需要合理設置閾值,以便于后續(xù)計算結(jié)果的對比。再次,由于不同顏色代表著不同程度的灰度差異,因此可以通過RGB三通道分別提取圖像的紅綠藍三個分量信息,然后將這三類色彩相加得到最終的圖像。但是當光強度較大或者是光源亮度較小時,所提算法可能出現(xiàn)過度擬合現(xiàn)象,所以還需根據(jù)實際情況調(diào)整閾值。最后,在算法運行過程中,要保證每個像素點均有一個最佳閾值,這樣才能使得算法具有良好的魯棒性。

(2)算法性能評價指標。本文采用平均精度RMSE作為衡量算法性能的標準,該值越小說明算法的精確度越高;同時,也可利用MIC值來評估算法的穩(wěn)定性,即當MIC值越大時,表明算法的穩(wěn)定性越好。

(3)圖像分割效果。圖像分割效果主要包括兩個方面:一是圖像質(zhì)量,二是圖像分割結(jié)果。對于前者而言,可以從兩幅圖像之間的相似程度來判斷,如果兩張圖像的邊緣特征基本一致且紋理細節(jié)相差不大,那么就能夠認為它們屬于同一類別。而對于后者來說,則需通過對比兩幅圖像的灰度級和亮度對比度來確定其是否是同一幅圖像。另外,還要考慮到圖像分割時可能出現(xiàn)的噪聲問題,如背景噪聲、光照變化等因素都會影響圖像分割結(jié)果。

綜上所述,本文設計的基于視頻分析的視覺檢測算法不僅實現(xiàn)了對目標對象的識別,而且取得了不錯的應用效果。

作者簡介:

王俊鵬(1976-),男,湖北黃岡人,工程師,現(xiàn)就職于紅安卷煙廠,主要研究方向為機械設計和故障維修。

蔡革英(1974-),男,湖北黃岡人,現(xiàn)就職于紅安卷煙廠,主要研究方向為機械維修。

韓梅(1992-),女,湖北黃岡人,學士,現(xiàn)就職于紅安卷煙廠,主要研究方向為質(zhì)量管理。

參考文獻:

[1] 李博. 基于視覺分析的物流傳送帶表面缺陷檢測與定位系統(tǒng)研究[D]. 北京: 北京交通大學, 2020.

[2] Wen C Y, Chiu S H, Hsu W S, et al. Defect segmentation of texture images with wavelet transform and a co-occurrence matrix[J]. Textile Research Journal, 2001, 71 (8) : 743 - 749.

[3] CHEN M, DAI S. Analysis on image texture based on gray-level co-occurrence matrix[J]. Communications Technology, 2012(2): 108-111.

[4] 孔偉鑫. 基于全硬件的視頻圖像信號的二值化處理和邊界坐標值存儲[J]. 電子世界, 2014.

摘自《自動化博覽》2024年4月刊

熱點新聞

推薦產(chǎn)品

x
  • 在線反饋
1.我有以下需求:



2.詳細的需求:
姓名:
單位:
電話:
郵件:
主站蜘蛛池模板: 特级www | 在线观看欧美大片 | 一级毛片卡 | 国产最新精品2020好看的 | 天天操夜夜爱 | 色免费视频 | 久久国产视频在线观看 | 一级人做人a爰免费视频 | 成人精品一区二区不卡视频 | 国产极品精频在线观看 | 国产高清一级片 | 日韩在线视频网 | 免费看日韩| 国产午夜不卡在线观看视频666 | 欧美一级毛片欧美一级 | 欧洲精品视频在线观看 | 国产短视频精品区第一页 | 黄色片视频网站 | 欧美视屏在线观看 | 国产黄网站在线观看 | 国产成人免费在线 | 成人开心激情 | 日韩中文字幕网 | 伦理片在线观看网址男女色黄色录像一一 | 国产精品臀控福利在线观看 | 国产精品无卡无在线播放 | 日韩版码免费福利视频 | 亚洲成人免费在线 | 中文字幕亚洲欧美日韩不卡 | 国产精品96久久久久久久 | 国产图色 | 日韩国产欧美在线观看 | 求欧美精品网址 | 日本免费黄色大片 | 纯欧美一级毛片_免费 | 精品国产女同疯狂摩擦2 | 草草视频在线免费观看 | 国产精品自在线拍国产 | 国产人成精品综合欧美成人 | 成年黄大片 | 婷婷亚洲五月色综合 |