基于陰影重建形狀的視覺技術(shù):一種重要的圖像形狀提取技術(shù)及其應(yīng)用
發(fā)布時間:2020-06-18 來源:Steve Zhu, Teledyne DALSA 集團(tuán) 責(zé)任編輯:wenwei
【導(dǎo)讀】自動化視覺檢測已經(jīng)廣泛應(yīng)用于現(xiàn)今的生產(chǎn)環(huán)境的各個領(lǐng)域,從半導(dǎo)體、電子、食品和飲料、醫(yī)藥包裝、汽車制造以及其它不同行業(yè)。而視覺檢測的應(yīng)用可分類為測量、有/無檢測、機(jī)器人導(dǎo)航、瑕疵檢測、一維或二維碼識別,以及光學(xué)文字識別(OCR)閱讀等等。常規(guī)的 2D 算法通常擅長處理某些特征清晰且定義明確的應(yīng)用,因此檢測更加可靠。 換句話說,目標(biāo)特征必須穩(wěn)定并且清晰一致地呈現(xiàn),檢測和識別才會比較可靠。
不過就如人生一樣,視覺檢測時常面臨挑戰(zhàn)和困境,譬如一些表面帶有天然的紋理或高度反光的物體;再譬如,一些部件經(jīng)過打磨或沖壓等制造過程,產(chǎn)生了彎曲或帶紋理的表面;還有一些物件帶有浮雕圖案或凹凸不平特征,例如是沖壓或雕刻標(biāo)記,這些都會為檢測帶來困難。傳統(tǒng)的二維算法和預(yù)處理工具往 往不能可靠的解決這些問題?;陉幱爸亟ㄐ螤?Shape from Shading)技術(shù)則是一種經(jīng)過驗證的更可靠方法,能夠應(yīng)付這些復(fù)雜的檢測任務(wù)。
本文中一下兩個應(yīng)用案例,顯示陰影重建形狀(SFS)技術(shù)如何提高目標(biāo)物體的反差并盡可能地抑制背景噪聲,使得更容易地檢測出缺陷并成功讀取字符。
上圖:原圖像;中圖:陰影重建形狀技術(shù)處理后的圖像; 下圖:利用Teledyne DALSA Sherlock 軟件的陰影重建形狀技術(shù)處理后的圖像
陰影重建形狀技術(shù)的廣泛應(yīng)用
下面兩個例子顯示 SFS 陰影重建形狀技術(shù)的應(yīng)用如何解決一些傳統(tǒng)二維算法和預(yù)處理器難于處理的情況。在第一個案例中,制造商試圖檢測瓷磚表面的裂縫或劃痕??墒怯捎诖纱u表面帶有復(fù)雜的紋理背景,使得一般的照明技術(shù)和常規(guī)的二維預(yù)處理器和算法很難及時檢測到異常,因為這些缺陷在標(biāo)準(zhǔn)成像中根本無法察覺。利用 SFS 技術(shù),凹陷、裂縫和刮痕都能夠被輕易從背景中分離,分辨及被檢測出來。
在上面的示例中,可以看到字體和圖案是以凸壓方式印在名片上。 如第一張圖片所示,在文首的圖片中,在名片上的壓印字體其實是很難用肉眼來閱讀的。雖然低角度暗場光源會有幫助,但還是不夠強(qiáng)大和穩(wěn)定。利用 SFS 配合多角度多重光源,可實現(xiàn)具有更高反差和更出色的合成圖像。圖像經(jīng)處理后,名片上的所有字體均清晰顯示 (如上面第二張圖片所示),以便于標(biāo)準(zhǔn)光學(xué)文字辨識算法查驗。
什么是 SFS 陰影重建視覺技術(shù)?
陰影重建形狀(Shape from Shading,簡稱 SFS)是一種將物件形狀和它的二維表面紋理分離的技術(shù)。通常,一般來說,它是用于突顯圖像的三維表面紋理信息,即所謂的形狀圖像,并除去高反光部分的眩光,即所謂的紋理圖像。這一技術(shù)的工作原理是利用分段環(huán)燈或獨(dú)立的條形燈并將多個圖像組合為一個圖像而起作用。拍攝過程會從一系列圖像中提取數(shù)據(jù)以揭示以前隱藏的表面特征或缺陷。
相機(jī)會按照環(huán)燈的逆時針轉(zhuǎn)動方向,拍攝出四個不同照明角度的圖像。接著利用陰影重建形狀(SFS)技術(shù)把四個圖像合成,以顯示三維表面結(jié)構(gòu)。上面的四幀圖片顯示出一個帶紋理的瓶蓋在不同照明角度下拍攝出來的影像,以及經(jīng)SFS 算法處理后的合成圖像。
下圖顯示 SFS 技術(shù)的合成和處理過程。
利用多角度多重光源(使用者可編程)擷取的四個影像
Teledyne DALSA Sherlock 軟件里的 SFS 算法可計算具有 3D 效果的合成圖像,以增強(qiáng)對比度,同時抑制背景噪聲。
形狀圖像
工作原理如下:算法會搜尋從每一照明方向建構(gòu)出來的陰影以及突顯出來的邊緣。每一幀圖像的陰影和邊緣會組合成一個圖像,以展示各部份的高度差異。
這特別有助于偵測刮痕、凹陷、遺失的部件等等。
紋理圖像
該算法還將尋找沒有直接照明的圖像區(qū)域。 然后,它將看起來相同的圖像的所有區(qū)域(即它們沒有眩光)組合到一個沒有眩光的圖像中。 這對于檢查高反射率零件或通過塑料或透明材料覆蓋物或包裹物檢查零件很有用。
如何處理運(yùn)動中目標(biāo)物的檢測
假如部件在檢測過程中處于運(yùn)動狀態(tài),SFS 的嵌入式活動矯正機(jī)制可以處理同一部件在每一圖像擷取時位于不同位置的情況。再通過額外的一副圖像,即所謂的搜尋圖像。通過比較第一副圖像和搜尋圖像,算法會找出部件在圖像擷取時的活動模式,從而識別并對齊正確的像素。
磁磚彩色圖像 磁磚單色圖像
經(jīng) SFS 處理的圖像
SFS 陰影重建技術(shù)的優(yōu)勢
這種先進(jìn)的視覺解決方案具有許多獨(dú)特的優(yōu)勢。 通過先進(jìn)軟件算法配合多角度照明,它有助于消除表面背景效果(例如噪音或色彩),并產(chǎn)生聚焦于具有強(qiáng)烈對比度的特征的輸出圖像,以方便檢查。 它特別適合檢查多種材料(例如金屬,塑料,橡膠和陶瓷)的反射表面和粗糙表面是否有瑕疵(例如凹痕,凹槽,裂縫和劃痕),并清晰顯示難以理解的字符。
推薦閱讀:
設(shè)計電路當(dāng)然要“知己知彼”,開關(guān)穩(wěn)壓器拓?fù)涞脑肼曁匦源笃鸬?/a>
特別推薦
- AMTS 2025展位預(yù)訂正式開啟——體驗科技驅(qū)動的未來汽車世界,共迎AMTS 20周年!
- 貿(mào)澤電子攜手安森美和Würth Elektronik推出新一代太陽能和儲能解決方案
- 功率器件熱設(shè)計基礎(chǔ)(六)——瞬態(tài)熱測量
- 貿(mào)澤開售Nordic Semiconductor nRF9151-DK開發(fā)套件
- TDK推出用于可穿戴設(shè)備的薄膜功率電感器
- 日清紡微電子GNSS兩款新的射頻低噪聲放大器 (LNA) 進(jìn)入量產(chǎn)
- 中微半導(dǎo)推出高性價比觸控 MCU-CMS79FT72xB系列
技術(shù)文章更多>>
- 意法半導(dǎo)體推出首款超低功耗生物傳感器,成為眾多新型應(yīng)用的核心所在
- 是否存在有關(guān) PCB 走線電感的經(jīng)驗法則?
- 智能電池傳感器的兩大關(guān)鍵部件: 車規(guī)級分流器以及匹配的評估板
- 功率器件熱設(shè)計基礎(chǔ)(八)——利用瞬態(tài)熱阻計算二極管浪涌電流
- AHTE 2025展位預(yù)訂正式開啟——促進(jìn)新技術(shù)新理念應(yīng)用,共探多行業(yè)柔性解決方案
技術(shù)白皮書下載更多>>
- 車規(guī)與基于V2X的車輛協(xié)同主動避撞技術(shù)展望
- 數(shù)字隔離助力新能源汽車安全隔離的新挑戰(zhàn)
- 汽車模塊拋負(fù)載的解決方案
- 車用連接器的安全創(chuàng)新應(yīng)用
- Melexis Actuators Business Unit
- Position / Current Sensors - Triaxis Hall
熱門搜索
生產(chǎn)測試
聲表諧振器
聲傳感器
濕度傳感器
石英機(jī)械表
石英石危害
時間繼電器
時鐘IC
世強(qiáng)電訊
示波器
視頻IC
視頻監(jiān)控
收發(fā)器
手機(jī)開發(fā)
受話器
數(shù)字家庭
數(shù)字家庭
數(shù)字鎖相環(huán)
雙向可控硅
水泥電阻
絲印設(shè)備
伺服電機(jī)
速度傳感器
鎖相環(huán)
胎壓監(jiān)測
太陽能
太陽能電池
泰科源
鉭電容
碳膜電位器