基于陰影重建形狀的視覺技術(shù):一種重要的圖像形狀提取技術(shù)及其應(yīng)用
發(fā)布時間:2020-06-18 來源:Steve Zhu, Teledyne DALSA 集團 責任編輯:wenwei
【導(dǎo)讀】自動化視覺檢測已經(jīng)廣泛應(yīng)用于現(xiàn)今的生產(chǎn)環(huán)境的各個領(lǐng)域,從半導(dǎo)體、電子、食品和飲料、醫(yī)藥包裝、汽車制造以及其它不同行業(yè)。而視覺檢測的應(yīng)用可分類為測量、有/無檢測、機器人導(dǎo)航、瑕疵檢測、一維或二維碼識別,以及光學文字識別(OCR)閱讀等等。常規(guī)的 2D 算法通常擅長處理某些特征清晰且定義明確的應(yīng)用,因此檢測更加可靠。 換句話說,目標特征必須穩(wěn)定并且清晰一致地呈現(xiàn),檢測和識別才會比較可靠。
不過就如人生一樣,視覺檢測時常面臨挑戰(zhàn)和困境,譬如一些表面帶有天然的紋理或高度反光的物體;再譬如,一些部件經(jīng)過打磨或沖壓等制造過程,產(chǎn)生了彎曲或帶紋理的表面;還有一些物件帶有浮雕圖案或凹凸不平特征,例如是沖壓或雕刻標記,這些都會為檢測帶來困難。傳統(tǒng)的二維算法和預(yù)處理工具往 往不能可靠的解決這些問題。基于陰影重建形狀(Shape from Shading)技術(shù)則是一種經(jīng)過驗證的更可靠方法,能夠應(yīng)付這些復(fù)雜的檢測任務(wù)。
本文中一下兩個應(yīng)用案例,顯示陰影重建形狀(SFS)技術(shù)如何提高目標物體的反差并盡可能地抑制背景噪聲,使得更容易地檢測出缺陷并成功讀取字符。
上圖:原圖像;中圖:陰影重建形狀技術(shù)處理后的圖像; 下圖:利用Teledyne DALSA Sherlock 軟件的陰影重建形狀技術(shù)處理后的圖像
陰影重建形狀技術(shù)的廣泛應(yīng)用
下面兩個例子顯示 SFS 陰影重建形狀技術(shù)的應(yīng)用如何解決一些傳統(tǒng)二維算法和預(yù)處理器難于處理的情況。在第一個案例中,制造商試圖檢測瓷磚表面的裂縫或劃痕。可是由于瓷磚表面帶有復(fù)雜的紋理背景,使得一般的照明技術(shù)和常規(guī)的二維預(yù)處理器和算法很難及時檢測到異常,因為這些缺陷在標準成像中根本無法察覺。利用 SFS 技術(shù),凹陷、裂縫和刮痕都能夠被輕易從背景中分離,分辨及被檢測出來。
在上面的示例中,可以看到字體和圖案是以凸壓方式印在名片上。 如第一張圖片所示,在文首的圖片中,在名片上的壓印字體其實是很難用肉眼來閱讀的。雖然低角度暗場光源會有幫助,但還是不夠強大和穩(wěn)定。利用 SFS 配合多角度多重光源,可實現(xiàn)具有更高反差和更出色的合成圖像。圖像經(jīng)處理后,名片上的所有字體均清晰顯示 (如上面第二張圖片所示),以便于標準光學文字辨識算法查驗。
什么是 SFS 陰影重建視覺技術(shù)?
陰影重建形狀(Shape from Shading,簡稱 SFS)是一種將物件形狀和它的二維表面紋理分離的技術(shù)。通常,一般來說,它是用于突顯圖像的三維表面紋理信息,即所謂的形狀圖像,并除去高反光部分的眩光,即所謂的紋理圖像。這一技術(shù)的工作原理是利用分段環(huán)燈或獨立的條形燈并將多個圖像組合為一個圖像而起作用。拍攝過程會從一系列圖像中提取數(shù)據(jù)以揭示以前隱藏的表面特征或缺陷。
相機會按照環(huán)燈的逆時針轉(zhuǎn)動方向,拍攝出四個不同照明角度的圖像。接著利用陰影重建形狀(SFS)技術(shù)把四個圖像合成,以顯示三維表面結(jié)構(gòu)。上面的四幀圖片顯示出一個帶紋理的瓶蓋在不同照明角度下拍攝出來的影像,以及經(jīng)SFS 算法處理后的合成圖像。
下圖顯示 SFS 技術(shù)的合成和處理過程。
利用多角度多重光源(使用者可編程)擷取的四個影像
Teledyne DALSA Sherlock 軟件里的 SFS 算法可計算具有 3D 效果的合成圖像,以增強對比度,同時抑制背景噪聲。
形狀圖像
工作原理如下:算法會搜尋從每一照明方向建構(gòu)出來的陰影以及突顯出來的邊緣。每一幀圖像的陰影和邊緣會組合成一個圖像,以展示各部份的高度差異。
這特別有助于偵測刮痕、凹陷、遺失的部件等等。
紋理圖像
該算法還將尋找沒有直接照明的圖像區(qū)域。 然后,它將看起來相同的圖像的所有區(qū)域(即它們沒有眩光)組合到一個沒有眩光的圖像中。 這對于檢查高反射率零件或通過塑料或透明材料覆蓋物或包裹物檢查零件很有用。
如何處理運動中目標物的檢測
假如部件在檢測過程中處于運動狀態(tài),SFS 的嵌入式活動矯正機制可以處理同一部件在每一圖像擷取時位于不同位置的情況。再通過額外的一副圖像,即所謂的搜尋圖像。通過比較第一副圖像和搜尋圖像,算法會找出部件在圖像擷取時的活動模式,從而識別并對齊正確的像素。
磁磚彩色圖像 磁磚單色圖像
經(jīng) SFS 處理的圖像
SFS 陰影重建技術(shù)的優(yōu)勢
這種先進的視覺解決方案具有許多獨特的優(yōu)勢。 通過先進軟件算法配合多角度照明,它有助于消除表面背景效果(例如噪音或色彩),并產(chǎn)生聚焦于具有強烈對比度的特征的輸出圖像,以方便檢查。 它特別適合檢查多種材料(例如金屬,塑料,橡膠和陶瓷)的反射表面和粗糙表面是否有瑕疵(例如凹痕,凹槽,裂縫和劃痕),并清晰顯示難以理解的字符。
推薦閱讀:
設(shè)計電路當然要“知己知彼”,開關(guān)穩(wěn)壓器拓撲的噪聲特性大起底
特別推薦
- 利用自動化技術(shù)賦能中國基礎(chǔ)設(shè)施現(xiàn)代化
- 三極管電路輸入電壓阻抗
- 晶振怎么用,你真的知道嗎?
- 康佳特推出搭載AMD 銳龍嵌入式 8000系列的COM Express緊湊型模塊
- 村田推出3225尺寸車載PoC電感器LQW32FT_8H系列
- 思特威推出超星光級系列4MP圖像傳感器SC485SL
- HOLTEK新推出HT32F59045脈搏血氧儀MCU
技術(shù)文章更多>>
- 貿(mào)澤推出針對基礎(chǔ)設(shè)施和智慧城市的工程技術(shù)資源中心
- “扒開”超級電容的“外衣”,看看超級電容“超級”在哪兒
- DigiKey 誠邀各位參會者蒞臨SPS 2024?展會參觀交流,體驗最新自動化產(chǎn)品
- 提前圍觀第104屆中國電子展高端元器件展區(qū)
- 高性能碳化硅隔離柵極驅(qū)動器如何選型,一文告訴您
技術(shù)白皮書下載更多>>
- 車規(guī)與基于V2X的車輛協(xié)同主動避撞技術(shù)展望
- 數(shù)字隔離助力新能源汽車安全隔離的新挑戰(zhàn)
- 汽車模塊拋負載的解決方案
- 車用連接器的安全創(chuàng)新應(yīng)用
- Melexis Actuators Business Unit
- Position / Current Sensors - Triaxis Hall
熱門搜索