基於陰影重建形狀的視覺技術:一種重要的圖像形狀提取技術及其應用
發布時間:2020-06-18 來源:Steve Zhu, Teledyne DALSA 集團 責任編輯:wenwei
【導讀】自動化視覺檢測已經廣泛應用於現今的生產環境的各個領域,從半導體、電子、食品和飲料、醫藥包裝、汽車製造以及其它不同行業。而視覺檢測的應用可分類為測量、有/無檢測、機器人導航、瑕疵檢測、一維或二維碼識別,以及光學文字識別(OCR)閱讀等等。常規的 2D 算法通常擅長處理某些特征清晰且定義明確的應用,因此檢測更加可靠。 換句話說,目標特征必須穩定並且清晰一致地呈現,檢測和識別才會比較可靠。
不過就如人生一樣,視覺檢測時常麵臨挑戰和困境,譬如一些表麵帶有天然的紋理或高度反光的物體;再譬如,一些部件經過打磨或衝壓等製造過程,產生了彎曲或帶紋理的表麵;還有一些物件帶有浮雕圖案或凹凸不平特征,例如是衝壓或雕刻標記,這些都會為檢測帶來困難。傳統的二維算法和預處理工具往 往不能可靠的解決這些問題。基於陰影重建形狀(Shape from Shading)技術則是一種經過驗證的更可靠方法,能夠應付這些複雜的檢測任務。
本文中一下兩個應用案例,顯示陰影重建形狀(SFS)技術如何提高目標物體的反差並盡可能地抑製背景噪聲,使得更容易地檢測出缺陷並成功讀取字符。


上圖:原圖像;中圖:陰影重建形狀技術處理後的圖像; 下圖:利用Teledyne DALSA Sherlock 軟件的陰影重建形狀技術處理後的圖像
陰影重建形狀技術的廣泛應用
下麵兩個例子顯示 SFS yinyingzhongjianxingzhuangjishudeyingyongruhejiejueyixiechuantongerweisuanfaheyuchuliqinanyuchulideqingkuang。zaidiyigeanlizhong,zhizaoshangshitujiancecizhuanbiaomiandeliefenghuohuahen。keshiyouyucizhuanbiaomiandaiyoufuzadewenlibeijing,shideyibandezhaomingjishuhechangguideerweiyuchuliqihesuanfahennanjishijiancedaoyichang,yinweizhexiequexianzaibiaozhunchengxiangzhonggenbenwufachajiao。liyong SFS 技術,凹陷、裂縫和刮痕都能夠被輕易從背景中分離,分辨及被檢測出來。
在上麵的示例中,可以看到字體和圖案是以凸壓方式印在名片上。 如(ru)第(di)一(yi)張(zhang)圖(tu)片(pian)所(suo)示(shi),在(zai)文(wen)首(shou)的(de)圖(tu)片(pian)中(zhong),在(zai)名(ming)片(pian)上(shang)的(de)壓(ya)印(yin)字(zi)體(ti)其(qi)實(shi)是(shi)很(hen)難(nan)用(yong)肉(rou)眼(yan)來(lai)閱(yue)讀(du)的(de)。雖(sui)然(ran)低(di)角(jiao)度(du)暗(an)場(chang)光(guang)源(yuan)會(hui)有(you)幫(bang)助(zhu),但(dan)還(hai)是(shi)不(bu)夠(gou)強(qiang)大(da)和(he)穩(wen)定(ding)。利(li)用(yong) SFS 配合多角度多重光源,可實現具有更高反差和更出色的合成圖像。圖像經處理後,名片上的所有字體均清晰顯示 (如上麵第二張圖片所示),以便於標準光學文字辨識算法查驗。
什麼是 SFS 陰影重建視覺技術?
陰影重建形狀(Shape from Shading,簡稱 SFS)是(shi)一(yi)種(zhong)將(jiang)物(wu)件(jian)形(xing)狀(zhuang)和(he)它(ta)的(de)二(er)維(wei)表(biao)麵(mian)紋(wen)理(li)分(fen)離(li)的(de)技(ji)術(shu)。通(tong)常(chang),一(yi)般(ban)來(lai)說(shuo),它(ta)是(shi)用(yong)於(yu)突(tu)顯(xian)圖(tu)像(xiang)的(de)三(san)維(wei)表(biao)麵(mian)紋(wen)理(li)信(xin)息(xi),即(ji)所(suo)謂(wei)的(de)形(xing)狀(zhuang)圖(tu)像(xiang),並(bing)除(chu)去(qu)高(gao)反(fan)光(guang)部(bu)分(fen)的(de)眩(xuan)光(guang),即(ji)所(suo)謂(wei)的(de)紋(wen)理(li)圖(tu)像(xiang)。這(zhe)一(yi)技(ji)術(shu)的(de)工(gong)作(zuo)原(yuan)理(li)是(shi)利(li)用(yong)分(fen)段(duan)環(huan)燈(deng)或(huo)獨(du)立(li)的(de)條(tiao)形(xing)燈(deng)並(bing)將(jiang)多(duo)個(ge)圖(tu)像(xiang)組(zu)合(he)為(wei)一(yi)個(ge)圖(tu)像(xiang)而(er)起(qi)作(zuo)用(yong)。拍(pai)攝(she)過(guo)程(cheng)會(hui)從(cong)一(yi)係(xi)列(lie)圖(tu)像(xiang)中(zhong)提(ti)取(qu)數(shu)據(ju)以(yi)揭(jie)示(shi)以(yi)前(qian)隱(yin)藏(zang)的(de)表(biao)麵(mian)特(te)征(zheng)或(huo)缺(que)陷(xian)。
相機會按照環燈的逆時針轉動方向,拍攝出四個不同照明角度的圖像。接著利用陰影重建形狀(SFS)技術把四個圖像合成,以顯示三維表麵結構。上麵的四幀圖片顯示出一個帶紋理的瓶蓋在不同照明角度下拍攝出來的影像,以及經SFS 算法處理後的合成圖像。
下圖顯示 SFS 技術的合成和處理過程。

利用多角度多重光源(使用者可編程)擷取的四個影像

Teledyne DALSA Sherlock 軟件裏的 SFS 算法可計算具有 3D 效果的合成圖像,以增強對比度,同時抑製背景噪聲。
形狀圖像
工作原理如下:suanfahuisouxuncongmeiyizhaomingfangxiangjiangouchulaideyinyingyijituxianchulaidebianyuan。meiyizhentuxiangdeyinyinghebianyuanhuizuhechengyigetuxiang,yizhanshigebufendegaoduchayi。
這特別有助於偵測刮痕、凹陷、遺失的部件等等。
紋理圖像
該算法還將尋找沒有直接照明的圖像區域。 然後,它將看起來相同的圖像的所有區域(即它們沒有眩光)組合到一個沒有眩光的圖像中。 這對於檢查高反射率零件或通過塑料或透明材料覆蓋物或包裹物檢查零件很有用。
如何處理運動中目標物的檢測
假如部件在檢測過程中處於運動狀態,SFS 的(de)嵌(qian)入(ru)式(shi)活(huo)動(dong)矯(jiao)正(zheng)機(ji)製(zhi)可(ke)以(yi)處(chu)理(li)同(tong)一(yi)部(bu)件(jian)在(zai)每(mei)一(yi)圖(tu)像(xiang)擷(xie)取(qu)時(shi)位(wei)於(yu)不(bu)同(tong)位(wei)置(zhi)的(de)情(qing)況(kuang)。再(zai)通(tong)過(guo)額(e)外(wai)的(de)一(yi)副(fu)圖(tu)像(xiang),即(ji)所(suo)謂(wei)的(de)搜(sou)尋(xun)圖(tu)像(xiang)。通(tong)過(guo)比(bi)較(jiao)第(di)一(yi)副(fu)圖(tu)像(xiang)和(he)搜(sou)尋(xun)圖(tu)像(xiang),算(suan)法(fa)會(hui)找(zhao)出(chu)部(bu)件(jian)在(zai)圖(tu)像(xiang)擷(xie)取(qu)時(shi)的(de)活(huo)動(dong)模(mo)式(shi),從(cong)而(er)識(shi)別(bie)並(bing)對(dui)齊(qi)正(zheng)確(que)的(de)像(xiang)素(su)。

磁磚彩色圖像 磁磚單色圖像

經 SFS 處理的圖像
SFS 陰影重建技術的優勢
這種先進的視覺解決方案具有許多獨特的優勢。 通過先進軟件算法配合多角度照明,它有助於消除表麵背景效果(例如噪音或色彩),並產生聚焦於具有強烈對比度的特征的輸出圖像,以方便檢查。 它特別適合檢查多種材料(例如金屬,塑料,橡膠和陶瓷)的反射表麵和粗糙表麵是否有瑕疵(例如凹痕,凹槽,裂縫和劃痕),並清晰顯示難以理解的字符。
推薦閱讀:
設計電路當然要“知己知彼”,開關穩壓器拓撲的噪聲特性大起底
特別推薦
- 噪聲中提取真值!瑞盟科技推出MSA2240電流檢測芯片賦能多元高端測量場景
- 10MHz高頻運行!氮矽科技發布集成驅動GaN芯片,助力電源能效再攀新高
- 失真度僅0.002%!力芯微推出超低內阻、超低失真4PST模擬開關
- 一“芯”雙電!聖邦微電子發布雙輸出電源芯片,簡化AFE與音頻設計
- 一機適配萬端:金升陽推出1200W可編程電源,賦能高端裝備製造
技術文章更多>>
- 三星上演罕見對峙:工會集會討薪,股東隔街抗議
- 摩爾線程實現DeepSeek-V4“Day-0”支持,國產GPU適配再提速
- 築牢安全防線:智能駕駛邁向規模化應用的關鍵挑戰與破局之道
- GPT-Image 2:99%文字準確率,AI生圖告別“鬼畫符”
- 機器人馬拉鬆的勝負手:藏在主板角落裏的“時鍾戰爭”
技術白皮書下載更多>>
- 車規與基於V2X的車輛協同主動避撞技術展望
- 數字隔離助力新能源汽車安全隔離的新挑戰
- 汽車模塊拋負載的解決方案
- 車用連接器的安全創新應用
- Melexis Actuators Business Unit
- Position / Current Sensors - Triaxis Hall
熱門搜索
NFC
NFC芯片
NOR
ntc熱敏電阻
OGS
OLED
OLED麵板
OmniVision
Omron
OnSemi
PI
PLC
Premier Farnell
Recom
RF
RF/微波IC
RFID
rfid
RF連接器
RF模塊
RS
Rubycon
SATA連接器
SD連接器
SII
SIM卡連接器
SMT設備
SMU
SOC
SPANSION

