關(guān)于我們
作者:
來源:光虎光電科技(天津)有限公司
訪問量:90
發(fā)布時(shí)間:2026-02-10 01:20:08
計(jì)算成像的概念對許多人來說可能很新鮮,但這項(xiàng)已經(jīng)相當(dāng)成熟的技術(shù)的價(jià)值卻深遠(yuǎn)。涉及多圖像和多光成像輸入與基于算法的計(jì)算輸出圖像的應(yīng)用,已經(jīng)遠(yuǎn)遠(yuǎn)超出了最初的研發(fā)領(lǐng)域。這項(xiàng)技術(shù)已被應(yīng)用于工業(yè)自動化檢測領(lǐng)域,創(chuàng)新地利用照明組件,成為提供寶貴成像能力的輔助技術(shù)。
廣義來說,“計(jì)算成像”一詞可用于使用算法從多個光學(xué)采集中生成單一圖像的各種技術(shù)。計(jì)算成像的研究涉及無鏡頭、單像素甚至平面相機(jī)。計(jì)算機(jī)視覺的計(jì)算成像實(shí)現(xiàn)更加成熟,針對特定應(yīng)用領(lǐng)域的組件和軟件比以往任何時(shí)候都更容易使用。在兩種常見的應(yīng)用場景中,照明設(shè)備和控制裝置有助于關(guān)鍵的成像能力。這些應(yīng)用場景包括光度立體成像(或稱形狀從著色成像),用于突出幾何特征,以及高分辨率彩色成像。
支持光度立體光照(通過陰影獲得形狀)
光度立體成像與三維成像密切相關(guān)。雖然光度立體圖像不是場景的直接物理三維表示,但它表現(xiàn)圖像中特征的幾何形狀,成像過程更加容易實(shí)現(xiàn)。通常使用單一攝像機(jī),并將多個光源在多張圖像上組合成軟件,這些軟件可由許多機(jī)器視覺組件和軟件庫提供并支持。
光度立體概述
圖1:計(jì)算機(jī)視覺計(jì)算成像中的光度立體利用多角度照明提取高度與周圍表面不同的特征。圖片來源:Smart Vision Lights
圖2:光度立體成像的輸出取決于處理算法的選擇。
同樣的方向輸入數(shù)據(jù)可通過Matrox Design Assistant的均曲率(左上角)、局部對比度(右上角)、紋理(左下角)和高斯曲率(右下角)算法顯示。
其他算法包括反照率和局部形狀。正確的選擇取決于被成像的物體和被檢測的特征類型。圖片來源:Smart Vision Lights
光度立體成像的廣泛用途是突出圖像中物體或場景中缺乏灰度內(nèi)容但單個特征相對于表面具有幾何變化的特征。例如,基于側(cè)壁圖形和字符對輪胎進(jìn)行識別成像。利用多圖像表示提供的信息,灰度圖像可以使用典型的機(jī)器視覺工具處理,以執(zhí)行缺陷檢測、光學(xué)光學(xué)掃描(OCR/OCV)和測量等檢查任務(wù)。帶有壓印或壓印碼或字符的表面也是光度立體成像的良好候選。同樣,許多具有低對比度特征但幾何結(jié)構(gòu)的產(chǎn)品和組件也能從這種成像技術(shù)中受益(見圖3)。
圖3:高爾夫球檢測的并排對比,使用標(biāo)準(zhǔn)彩色圖像(左)和光度立體圖像(右)。
在視覺圖像的表面紋理光澤和鏡面高光中幾乎察覺不到的裂紋,在光度立體中很容易被發(fā)現(xiàn)。
光度立體圖像中的計(jì)算表面去除了使彩色圖像困難的視覺噪點(diǎn),但保留了對檢查非常重要的表面細(xì)節(jié)。圖片來源:Smart Vision Lights
光度立體成像照明的實(shí)現(xiàn)
光度立體成像高度依賴軟件和算法,用于組合和處理物體的不同視圖。這種多圖像計(jì)算技術(shù)的實(shí)現(xiàn)始于照明組件。通常,單臺相機(jī)通常置于物體中心,拍攝四張獨(dú)立圖像。每個攝像頭在視場周圍的時(shí)鐘角度不同——通常為0度、90度、180度和270度(或更非正式地說,是在相機(jī)矩形或方形視場的四邊)。每個燈光的照明角度決定了將要突出的特征。
圖4:左側(cè)為LED可編程序列控制器,右側(cè)為多區(qū)燈具套件。
這些即插即用解決方案易于實(shí)施,兼容通用的硬件和軟件,并使計(jì)算成像對各級用戶開放。圖片來源:Smart Vision Lights
利用灰度相機(jī)和計(jì)算成像拍攝高分辨率彩色圖像
照明與計(jì)算成像結(jié)合的另一個例子是獲取高分辨率彩色圖像。在單傳感器相機(jī)中,彩色圖像通過在每個像素上制造紅、綠或藍(lán)寬通濾鏡來生成。在大多數(shù)RGB成像中,這種技術(shù)被稱為拜耳濾波,因?yàn)闉V波器在像素上的布局。每個像素只有三種顏色中的一種,最終的全彩圖像必須通過稱為去拜耳(或去拼接)的過程從相鄰像素重建。由于這種像素組合,所得圖像的有效空間分辨率相較于傳感器的實(shí)際分辨率顯著降低。解決分辨率損失的有效且簡單的方法是實(shí)現(xiàn)多光譜照明計(jì)算成像。
使用灰度相機(jī)執(zhí)行彩色成像
能夠用多色(或多光譜)照亮視場的光源,可以模擬彩色相機(jī)在沒有像素級濾鏡的相機(jī)上使用的寬帶濾波。在這種計(jì)算成像實(shí)現(xiàn)中,獲得的多張圖像通過三種寬波長顏色——紅、綠、藍(lán)——對零件進(jìn)行照明。與光度立體聲類似,可以使用合適的照明控制器進(jìn)一步簡化采集過程。生成的圖像包含了場景中紅、綠、藍(lán)內(nèi)容的全分辨率表示。在軟件中,這三張圖像可以根據(jù)具體應(yīng)用需求輕松組合成多通道彩色圖像,并有相應(yīng)的結(jié)構(gòu)(見圖5)。
圖5:由單色相機(jī)拍攝的三張圖像,每張圖像都用紅、綠或藍(lán)光閃爍,合成一張全彩圖像,
與在色彩插值過程中丟失分辨率的拜耳彩色圖像相比,分辨率得以保持。圖片來源:Smart Vision Lights
在某些情況下,不僅空間分辨率,色彩保真度也可能比簡單的拜耳濾波更好。照明源的一致性可以帶來一種可靠性和色彩還原,在某些應(yīng)用中可能超過傳感器濾波的能力。這種計(jì)算成像技術(shù)為用戶帶來了彩色成像的優(yōu)勢,同時(shí)避免了拜耳彩色相機(jī)和片上彩色濾鏡所帶來的分辨率損失。
運(yùn)動中的零件
計(jì)算成像不僅適用于固定的部件或物體,也可以輕松應(yīng)用于部件(甚至成像組件)運(yùn)動的應(yīng)用。該技術(shù)涉及細(xì)致的規(guī)范,有時(shí)還需額外處理。與所有涉及運(yùn)動部件的成像應(yīng)用一樣,為了減少運(yùn)動模糊,關(guān)鍵指標(biāo)是運(yùn)動速度和每張圖像的曝光(或頻閃)時(shí)長。在光度立體成像中,還必須考慮多圖像采集速率以及部件在視場內(nèi)的運(yùn)動量,貫穿總采集時(shí)間。
如果零件移動速度足夠慢且成像速率足夠高,獲得的多張圖像在零件運(yùn)動上可能足夠接近,從而形成合適組合圖像。得益于低成本、高速CMOS成像儀的興起,這一過程比以往任何時(shí)候都更容易。如果場景內(nèi)移動太大,只需使用更快的CMOS攝像機(jī)即可。
如果零件在圖像間移動過多且無法使用更快的相機(jī),可能需要對圖像進(jìn)行預(yù)處理以進(jìn)行數(shù)字對齊。這包括將每幅圖像上的適當(dāng)特征與第一張圖像進(jìn)行比較,然后應(yīng)用相應(yīng)的平移以匹配這些特征,以便后續(xù)的多圖像計(jì)算(見圖6)。
圖6:放大彩色文字的最后幾行,會顯示彩色相機(jī)在像素層面的分辨率下降,清晰度下降,出現(xiàn)色彩棋盤檢查。
計(jì)算成像色彩保持真實(shí),分辨率穩(wěn)定,背景均勻性得益于單色相機(jī)更高的靈敏度和更低的噪聲。圖片來源:Smart Vision Lights
軟件工具可以在多個捕捉幀中重新對齊物體到像素,甚至糾正旋轉(zhuǎn)變化。大多數(shù)機(jī)器視覺庫中的標(biāo)準(zhǔn)工具可以校正運(yùn)動,使這些計(jì)算成像技術(shù)發(fā)揮作用,即使部分在序列收集時(shí)未靜止或未被定位。
另一種技術(shù)是外部跟蹤每個圖像之間零件的運(yùn)動(例如在傳送帶上),然后直接基于已知的圖像物理偏移量進(jìn)行變換。當(dāng)然,在所有情況下,拍攝圖像時(shí)零件必須保持在相機(jī)的視野內(nèi)。該方法特別適用于編碼傳送帶上移動的物體以及用線掃描相機(jī)拍攝的圖像。
雖然看起來更復(fù)雜的解決方案,計(jì)算成像實(shí)際上可以簡化一些標(biāo)準(zhǔn)視覺成像難以解決的問題。計(jì)算成像,尤其是借助當(dāng)今照明組件和控制器的技術(shù),已成為一種易于實(shí)現(xiàn)且有價(jià)值的成像技術(shù),適用于各種機(jī)器視覺應(yīng)用。