機(jī)器視覺:系統(tǒng)不穩(wěn)定性因素分析
1 引言
? ?機(jī)器視覺的研究始于20世紀(jì)50年代二維圖像的模式識別[1],它起初被設(shè)計(jì)用來代替人眼從事檢測識別的工作,可以大大提高檢測的工作效率以及降低人眼疲勞帶來的檢測結(jié)果的不一致性。機(jī)器視覺檢測發(fā)展至今,在許多方面已經(jīng)發(fā)展到可以完成人眼難以完成的工作,如高精度的測量以及對特定產(chǎn)品的高速分級,還有利用紅外線、紫外線、X射線等檢測技術(shù)檢測人類視覺無法檢測到的事物[2]。但機(jī)器視覺系統(tǒng)設(shè)計(jì)的難點(diǎn)在于如何保證其可靠性與穩(wěn)定性,無論從光源,相機(jī)等硬件上還是從圖像處理軟件上的設(shè)計(jì),對機(jī)器視覺的穩(wěn)定性都有重要影響。
? ?
2 機(jī)器視覺系統(tǒng)組成
典型的機(jī)器視覺系統(tǒng)一般由圖像的獲取、圖像的處理和分析、輸出或顯示三部分組成。按照視覺系統(tǒng)組成結(jié)構(gòu)主要分為兩大類:PC或板卡式機(jī)器視覺系統(tǒng)(PC-Based Vision System),以及嵌入式機(jī)器視覺系統(tǒng),亦稱“智能相機(jī)(SmartCamera)?!?/span>
??
?2.1 PC-Based視覺系統(tǒng)
? ?PC式視覺系統(tǒng)是一種基于個人計(jì)算機(jī)(PC)的視覺系統(tǒng),其圖像獲取設(shè)備一般由光源、光學(xué)鏡頭、CCD或CMOS攝像機(jī)以及圖像采集卡組成,圖像處理與分析設(shè)備以一臺PC機(jī)為基礎(chǔ)配合圖像處理軟件,一般以顯示器作為圖像處理結(jié)果的顯示輸出。
PC-Based視覺系統(tǒng)發(fā)展到現(xiàn)在,可以針對不同的工作壞境滿足各式需求,如相機(jī)的選擇可以從分辨率200萬到1200萬,幀率從0到數(shù)百幀每秒甚至更高。同時(shí),其通訊方式非常靈活,可以直接使用USB(USB2.0/USB3.0)接口、千兆網(wǎng)口(GigE)接口或著很方便的擴(kuò)展使用火線(1394a/1394b)接口以及Camera link等接口的相機(jī),在短距離情況下抗干擾性很強(qiáng)。速度上和精度上,PC-Based系統(tǒng)可以根據(jù)需求配置高速、高分辨率相機(jī)和高速的處理器,可以達(dá)到運(yùn)動速度快或精度要求高的檢測要求。
但同時(shí),基于PC的機(jī)器視覺的應(yīng)用系統(tǒng)尺寸較大,除相機(jī)外,還需圖像采集卡、工控機(jī)、各種連接線纜等,在一些對設(shè)備體積限制較嚴(yán)的場合,如生產(chǎn)裝置內(nèi)部、移送裝置上就難以滿足要求了。同時(shí)其結(jié)構(gòu)復(fù)雜,多數(shù)人認(rèn)為PC-Based系統(tǒng)包含較多的外部部件,各部件由不同廠家生產(chǎn),涉及兼容性和連接插件等中間環(huán)節(jié),集成度較低,從而導(dǎo)致其穩(wěn)定性下降。相對于集成度高的智能相機(jī),其開發(fā)周期也相對較長。
??
?2.2 嵌入式視覺系統(tǒng)
? ?智能相機(jī)主要由圖像采集單元、通型信塊,圖像處理單元(處理軟件)三大組成部分,圖像采集單元類似于傳統(tǒng)的普通相機(jī),將光信號轉(zhuǎn)為模擬信號或數(shù)字信號,相當(dāng)于CCD/CMOS相機(jī)和圖像采集卡,圖像處理單元相當(dāng)于PC-Based 系統(tǒng)的PC部分,是嵌入式視覺的核心,包括圖像處理、存儲單元以及相應(yīng)的處理軟件,一般有DSP、FPGA和RISC三種硬件平臺用來完成圖像處理的運(yùn)算,軟件可由外部寫入,但一般成熟的嵌入式機(jī)器視覺系統(tǒng)均將通用的圖相處里算法封裝為固定的模塊,開發(fā)人員可以根據(jù)需要選擇調(diào)用。通信模塊也是智能相機(jī)的重要組成部分,主要是將圖像處理的結(jié)果輸出到外部,智能相機(jī)一般內(nèi)置以太網(wǎng)口通信模塊,且可支持多種網(wǎng)絡(luò)和總線協(xié)議。
? ?與PC-Based 的視覺系統(tǒng)相比,嵌入式視覺系統(tǒng)存在一些明顯的優(yōu)勢,比如由于其圖像獲取單元與處理單元直接相連接,在像素一致性方面較好,抗干擾能力性較強(qiáng),且由于智能相機(jī)具有較高的集成水平,體積也比PC-Based視覺系統(tǒng)要小很多,可適用于更多惡劣的工作環(huán)境。由于智能相機(jī)的高度集成性,它的圖像采集、處理與通信部件在設(shè)計(jì)與生產(chǎn)的過程中經(jīng)過了專業(yè)人員的可靠性測試,所以其工作穩(wěn)定性要明顯高于PC-Based系統(tǒng),由于結(jié)構(gòu)簡單,其維護(hù)也相對于PC-Based系統(tǒng)要簡單的多。軟件上,成熟的智能相機(jī)基本已經(jīng)固化了視覺算法模塊和通訊模塊等,用戶只需要簡單的調(diào)用即可,不需要像PC-Based系統(tǒng)一樣進(jìn)行系統(tǒng)底層的瑣碎的開發(fā),所以開發(fā)簡單,開發(fā)周期也短。
? ?但相對于PC-Based視覺系統(tǒng),嵌入式視覺系統(tǒng)也存在一定劣勢,比如在精度和速度上,由于體積和圖像處理能力的限制,智能相機(jī)很難像PC-Based系統(tǒng)一樣,能夠很方便的將高速相機(jī)或高分辨相機(jī)集成到視覺系統(tǒng)中,在目前的技術(shù)條件下,通常實(shí)現(xiàn)同樣分辨率和速度的兩種系統(tǒng),智能相機(jī)由于需要更高要求的生產(chǎn)工藝以及電路設(shè)計(jì)問題,會需要高昂的成本。同時(shí),智能相機(jī)高度集成化的特點(diǎn)也給它帶來了靈活性不足的問題,它的硬件和軟件開發(fā)相對固定,可擴(kuò)展性較PC-Based系統(tǒng)差,在復(fù)雜的機(jī)器視覺場景下,有時(shí)單靠智能相機(jī)難以完成系統(tǒng)的功能設(shè)計(jì),而PC-Based系統(tǒng)卻可根據(jù)實(shí)際情況選用性能合適、價(jià)格便宜的設(shè)備,也可以選擇不同的第三方軟件來完成圖像處理等工作。
? ?
3 機(jī)器視覺檢測系統(tǒng)的不穩(wěn)定性因素
? ?3.1 成像系統(tǒng)簡介及不穩(wěn)定性因素
成像系統(tǒng)主要由相機(jī)(CCD/CMOS)、鏡頭和光源組成,是視覺檢測的基礎(chǔ),成像系統(tǒng)的設(shè)計(jì)目的就是獲取合格的原始圖像,并且一個好的成像系統(tǒng)要保證系統(tǒng)運(yùn)行期間圖像質(zhì)量的穩(wěn)定,穩(wěn)定的圖像抓取是視覺檢測穩(wěn)定性的基本保證。
??
?3.3.1 工業(yè)相機(jī)對成像穩(wěn)定性的影響
對視覺系統(tǒng)設(shè)計(jì)者來說,工業(yè)相機(jī)的選擇主要考慮其傳感器類型、分辨率和幀率,其中傳感器分CCD與CMOS兩種,CMOS圖像傳感器集成度高,各元件、電路之間距離很近,干擾比較嚴(yán)重,成像噪聲高,CCD傳感器相機(jī)相對于CMOS相機(jī)具有靈敏度高、噪聲低和響應(yīng)速度快的特點(diǎn),在穩(wěn)定性方面,CCD相機(jī)的抗沖擊與震動性也較強(qiáng),一般來說,CCD傳感器相機(jī)在成像質(zhì)量上和穩(wěn)定性方面要優(yōu)于CCD相機(jī)。
? ?影響相機(jī)成像質(zhì)量的另一重要因素就是相機(jī)的鏡頭,鏡頭除了需要根據(jù)具體工作狀況選擇合適的焦距、景深和光圈等參數(shù)外,一個影響系統(tǒng)檢測精度的重要因素就是圖像的幾何畸變誤差,它是光學(xué)透鏡固有的透視失真,受到制作工藝的影響,無法消除,只能彌補(bǔ),雖然現(xiàn)在許多工業(yè)相機(jī)通過各種方法彌補(bǔ)鏡頭畸變產(chǎn)生的誤差,但在高精度的檢測領(lǐng)域,幾何畸變?nèi)匀粫z測精度產(chǎn)生影響。
? ?
3.1.2 光源對成像穩(wěn)定性的影響
? ?光源具有放大圖像的特征與缺陷、削弱混亂及背景的作用,直接影響輸入數(shù)據(jù)的質(zhì)量,由于沒有通用的照明設(shè)備,光源的設(shè)計(jì)一直是機(jī)器視覺系統(tǒng)的難點(diǎn),通常不僅需要針對每個特定的應(yīng)用實(shí)例來選擇光源類型,還要根據(jù)具體環(huán)境對光源安裝、光源的照射方式進(jìn)行斟酌,以達(dá)到最佳效果。不同類型的光源穩(wěn)定性存在差異,常見的可見光光源有LED光源、鹵素?zé)簟⑷展鉄艉外c光燈等,可見光最大的缺點(diǎn)是不能持續(xù)穩(wěn)定的輸出光能,如日光燈,在使用的第一個100小時(shí)內(nèi),光能會下降15%左右[4],隨著使用時(shí)間的增加,光能輸出持續(xù)下降。除可見光外,在高檢測任務(wù)的場景下,也常采用X射線和超聲波等不可見光作為光源,可以持續(xù)穩(wěn)定的輸出光能,但不利于檢測系統(tǒng)的操作,且價(jià)格昂貴。光源的不均勻性也會對圖像質(zhì)量產(chǎn)生影響,不同方向的發(fā)光強(qiáng)度存在差別也會引起噪聲??梢姽庵蠰ED光源的穩(wěn)定性和壽命相對于鹵素?zé)?、日光燈等要好,響?yīng)時(shí)間短,可自由選擇顏色,運(yùn)行成本也低,得到了廣泛的應(yīng)用。光源的照射方式可分為背向照明、前向照明、結(jié)構(gòu)光照明和頻閃照明,其設(shè)計(jì)要點(diǎn)是以突出圖像特征為準(zhǔn)則。
? ?3.2 軟件穩(wěn)定性
? ?檢測軟件穩(wěn)定性對機(jī)器視覺的影響毋庸置疑,視覺系統(tǒng)最終會在計(jì)算機(jī)上利用軟件采用有針對性的算法進(jìn)行圖像濾波,邊緣檢測和邊緣提取等一系列圖像處理,不同的圖像處理和分析手段以及不同的檢測方法與計(jì)算公式,都會帶來不同的誤差,算法優(yōu)劣決定測量精度的高低。
? ?
3.3 環(huán)境因素影響
? ?視覺系統(tǒng)工作的測量環(huán)境包括溫度、光照、電源變化、灰塵、濕度以及電磁干擾等[5],好的環(huán)境是視覺系統(tǒng)正常運(yùn)行的保障。外界光照會影響照射在被測物體上的總光強(qiáng),增加圖像數(shù)據(jù)輸出的噪聲,電源電壓的變化也會導(dǎo)致光源不穩(wěn),產(chǎn)生隨時(shí)間變化的噪聲。溫度變化也會對相機(jī)的性能產(chǎn)生影響,相機(jī)在出廠時(shí)都會標(biāo)志正常工作的溫度范圍,過熱或過冷都會影響相機(jī)的正常工作。電磁干擾是工業(yè)檢測現(xiàn)場不可避免的干擾因素,它對工業(yè)相機(jī)電路、數(shù)據(jù)信號傳輸電路等弱電電路的影響尤為嚴(yán)重,合格的視覺產(chǎn)品會在出廠時(shí)經(jīng)嚴(yán)格的抗干擾測試,極大的降低了外界電磁干擾對硬件電路的影響。
? ?
3.3 機(jī)械結(jié)構(gòu)定位影響
除成像系統(tǒng)硬件外,相機(jī)與物體之間的相對位置關(guān)系也會對圖像質(zhì)量的穩(wěn)定性產(chǎn)生影響,如相機(jī)或工件的機(jī)械支撐結(jié)構(gòu)如果存在震動,會影響檢測精度,且這也是一個難以排查的問題。在動態(tài)下檢測工件,需要考慮運(yùn)動模糊對圖像精度的影響(模糊像素 = 物體運(yùn)動速度*相機(jī)曝光時(shí)間)。另外,CCD相機(jī)與被測零件之間在理性狀況下應(yīng)為相機(jī)鏡頭光軸垂直于零件所在平面,但實(shí)際使用中,由于安裝誤差或相機(jī)、工件制造誤差等原因不能保證光軸與被測平面完全垂直,存在一定角度偏差,同樣對測量精度產(chǎn)生影響。
? ?
4 保證穩(wěn)定性的解決方法
? ?
4.1 硬件選擇與設(shè)計(jì)
? ?成像系統(tǒng)的硬件選擇尤為重要,通過以上對CCD相機(jī)與CMOS相機(jī)的分析可知,如果沒有特殊的要求,比如攝像速度較高(CMOS具有更快的讀出速度),CCD傳感器相機(jī)是保證圖像質(zhì)量和穩(wěn)定性的首要選擇,其中相機(jī)的分辨率和幀率主要根據(jù)檢測精度和檢測速度來選擇,通過計(jì)算檢測物體的視場大小與相機(jī)與被測物之間的距離決定合適的分辨率,考慮被測物體的運(yùn)動速度與檢測精度要求選擇相機(jī)的幀率。
? ?對于鏡頭,主要需要根據(jù)相機(jī)的極限分辨率來選取對應(yīng)的鏡頭分辨率,選擇大于相機(jī)極限分辨率的相機(jī)即可,還需要根據(jù)工作距離與視野計(jì)算鏡頭的焦距,并根據(jù)被測物體與相機(jī)的距離變化選用合適的景深。在高精度測量下,要保證測量精度,除以上參數(shù)的正確選擇之外,可以選擇幾何畸變相對于普通鏡頭小的遠(yuǎn)心鏡頭,遠(yuǎn)心鏡頭不僅幾何畸變較小,還能減小物體距離變化帶來的誤差。
? ?如無特殊要求而采用X射線等不可見光光源,對于可見光光源,應(yīng)優(yōu)先考慮使用LED光源,在對采集圖像質(zhì)量有決定性影響的光源均勻性上,LED光源明顯優(yōu)于鹵素?zé)?、日光燈等其它光源,而且它還具有耗電低、使用壽命長和對環(huán)境無污染的優(yōu)點(diǎn)。同時(shí),為了減小外界光對視覺系統(tǒng)穩(wěn)定性的影響,可以通過增加光源箱的方式屏蔽外界光源。
? ?
4.2 軟件設(shè)計(jì)
? ?
4.2.1 標(biāo)定
? ?相機(jī)與鏡頭由于工藝的原因,總會或多或少地導(dǎo)致獲取的原始圖像存在幾何畸變誤差,這種誤差不能通過硬件的優(yōu)化消除,但可以利用標(biāo)定軟件算法來減弱這種誤差對測量精度的影響,相機(jī)標(biāo)定的基本原理是通過相機(jī)對視場內(nèi)不同角度標(biāo)準(zhǔn)圖像(通常使用標(biāo)定板)的拍攝來求出相機(jī)的內(nèi)、外參數(shù)以及畸變參數(shù),建立三維坐標(biāo)與圖像坐標(biāo)的映射關(guān)系,從而對得到的原始畸變圖像進(jìn)行矯正,通常相機(jī)標(biāo)定在有精度要求的測量和定位中必須使用。
? ?
4.2.2 圖像處理
? ?硬件采集到的原始圖像最終要通過圖濾波、邊緣檢測等算法才能完成檢測功能,實(shí)現(xiàn)檢測結(jié)果的輸出。其中圖像濾波可以抑制采集到圖像中存在的噪聲,降低光源與灰度值不穩(wěn)定的問題,提高信噪比,其本質(zhì)是通過算法保證圖像上像素點(diǎn)間最小方差最小。對于高精度測量系統(tǒng)來說,粗邊界像素級精度往往難以滿足要求,亞像素級邊緣定位技術(shù)在像素級別位置通過細(xì)分算法與擬合方法結(jié)合可以使邊緣位置達(dá)到0.1甚至0.01的亞像素級精度,系統(tǒng)檢測精度得到保證。
? ?
5 總結(jié)
? ?總的來說,機(jī)器視覺系統(tǒng)的設(shè)計(jì)需要考慮多方面的因素,除了根據(jù)需求按照常規(guī)選型參數(shù)選擇相應(yīng)參數(shù)的設(shè)備之外,還需要考慮光源的穩(wěn)定性、相機(jī)的畸變誤差,以及被檢測物體與相機(jī)之間的相對運(yùn)動等因素給檢測系統(tǒng)帶來的穩(wěn)定性干擾與測量誤差。只有綜合考慮這些因素進(jìn)行視覺系統(tǒng)的優(yōu)化設(shè)計(jì),才能建立穩(wěn)定、合格的機(jī)器視覺檢測系統(tǒng)。