結(jié)構(gòu)光視覺(jué)的優(yōu)點(diǎn):
非接觸、信息量大、測(cè)精度高、抗干擾能力強(qiáng)。
結(jié)構(gòu)光視覺(jué)傳感器參數(shù)的標(biāo)定包括:攝像機(jī)參數(shù)標(biāo)定、結(jié)構(gòu)光平面參數(shù)標(biāo)定。
結(jié)構(gòu)光視覺(jué)測(cè)量原理圖
我們不考慮鏡頭的畸變,將相機(jī)的成像模型簡(jiǎn)化為小孔成像模型,則特征點(diǎn)的圖像坐標(biāo)Pf 與其在攝像機(jī)坐標(biāo)系下的三維坐標(biāo)P 之間的關(guān)系可表示為:
其中:(u,v)是特征點(diǎn)的圖像坐標(biāo),(u0,v0) 光軸中心的圖像坐標(biāo),(kx ky )是X 軸,Y 軸方向的放大系數(shù),(xc yc zc) 是特征點(diǎn)在攝像機(jī)坐標(biāo)系下坐標(biāo), Mc 是攝像機(jī)內(nèi)參數(shù)矩陣。
結(jié)構(gòu)光視覺(jué)投影成像模型:
設(shè)結(jié)構(gòu)光在攝像頭坐標(biāo)系的平面方程為:
依據(jù)激光條紋特征點(diǎn)圖像坐標(biāo)就可以得到其在攝像機(jī)坐標(biāo)系下的三維坐標(biāo)
相機(jī)參數(shù)標(biāo)定:
采用張正友提出的基于2D平面棋盤(pán)格的攝像機(jī)標(biāo)定方法,利用Matlab攝像頭標(biāo)定工具完成相機(jī)參數(shù)的標(biāo)定。
攝像機(jī)標(biāo)定工具箱主窗口:
用于攝像機(jī)標(biāo)定的棋盤(pán)格圖像:
得到攝像機(jī)內(nèi)參數(shù)矩陣:
結(jié)構(gòu)光平面參數(shù)標(biāo)定:
首先,激光器投射結(jié)構(gòu)光平面到平面棋盤(pán)格上形成激光條紋,并通過(guò)CCD 攝像機(jī)采集激光條紋圖像。然后,對(duì)圖像進(jìn)行處理,提取激光條紋上的兩個(gè)特征點(diǎn)。控制機(jī)器人按照一定的約束進(jìn)行運(yùn)動(dòng),從一個(gè)標(biāo)定位置移動(dòng)到另一個(gè)位置,從而產(chǎn)生兩條不共線(xiàn)的激光條紋,利用上述相同的圖像處理方法再次提取激光條紋上的兩個(gè)特征點(diǎn)。最后,利用結(jié)構(gòu)光平面上的四個(gè)點(diǎn)來(lái)確定結(jié)構(gòu)光平面方程參數(shù)。該方法可以在攝像機(jī)參數(shù)標(biāo)定過(guò)程中,同時(shí)完成結(jié)構(gòu)光平面方程參數(shù)的標(biāo)定。同時(shí),該方法不需要加工高精度的三維標(biāo)定靶標(biāo),也不需要手工測(cè)量,標(biāo)定過(guò)程簡(jiǎn)單實(shí)用。
試驗(yàn)裝備:
一個(gè)六自由度機(jī)器人,一個(gè)CCD 工業(yè)攝像機(jī),一個(gè)激光器和一個(gè)平面棋盤(pán)格靶標(biāo)。
結(jié)構(gòu)光平面參數(shù)標(biāo)定系統(tǒng)示意圖:
攝像機(jī)坐標(biāo)系位于攝像機(jī)中心,而世界坐標(biāo)系位于平面棋盤(pán)格靶標(biāo)上。一個(gè)特征點(diǎn)在攝像機(jī)坐標(biāo)系下坐標(biāo)與其在世界坐標(biāo)系下坐標(biāo)之間的對(duì)應(yīng)關(guān)系可以用下式來(lái)表達(dá):
標(biāo)定過(guò)程如下:
(1)圖像獲取:
圖像的獲取是在攝機(jī)參數(shù)標(biāo)定過(guò)程中同時(shí)完成。 首先將棋盤(pán)格放在工作臺(tái)上, 在這個(gè)初始位置,利用攝像機(jī)采集一幅圖,如圖 (a) 所示 。保持?jǐn)z像機(jī)和棋盤(pán)格的位置姿態(tài)不變,打開(kāi)激光器讓條紋投射到棋盤(pán)格上, 再采集一幅圖像如圖 (b) 所示:
然后改變棋盤(pán)格和攝像機(jī)的相對(duì)位姿,使前后形成的兩條激光條紋在空間上不共線(xiàn),即可確定一個(gè)唯一的結(jié)構(gòu)光平面。
(2)圖像處理:
圖像處理的目的是提取激光條紋上特征點(diǎn)的圖像坐標(biāo)。
分為圖像感興趣區(qū)域(ROI)確定、自適應(yīng)閾值分割、骨架細(xì)化和特征點(diǎn)計(jì)算。
1)圖像ROI確定
通過(guò)觀(guān)察圖像看出,激光條紋大致平行于圖像的u 軸,而且激光條紋處像素的灰度值高于圖像中其它像素的灰度值,所以圖像的ROI 可以通過(guò)對(duì)每行像素灰度值進(jìn)行求和得到:
2)閾值分割
閾值分割分為全局閾值分割、局部閾值分割和自適應(yīng)閾值分割。最常用的自適應(yīng)閾值分割是Otsu方法,該方法使用統(tǒng)計(jì)學(xué)的方法確定最優(yōu)的閾值,適用于一般的圖像,但是不太適合于棋盤(pán)格上激光條紋的分割。
根據(jù)圖像中激光條紋的灰度值高于圖像中其它像素的灰度值以及激光條紋所在區(qū)域比較集中的特點(diǎn),利用圖像ROI 內(nèi)行像素灰度值之和計(jì)算激光條紋的自適應(yīng)閾值:
3) 骨架細(xì)化:
自適應(yīng)閾值分割以后的激光條紋具有一定的寬度,直接處理計(jì)算量巨大而且精度較低,需要對(duì)圖像進(jìn)行骨架細(xì)化得到單像素的線(xiàn)。
采用下面文獻(xiàn)中所提出的快速骨架細(xì)化方法:
該方法通過(guò)迭代提取圖像骨架,每個(gè)迭代過(guò)程分為兩步,第一步去除東南邊緣和西北角的點(diǎn),第二步去除西北邊緣和東南角的點(diǎn)。
Pi分布情況如下:
第二個(gè)迭代過(guò)程將上述條件的c、d條件更改為:
4)特征提取:
選取激光條紋中心線(xiàn)上的兩個(gè)點(diǎn)作為激光條紋的特征點(diǎn),為了提高激光條紋中心線(xiàn)的提取精度,利用最小二乘法擬合方法對(duì)細(xì)化后的激光條紋直線(xiàn)進(jìn)行處理。
激光條紋特征點(diǎn)提取過(guò)程如下:
標(biāo)定棋盤(pán)格平面內(nèi)任意一點(diǎn)與法向量關(guān)系
由上圖可知:
由特征點(diǎn)的圖像坐標(biāo)Pf 與其在攝像機(jī)坐標(biāo)系下的三維坐標(biāo)P 之間的關(guān)系知:
得到棋盤(pán)格上任意一點(diǎn)在攝像機(jī)坐標(biāo)系下的zc 坐標(biāo)
得到激光條紋特征點(diǎn)在攝像機(jī)坐標(biāo)系下的坐標(biāo)值
至此,得到四個(gè)激光條紋特征點(diǎn)的圖像坐標(biāo),由上式得四個(gè)激光條紋特征點(diǎn)在攝像機(jī)坐標(biāo)系下的坐標(biāo),由于三點(diǎn)確定一個(gè)平面方程,使用最小二乘法計(jì)算結(jié)構(gòu)光平面方程如下:
至此,完成結(jié)構(gòu)光平面方程的參數(shù)的標(biāo)定。
審核編輯:湯梓紅
-
3D
+關(guān)注
關(guān)注
9文章
2952瀏覽量
109478 -
攝像機(jī)
+關(guān)注
關(guān)注
3文章
1688瀏覽量
61074 -
結(jié)構(gòu)光
+關(guān)注
關(guān)注
0文章
74瀏覽量
13442
原文標(biāo)題:詳解3D結(jié)構(gòu)光如何標(biāo)定
文章出處:【微信號(hào):機(jī)器視覺(jué)沙龍,微信公眾號(hào):機(jī)器視覺(jué)沙龍】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
發(fā)布評(píng)論請(qǐng)先 登錄
對(duì)于結(jié)構(gòu)光測(cè)量、3D視覺(jué)的應(yīng)用,使用100%offset的lightcrafter是否能用于點(diǎn)云生成的應(yīng)用?
3D掃描的結(jié)構(gòu)光
裸眼3D顯示技術(shù)詳解

首發(fā)3D結(jié)構(gòu)光人臉識(shí)別技術(shù),云從科技為身份識(shí)別再筑防火墻
OPPO Find X的FaceKey 3D結(jié)構(gòu)光給力 期待oppo findx蘭博基尼版
vivo宣稱(chēng)新品采用3D ToF技術(shù),是否比3D結(jié)構(gòu)光更勝一籌?
3d結(jié)構(gòu)光的手機(jī)OPPOFindX體驗(yàn) OPPO FaceKey 3D結(jié)構(gòu)光在安卓機(jī)的首次量產(chǎn)
丘鈦科技:3D結(jié)構(gòu)光已實(shí)現(xiàn)量產(chǎn),3D TOF模組具備量產(chǎn)能力
從HUAWEI Mate 20 Pro到3D結(jié)構(gòu)光最全應(yīng)用
淺析3D結(jié)構(gòu)光技術(shù)
華為P30或?qū)⒅С?b class='flag-5'>3D結(jié)構(gòu)光人臉識(shí)別
3D結(jié)構(gòu)光相機(jī)的工作原理及優(yōu)點(diǎn)
采用DLP 3D結(jié)構(gòu)光軟件開(kāi)發(fā)套件的3D打印機(jī)

評(píng)論