2 視線(xiàn)跟蹤原理
以正視下的視線(xiàn)方向作為基準(zhǔn),改變視線(xiàn)方向,即眼球發(fā)生一定角度轉(zhuǎn)動(dòng)時(shí),瞳孔中心位置同步移動(dòng),因此實(shí)時(shí)獲取瞳孔中心位置坐標(biāo)即可實(shí)現(xiàn)視線(xiàn)跟蹤。
圖1給出視線(xiàn)跟蹤原理圖。以眼底為坐標(biāo)原點(diǎn)O,S為瞳孔中心位置,s’為S在YOZ面的投影,(M,N)為S’在YOZ面上二維坐標(biāo),CCD攝像機(jī)在X軸方向上。設(shè)定正視方向(即頭盔跟蹤法線(xiàn)方向)為X軸,頭盔左右方向?yàn)閆軸,頭盔上下方向?yàn)閅軸。根據(jù)瞳孔中心在ZOY面上的投影坐標(biāo)及人眼球半徑(約10 mm),得到俯仰角α(∠SON’)、方位角β(∠M’ON’)的值,這樣就可確定眼跟蹤視線(xiàn)方位。
3 跟蹤算法實(shí)現(xiàn)
3.1 閾值選取
從內(nèi)存讀取紅外源圖像,圖2(a)中,瞳孔與眼睛其他部分相比要暗得多,采用簡(jiǎn)單的二值化法分離瞳孔,提取瞳孔邊緣。具體做法:先計(jì)算出整個(gè)眼睛圖像的灰度直方圖,第一個(gè)峰值對(duì)應(yīng)的是瞳孔區(qū)域灰度值,如圖2(b)中箭頭所示。選擇在第一個(gè)峰值的右側(cè)相隔2至5個(gè)灰度值處提取瞳孔的二值化閾值,即灰度值為78,但這樣會(huì)導(dǎo)致眼睫毛部分保留大量信息。圖2(c)是采用閾值63二值化后的結(jié)果,可以看出,瞳孔被成功分離出來(lái),雖然保留小部分睫毛,但不影響后續(xù)分析。
3.2 Sobel算子檢測(cè)邊緣
圖像的邊緣是圖像最基本特征。所謂邊緣就是指那些周?chē)叶扔刑S變化的像素集合。邊緣廣泛存在于物體與背景、物體與物體、基元與基元之間。Sobel算子是一種一階微分算子,在邊緣檢測(cè)中應(yīng)用廣泛。Sobel算子有兩個(gè),其中,是檢測(cè)水平邊緣的,而是檢測(cè)垂直邊緣的。在圖2(c)中,瞳孔上的像素與其周?chē)袼赜忻黠@階躍變化。所以可利用該特性作為檢測(cè)瞳孔邊緣依據(jù)。利用Sobel算子檢測(cè)瞳孔邊緣結(jié)果,如圖3所示。
3.3 Hough圓檢測(cè)算法
Hough變換是在圖像處理中從圖像中識(shí)別幾何形狀的基本方法。Hough變換的基本原理利用點(diǎn)與線(xiàn)的對(duì)偶性,將原始圖像空間給定的曲線(xiàn)通過(guò)曲線(xiàn)表達(dá)形式變?yōu)閰?shù)空間的一點(diǎn)。這樣就把原始圖像中給定曲線(xiàn)的檢測(cè)問(wèn)題轉(zhuǎn)化為尋找參數(shù)空間中的峰值問(wèn)題,即把檢測(cè)整體特性轉(zhuǎn)化為檢測(cè)局部特性,比如直線(xiàn)、橢圓、圓、弧線(xiàn)等。
Hough變換的編程思想:以已知量r、△r分別為半徑、圓環(huán)的寬度,圖像像素值為255、坐標(biāo)為(xo,yo)的點(diǎn)為圓心,建立一個(gè)圓模板;將符合(a-x0)2+(b—y0)2一r2<△r2的所有點(diǎn)(a,b)的坐標(biāo)計(jì)入模板數(shù)組,然后將圓心移動(dòng)至下一個(gè)符合像素值為255的點(diǎn)(x1,y1),同時(shí)將上述圓模板按照同圓心的行列變換移動(dòng),再次將符合(a-x1)2+(b-y1)2一r2<△r2的所有點(diǎn)(a,b)的坐標(biāo)計(jì)入模板數(shù)組。依此類(lèi)推,檢測(cè)完圖像中所有符合要求的圓心,統(tǒng)計(jì)計(jì)入模板數(shù)組次數(shù)最多的坐標(biāo),那么該坐標(biāo)就為所求參數(shù)坐標(biāo)(a,b),即為固定半徑下的圓心坐標(biāo)。
3.4 瞳孔中心坐標(biāo)確定
根據(jù)半徑取值范圍,進(jìn)行多次Hough變換檢測(cè)圓心,得到一個(gè)圓心集合,該集合中選取其對(duì)應(yīng)頻率最大的目標(biāo),即為真正的瞳孔中心。
3.5 眼球移動(dòng)角度
圖1所示的S’坐標(biāo)即為瞳孔中心坐標(biāo),其投影SN’=S’N,S’M=ON=M’N’可得:
從而求得α,β∈(0~π/2),再根據(jù)瞳孔中心與正視時(shí)瞳孔中心位置,可得俯仰角和方位角。
3.6 算法實(shí)現(xiàn)
圖像處理算法程序采用Visttal C++6.0,最后將圖像處理程序封裝在一個(gè)COM組件中,從而完成后臺(tái)圖像處理,并將所得的數(shù)據(jù)通過(guò)接口傳遞給前臺(tái)界面,實(shí)現(xiàn)整個(gè)軟件的系統(tǒng)測(cè)試。其程序流程如圖4所示。
4 結(jié)語(yǔ)
目前現(xiàn)有的頭盔瞄準(zhǔn)系統(tǒng),對(duì)目標(biāo)瞄準(zhǔn)線(xiàn)方向的測(cè)量都是對(duì)駕駛員頭部位置空間的測(cè)量,但采用頭盔測(cè)量方式的頭盔瞄準(zhǔn)系統(tǒng),空中格斗時(shí)在高過(guò)載下,飛行員有時(shí)不可能轉(zhuǎn)動(dòng)頭部,卻可以用其眼睛一直跟蹤,這就是眼跟蹤的優(yōu)勢(shì)。研究表明,頭盔跟蹤期間,眼球運(yùn)動(dòng)超過(guò)頭部運(yùn)動(dòng),在多目標(biāo)搜索的情況下,眼位置和頭部位置保持一定角偏離,眼跟蹤具有巨大的實(shí)際應(yīng)用價(jià)值。眼跟蹤和頭跟蹤的擬合使用,使瞄準(zhǔn)更迅速,更精確,更自由。因此,該技術(shù)將大大提高空軍的戰(zhàn)斗力和反應(yīng)速度。
北京2022年10月18日 /美通社/ -- 10月14日,國(guó)際數(shù)據(jù)公司(IDC)發(fā)布《2022Q2中國(guó)軟件定義存儲(chǔ)及超融合市場(chǎng)研究報(bào)告》,報(bào)告顯示:2022年上半年浪潮超融合銷(xiāo)售額同比增長(zhǎng)59.4%,近5倍于...
關(guān)鍵字: IDC BSP 數(shù)字化 數(shù)據(jù)中心東京2022年10月18日 /美通社/ -- NIPPON EXPRESS HOLDINGS株式會(huì)社(NIPPON EXPRESS HOLDINGS, INC.)旗下集團(tuán)公司上海通運(yùn)國(guó)際物流有限公司(Nipp...
關(guān)鍵字: 溫控 精密儀器 半導(dǎo)體制造 BSP韓國(guó)的“萬(wàn)能應(yīng)用”Kakao周末掉線(xiàn),引發(fā)了生活和商業(yè)的廣泛混亂,暴露出一個(gè)無(wú)處不在的科技巨頭被迫下線(xiàn)時(shí)所產(chǎn)生的漏洞。Kakao的主要服務(wù)——從即時(shí)通訊到網(wǎng)約車(chē)再到移動(dòng)支付,在上周六遭遇宕機(jī),此前該公司大部分?jǐn)?shù)據(jù)服務(wù)器所...
關(guān)鍵字: 即時(shí)通訊 電子 移動(dòng) 網(wǎng)約車(chē)手工耿火到了海外。日前,日本知名綜藝節(jié)目《月曜夜未央》竟然跑到了河北,采訪(fǎng)了“刑部尚書(shū)”手工耿。節(jié)目中展示了不少這位“刑部尚書(shū)”有用但卻沒(méi)那么有用的發(fā)明,其中喝出紅酒感覺(jué)的...
關(guān)鍵字: 移動(dòng)