眼動(dòng)追蹤對(duì)于AR眼鏡的重要性不言而喻,現(xiàn)階段用于AR頭顯的眼動(dòng)追蹤方案主要都是紅外(IR)LED來(lái)實(shí)現(xiàn)的,但是精度并不算高,除非愿意在脖子上再加幾斤鐵倒是可以得到高精準(zhǔn)度。
頭戴式眼動(dòng)追蹤精度不高的問(wèn)題,主要可以提到兩點(diǎn)。我們寫(xiě)過(guò)很多文章,經(jīng)常提到AR眼鏡在戶外運(yùn)作的挑戰(zhàn),這次也不例外,戶外的強(qiáng)光會(huì)對(duì)紅外的效果產(chǎn)生影響,而且在戶外廣闊的視野的條件下,一點(diǎn)點(diǎn)的錯(cuò)誤都會(huì)被放大無(wú)數(shù)倍,將會(huì)強(qiáng)烈的影響到用戶體驗(yàn)感。在短距離下使用,就體現(xiàn)不出來(lái)這種缺點(diǎn)了。
其次,我們可以把人眼認(rèn)為是一塊凸鏡,對(duì)于光線是有折射率的,這將導(dǎo)致光線彎曲。從而使得眼球位置、注視角度、瞳孔半徑都產(chǎn)生了誤差。而解決方案里其實(shí)是忽略了這一點(diǎn),誤差自然而然是出現(xiàn)了。這種誤差通常能達(dá)到1度,甚至更多。
還不僅僅是凸面的關(guān)系這么簡(jiǎn)單,而是與眼角膜的性質(zhì)有關(guān)。在角膜的頂部不會(huì)產(chǎn)生折射現(xiàn)象,而在角膜的底部,就會(huì)產(chǎn)生屈光現(xiàn)象(也就是發(fā)生折射)。
而且傳統(tǒng)方案不會(huì)考慮到眼鏡的滑動(dòng)會(huì)對(duì)眼動(dòng)追蹤造成的影響。
Pupil Labs在其研究中則希望解決這些缺點(diǎn),而且很輕便,只需要一個(gè)攝像頭就可以完成這項(xiàng)任務(wù)了。讓我們一起來(lái)看看吧。
采用了攝像頭而不是紅外,第一個(gè)問(wèn)題自然而然就迎刃而解了。對(duì)于角膜而言,我們第一個(gè)要解決的是它折射率的問(wèn)題,因?yàn)樵诓煌奈恢媒悄さ恼凵渎适遣煌摹Mㄟ^(guò)將眼球視為球形,通過(guò)數(shù)學(xué)模型計(jì)算,這就得出了各個(gè)位置上角膜的折射率。
對(duì)于眼球位置的估計(jì),使用的方法是回歸模型的方法,這種方法適合于3D眼睛模型的構(gòu)建,并可以對(duì)注視進(jìn)行估計(jì)。通過(guò)一個(gè)或多個(gè)攝像機(jī)從眼睛中獲取的面部特征加上從模型中獲取的眼睛特征,就可確定眼睛的相關(guān)參數(shù)。
至于注視方向的估計(jì)方法,使用的方法是利用3D眼睛模型進(jìn)行估計(jì)的。傳統(tǒng)方法也是 這樣進(jìn)行的,但是在考慮到眼睛的折射后,就不一樣了,即虹膜的2D輪廓不再是3D虹膜的簡(jiǎn)單投影了,尤其是在一些角度更加傾斜的使用環(huán)境下。
對(duì)此,Pupil Labs拋棄前人的假設(shè),使用的是單個(gè)相機(jī)的圖像,來(lái)進(jìn)行折射建模估計(jì)眼睛注視的方向。
要確定瞳孔的輪廓和半徑,第一個(gè)就必須要找到瞳孔的中心。傳統(tǒng)方法假設(shè)3D瞳孔的中心就是2D瞳孔的中心,這也是一個(gè)忽略了折射的一個(gè)簡(jiǎn)單假設(shè)。Pupil Labs在這里也同樣拋棄前人的方法,使用其眼睛模型來(lái)估計(jì)。
他們假設(shè)3D眼睛模型由兩部分球體組成——眼球和角膜。眼球的中心位于E =(sx,sy,sz),曲率半徑為rc,外層覆蓋著不透明的鞏膜。角膜的中心為C,曲率半徑re,為透明。但是也為了便于計(jì)算,設(shè)定角膜內(nèi)的房水為均勻介質(zhì),有效折射率n=1.3375,虹膜和瞳孔為同心圓,法線平行。光軸為EP線(通過(guò)校準(zhǔn)獲得),下面偏移的線就是視軸。
具體的模型計(jì)算丸子醬就不多言了(畢竟看不懂。。。大家看了也頭大),直接來(lái)說(shuō)結(jié)論吧。
綠色的是Pupil Labs的數(shù)據(jù),紅色的另一個(gè)方案的對(duì)比組。
在注視角度變大的時(shí)候(也就是斜著眼睛看人),對(duì)比組誤差指數(shù)型增長(zhǎng),甚至能達(dá)到15度的誤差。而Pupil Labs的數(shù)據(jù)結(jié)果十分穩(wěn)定,無(wú)論什么時(shí)候性能都十分良好。但是由于模型問(wèn)題,還會(huì)存在離散誤差,對(duì)結(jié)果的正確性有一定的影響,而且其模型還是存在一定的系統(tǒng)誤差的。
Pupil Labs提出的新型眼動(dòng)追蹤方案,就傳統(tǒng)方案忽略了眼角膜折射而造成的誤差進(jìn)行了改正。研究也證明紅外方案的確會(huì)有較大誤差和局限性,不顧Pupil Labs的方案似乎還存在一點(diǎn)點(diǎn)問(wèn)題,不知道完善后能不能得到應(yīng)用呢。
-
攝像頭
+關(guān)注
關(guān)注
59文章
4810瀏覽量
95449 -
AR眼鏡
+關(guān)注
關(guān)注
4文章
524瀏覽量
23049
原文標(biāo)題:新型眼動(dòng)追蹤,精度更高
文章出處:【微信號(hào):ARchan_TT,微信公眾號(hào):AR醬】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
發(fā)布評(píng)論請(qǐng)先 登錄
相關(guān)推薦
評(píng)論