Eyefluence/SMI/FOVE與眼球追蹤技術(shù)以及眼球追蹤在VR/AR上的應(yīng)用
資料介紹
眼睛可以為我們做很多事情,比如讓我們看到旖旎的風(fēng)景,漂亮的美女,傳達(dá)我們的內(nèi)心情緒,當(dāng)然這些都是不需要依靠技術(shù)就能夠做到的事情。
隨著技術(shù)的進(jìn)步,我們現(xiàn)在已經(jīng)能夠利用人類眼睛進(jìn)行虹膜識(shí)別,虹膜識(shí)別相較面部識(shí)別、指紋識(shí)別都更加有效和安全,三星已經(jīng)在Note 7上面采用這項(xiàng)識(shí)別技術(shù),不過(guò)這款手機(jī)已經(jīng)停售。不出意外的話,明年的Galaxy S8也將擁有虹膜識(shí)別功能。
除了虹膜識(shí)別之外,還有眼球追蹤技術(shù)。所謂眼球追蹤,是指一項(xiàng)技術(shù)能夠追蹤眼球的運(yùn)動(dòng),并利用這種眼球運(yùn)動(dòng)來(lái)增強(qiáng)某個(gè)產(chǎn)品或服務(wù)的體驗(yàn)。
眼球追蹤曾被錯(cuò)用在手機(jī)上
眼球追蹤技術(shù)曾經(jīng)在智能手機(jī)領(lǐng)域火了一陣,這可能要追溯到2013年Galaxy S4手機(jī)率先搭載了眼球追蹤功能,這項(xiàng)功能主要應(yīng)用在視頻播放上面。舉個(gè)例子,如果你正在觀看一個(gè)視頻,然后你身后的同學(xué)拍了一下你肩膀,在你轉(zhuǎn)過(guò)頭的時(shí)候,由于你的眼睛已經(jīng)不再看著屏幕,視頻會(huì)自動(dòng)暫停,而當(dāng)你回過(guò)頭來(lái),視頻會(huì)自動(dòng)繼續(xù)播放。不需要你用手去點(diǎn)擊暫停和播放;或者你在手機(jī)上看網(wǎng)頁(yè),當(dāng)你眼睛看到屏幕底部的時(shí)候,網(wǎng)頁(yè)會(huì)自動(dòng)翻頁(yè)。同年,LG也推出了一款擁有眼球追蹤功能的LG Optimus G Pro手機(jī)。
可惜,眼球追蹤未能在手機(jī)領(lǐng)域掀起大風(fēng)大浪,原因大概有兩點(diǎn)。首先用戶沒有需求,一款智能手機(jī)的平均尺寸大約只有5英寸,在這么一丁點(diǎn)兒大的地方,人們更喜歡直接用手指進(jìn)行交互,何況手機(jī)絕大部分功能都是使用手指進(jìn)行交互,所以也不多播放/暫停這個(gè)環(huán)節(jié);第二個(gè)原因就是,當(dāng)時(shí)技術(shù)不太成熟,分辨率低,識(shí)別不夠精準(zhǔn),導(dǎo)致有用戶覺得眼睛累。
VR/AR:眼球追蹤快到我碗里來(lái)
手機(jī):1080p屏幕已經(jīng)非常足夠,2K就剩了
VR/AR:1080p就是個(gè)渣渣,2K是基本的
手機(jī):處理器四核就好啦,上八核的神經(jīng)病啊
VR/AR:盡管上吧,處理器性能只有不夠用,不會(huì)剩余
手機(jī):這么大點(diǎn)兒屏幕,10根手指日夜不停的摸,眼球追蹤你走錯(cuò)地兒了吧?
VR/AR:眼球追蹤快到我碗里來(lái)
和眼球追蹤在手機(jī)上略顯得有點(diǎn)雞肋不同,這項(xiàng)技術(shù)對(duì)VR/AR來(lái)說(shuō)是一個(gè)關(guān)鍵性技術(shù)。VR需要給用戶營(yíng)造沉浸感,AR要營(yíng)造虛擬和現(xiàn)實(shí)混合的真實(shí)感。眼球追蹤技術(shù)的應(yīng)用,正好能夠滿足它們的需求。
第一,眼球追蹤能夠?qū)崿F(xiàn)注視點(diǎn)渲染。當(dāng)前VR和AR普遍使用全局渲染,也就是說(shuō),VR或AR的內(nèi)容全部都被使用同一個(gè)標(biāo)準(zhǔn)渲染,無(wú)論是焦點(diǎn)視線內(nèi)的還是余光之中的。這不符合我們?nèi)祟惖挠^看方式。
而有了眼球追蹤技術(shù),VR和AR便能夠?qū)崿F(xiàn)局部渲染,實(shí)時(shí)注視點(diǎn)渲染,將你的目光所到之處渲染,目光之外的保留虛化、模糊,和真實(shí)的人眼體驗(yàn)一樣。
第二,在普通VR體驗(yàn)中,VR畫面有時(shí)候會(huì)由于你眼球的移動(dòng)而產(chǎn)生畸變。如果這個(gè)時(shí)候有眼球追蹤功能干預(yù),進(jìn)行實(shí)時(shí)追蹤,那么這種畸變便能夠得到修復(fù)。
第三,解放雙手,實(shí)現(xiàn)更好的交互。當(dāng)前我們與VR交互的時(shí)候需要使用手柄,或者其他VR手套等工具。有了眼球追蹤功能,我們可以使用眼球的運(yùn)動(dòng)來(lái)進(jìn)行交互,比如當(dāng)你的眼睛看著一扇門的時(shí)候,門可以自動(dòng)打開,那么我們就不需要使用手柄或者手套?;蛘咴谑褂肰R用戶界面的時(shí)候,我們也可以直接使用眼睛操作。
第四,減少眩暈感。為了解決VR的暈動(dòng)癥,我們沒少花心思,除了提升屏幕分辨率、刷新率之外,還要考慮定位追蹤、身體和首部的虛擬以及環(huán)境的連續(xù)性等等一堆。盡管如此,我們依舊無(wú)法徹底解決暈動(dòng)癥問(wèn)題,依然是路漫漫其修遠(yuǎn)兮,眼球追蹤技術(shù)的加入,或許能夠幫助進(jìn)一步減少暈動(dòng)癥。
我們戴上了VR,眼睛和屏幕之間的距離已經(jīng)被固定,視頻中的遠(yuǎn)近場(chǎng)景切換眼睛難以識(shí)別,這會(huì)加重眩暈感。因?yàn)?,在現(xiàn)實(shí)中,人的眼睛能夠瞬間在千里之外和眼前做切換,能夠根據(jù)距離自動(dòng)調(diào)整。如果在VR中加入眼球追蹤,它能夠捕捉我們目光焦點(diǎn),創(chuàng)造更加自然的景深環(huán)境,有助于減少暈動(dòng)癥。
誰(shuí)家有牛逼的眼球追蹤技術(shù)?
1、Eyefluence眼球追蹤技術(shù)
第一個(gè)我們先點(diǎn)名剛剛被谷歌收購(gòu)的眼球追蹤公司Eyefluence。
Eyefluence是一家美國(guó)科技初創(chuàng)公司,今年8月份宣布將會(huì)在未來(lái)VR中應(yīng)用眼球追蹤技術(shù)。10月份,這家公司成功被谷歌收購(gòu)。
這家公司的眼球追蹤也可以實(shí)現(xiàn)注視點(diǎn)渲染,從而減少計(jì)算方面的讀取約60%的速度。另外,Eyefluence的技術(shù)其獨(dú)特之處在于,它不僅能檢測(cè)眼球的運(yùn)動(dòng),還能檢測(cè)瞳孔的擴(kuò)張——如此一來(lái)還能實(shí)現(xiàn)某種程度上對(duì)人情緒的檢測(cè)。
Eyefluence家的眼球追蹤技術(shù)可自然地動(dòng)動(dòng)眼睛將意識(shí)轉(zhuǎn)化為動(dòng)作。操作起來(lái)像走路或說(shuō)話那樣自然,用戶不必盯著物體激活它們,操作交互發(fā)生的速度只會(huì)受到思考和觀看的速度影響。
日前,有消息稱,Magic Leap將使用Eyefluence眼球追蹤技術(shù)。谷歌砸了巨資投資這家MR公司,看來(lái),它十有八九會(huì)使用Eyefluence。
2、SMI眼球追蹤技術(shù)
第二個(gè)響當(dāng)當(dāng)?shù)娜宋锸荢MI,SMI是一家德國(guó)科技公司,其眼球追蹤技術(shù)已經(jīng)被應(yīng)用在三星Gear VR上。這家公司還曾經(jīng)為Oculus DK2和HTC Vive開發(fā)眼球追蹤套件。
SMI眼球追蹤主要能夠?qū)崿F(xiàn)的功能是注視點(diǎn)渲染,關(guān)于這一點(diǎn)我們上面已經(jīng)說(shuō)過(guò),就不再重復(fù)了。SIM眼球追蹤技術(shù)的使用,不僅可以實(shí)現(xiàn)注視點(diǎn)渲染,還能夠減少VR對(duì)GPU的消耗,因?yàn)樗鼧O大地減少了GPU的VR畫面渲染量,使性能較弱的移動(dòng)GPU也能提供高分辨率的VR圖像,或是減少PC VR設(shè)備的數(shù)據(jù)傳輸量,實(shí)現(xiàn)無(wú)線VR連接。
3、FOVE眼球追蹤技術(shù)
和Oculus一樣,F(xiàn)ove也是眾籌起家,其開發(fā)擁有眼球追蹤技術(shù)的VR設(shè)備Fove通過(guò)眾籌獲得關(guān)注,并于今天(11月2日)開啟了預(yù)售。
據(jù)了解,F(xiàn)OVE 在頭顯鏡片下方,嵌入了兩個(gè)紅外攝像頭,可以通過(guò)反射的光線,計(jì)算眼睛傾斜的角度,從而追用戶瞳孔活動(dòng),并且還能夠進(jìn)行視線校準(zhǔn)。用戶的視點(diǎn)被追蹤后,GPU圖像處理器能夠?qū)ζ鋵iT進(jìn)行渲染,在虛擬現(xiàn)實(shí)中實(shí)現(xiàn)景深效果,其實(shí)和上面兩種眼球追蹤技術(shù)差不多。
隨著產(chǎn)品開啟預(yù)售,F(xiàn)ove的具體參數(shù)和PC配置要求都已經(jīng)公布:
OVE0 的參數(shù):
顯示屏幀率:70HZ
視場(chǎng)角:90度至100度
追蹤傳感器:頭部追蹤和位置追蹤
眼球追蹤傳感器:兩個(gè)120fps的紅外追蹤系統(tǒng),追蹤精度小于1度
重量:520g
連接接口:HDMI 1.4 / USB 3.0 / USB 2.0
在PC配置房間,盡管FOVE采用自家先進(jìn)的眼球追蹤設(shè)備,但它并沒有降低對(duì)顯卡的要求,最低和HTC Vive等設(shè)備一樣為GTX 970或AMDRadeon R9 290,CPU則最低要求英特爾Core i5-4590,RAM在8GB以上,Windows 8.1或Windows 10系統(tǒng)都需要64位。
- 探討高度計(jì)在健身追蹤器中的作用 17次下載
- 基于LoRa無(wú)線射頻信號(hào)的行走追蹤系統(tǒng) 8次下載
- 解讀Facebook Oculus VR手勢(shì)追蹤資料下載
- 實(shí)現(xiàn)眼動(dòng)追蹤,索尼有MEMS這個(gè)高招 0次下載
- VR光學(xué)跟蹤方案之“Lighthouse”追蹤系統(tǒng)技術(shù) 3次下載
- 德國(guó)計(jì)算機(jī)視覺公司的眼球追蹤眼鏡和系統(tǒng) 1次下載
- 眼球追蹤與聊天機(jī)器人技術(shù)的難點(diǎn)及VR交互方式的改變 11次下載
- 可預(yù)測(cè)追蹤技術(shù)工作原理及作用及在VR/AR頭盔上的應(yīng)用 4次下載
- 眼球跟蹤技術(shù)介紹及在VR的5個(gè)領(lǐng)域應(yīng)用 4次下載
- Oculus 360度追蹤技術(shù)介紹和房間追蹤細(xì)節(jié)介紹 17次下載
- VR/AR的Eyefluence、SMI和FOVE三種眼球追蹤技術(shù)的分析介紹 26次下載
- VR領(lǐng)域9大主流交互方式的介紹及VR領(lǐng)域發(fā)展總結(jié) 10次下載
- VR/AR技術(shù)驅(qū)動(dòng)及兩者區(qū)別以及VR/AR技術(shù)在醫(yī)療上的應(yīng)用 9次下載
- “眼球追蹤”、“動(dòng)作捕捉”等VR交互方式的實(shí)現(xiàn)及其代表公司 9次下載
- 眼球追蹤技術(shù)面臨四大難題,下一步應(yīng)該這樣走? 5次下載
- 動(dòng)態(tài)追蹤技術(shù)分類及其使用方法 2467次閱讀
- 鏈路追蹤系統(tǒng)SkyWalking的原理 3868次閱讀
- 手游光線追蹤的技術(shù)實(shí)現(xiàn)原理、工作流程與優(yōu)點(diǎn) 1432次閱讀
- 光線追蹤技術(shù):一種顛覆AR/VR/XR的技術(shù) 3060次閱讀
- 什么是眼球追蹤?為什么對(duì)VR如此重要? 7644次閱讀
- 6DOF追蹤的進(jìn)化:從標(biāo)識(shí)追蹤到SLAM定位,帶給AR體驗(yàn)質(zhì)的飛越 9624次閱讀
- OpenCV上八種不同的目標(biāo)追蹤算法 3.2w次閱讀
- AI技術(shù)可通過(guò)眼球運(yùn)動(dòng)來(lái)判斷人的性格 3604次閱讀
- 如何在有限的物理空間中實(shí)現(xiàn)無(wú)限的行走呢? 4970次閱讀
- 光線追蹤算法匯總 1.7w次閱讀
- VR和AR技術(shù)在汽車玩法與應(yīng)用 7689次閱讀
- 詳細(xì)了解下這款獨(dú)特的VR眼球追蹤配件 3277次閱讀
- VR/AR頭盔里的可預(yù)測(cè)追蹤技術(shù)你知道多少? 2877次閱讀
- 關(guān)于眼球追蹤,不可不知的三個(gè)關(guān)鍵 2293次閱讀
- 揭秘VR及移動(dòng)設(shè)備如何實(shí)現(xiàn)眼動(dòng)追蹤 2887次閱讀
下載排行
本周
- 1TC358743XBG評(píng)估板參考手冊(cè)
- 1.36 MB | 330次下載 | 免費(fèi)
- 2開關(guān)電源基礎(chǔ)知識(shí)
- 5.73 MB | 11次下載 | 免費(fèi)
- 3100W短波放大電路圖
- 0.05 MB | 4次下載 | 3 積分
- 4嵌入式linux-聊天程序設(shè)計(jì)
- 0.60 MB | 3次下載 | 免費(fèi)
- 5DIY動(dòng)手組裝LED電子顯示屏
- 0.98 MB | 3次下載 | 免費(fèi)
- 6基于FPGA的C8051F單片機(jī)開發(fā)板設(shè)計(jì)
- 0.70 MB | 2次下載 | 免費(fèi)
- 751單片機(jī)PM2.5檢測(cè)系統(tǒng)程序
- 0.83 MB | 2次下載 | 免費(fèi)
- 8基于51單片機(jī)的RGB調(diào)色燈程序仿真
- 0.86 MB | 2次下載 | 免費(fèi)
本月
- 1OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234315次下載 | 免費(fèi)
- 2555集成電路應(yīng)用800例(新編版)
- 0.00 MB | 33566次下載 | 免費(fèi)
- 3接口電路圖大全
- 未知 | 30323次下載 | 免費(fèi)
- 4開關(guān)電源設(shè)計(jì)實(shí)例指南
- 未知 | 21549次下載 | 免費(fèi)
- 5電氣工程師手冊(cè)免費(fèi)下載(新編第二版pdf電子書)
- 0.00 MB | 15349次下載 | 免費(fèi)
- 6數(shù)字電路基礎(chǔ)pdf(下載)
- 未知 | 13750次下載 | 免費(fèi)
- 7電子制作實(shí)例集錦 下載
- 未知 | 8113次下載 | 免費(fèi)
- 8《LED驅(qū)動(dòng)電路設(shè)計(jì)》 溫德爾著
- 0.00 MB | 6656次下載 | 免費(fèi)
總榜
- 1matlab軟件下載入口
- 未知 | 935054次下載 | 免費(fèi)
- 2protel99se軟件下載(可英文版轉(zhuǎn)中文版)
- 78.1 MB | 537797次下載 | 免費(fèi)
- 3MATLAB 7.1 下載 (含軟件介紹)
- 未知 | 420027次下載 | 免費(fèi)
- 4OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234315次下載 | 免費(fèi)
- 5Altium DXP2002下載入口
- 未知 | 233046次下載 | 免費(fèi)
- 6電路仿真軟件multisim 10.0免費(fèi)下載
- 340992 | 191186次下載 | 免費(fèi)
- 7十天學(xué)會(huì)AVR單片機(jī)與C語(yǔ)言視頻教程 下載
- 158M | 183279次下載 | 免費(fèi)
- 8proe5.0野火版下載(中文版免費(fèi)下載)
- 未知 | 138040次下載 | 免費(fèi)
評(píng)論
查看更多