2022年，AR/VR在多場景、多領(lǐng)域?qū)崿F(xiàn)探索，在硬件上也取得了大的突破。2023年，AR/VR在技術(shù)和產(chǎn)品的成熟度，如算法、算力、光學(xué)等方面依然需要重點(diǎn)優(yōu)化。科幻作品中的腦機(jī)離我們還太遙遠(yuǎn)，現(xiàn)階段除了在視覺和聽覺上營造沉浸式的場景外，還需要多維度的人機(jī)交互方式來獲得現(xiàn)實(shí)與虛擬之間的融合互動(dòng)。
6DoF即6自由度，是指頭戴設(shè)備通過監(jiān)測(cè)到使用者頭部轉(zhuǎn)動(dòng)、身體移動(dòng)帶來的上下、左右、前后的空間位置變化，從而提供相應(yīng)的視聽場景變化。
6DoF追蹤為用戶提供了前所未有的互動(dòng)體驗(yàn)和對(duì)虛擬世界的控制，可以說，6DoF追蹤是虛擬世界與現(xiàn)實(shí)世界建立聯(lián)系的基礎(chǔ)，是AR/VR實(shí)現(xiàn)顛覆式體驗(yàn)的前提。隨著SLAM技術(shù)的普遍應(yīng)用，6DoF追蹤與SLAM相結(jié)合后，使用者可以擺脫標(biāo)識(shí)圖的束縛，進(jìn)行實(shí)時(shí)定位與地圖構(gòu)建，從而在虛擬內(nèi)容上產(chǎn)生更加沉浸和逼真的體驗(yàn)。
6DoF實(shí)現(xiàn)的方案有單攝像頭、魚眼攝像頭或邊緣計(jì)算，最新發(fā)布的AR/VR設(shè)備基本已經(jīng)可以實(shí)現(xiàn)6DoF。
手勢(shì)追蹤基于計(jì)算機(jī)視覺和人工智能算法，對(duì)攝像機(jī)采集到的圖像中用戶手部區(qū)域進(jìn)行檢測(cè)和對(duì)其姿態(tài)進(jìn)行估計(jì)，從而得到全自由度自然手勢(shì)跟蹤的技術(shù)。手勢(shì)追蹤的實(shí)現(xiàn)基于對(duì)手部21個(gè)關(guān)鍵點(diǎn)檢測(cè)。
從硬件來說，目前市面上常見的手勢(shì)識(shí)別方案中所采用的檢測(cè)設(shè)備大致分為四類：純紅外攝像機(jī)、灰度攝像機(jī)、RGB攝像機(jī)及深度攝像機(jī)。
3. 眼動(dòng)追蹤
眼動(dòng)追蹤的基本原理即指當(dāng)人的眼睛看向不同方向時(shí)，眼部會(huì)有細(xì)微的變化，這些變化會(huì)產(chǎn)生可以提取的特征，計(jì)算機(jī)可以通過圖像捕捉或掃描提取這些特征，從而實(shí)時(shí)追蹤眼睛的變化，預(yù)測(cè)用戶的狀態(tài)和需求，并進(jìn)行響應(yīng)，達(dá)到用眼睛控制設(shè)備的目的。
目前實(shí)現(xiàn)準(zhǔn)確眼動(dòng)追蹤的技術(shù)方案有瞳孔角膜反射法、視網(wǎng)膜影像定位、結(jié)構(gòu)光追蹤、角膜反射光強(qiáng)度、視網(wǎng)膜反射光強(qiáng)度、光波導(dǎo)眼動(dòng)追蹤等方案。而目前相對(duì)成熟的商用級(jí)方案，多為采用瞳孔角膜反射法，即通過角膜中心和瞳孔中心的連線進(jìn)行眼動(dòng)追蹤。目前主流的眼動(dòng)追蹤設(shè)備，采用的是由一圈紅外燈+1~2枚紅外相機(jī)組成的紅外相機(jī)陣列用于計(jì)算眼動(dòng)。
語音交互通過簡單的指令可以簡化很多手部的操作，比如我們可以通過呼叫Siri打開一款A(yù)PP，或直接撥號(hào)，用戶在VR世界進(jìn)行語音交互，也會(huì)更加自然，而且它是無處不在無時(shí)不有的，用戶不需要移動(dòng)頭部和尋找它們，在任何方位任何角落都能和他們交流。語音交互的實(shí)現(xiàn)主要通過麥克風(fēng)和AI算法的結(jié)合。
這里指VR手柄的震動(dòng)反饋，有很好的的提醒效果。這樣高度特化/簡化的交互設(shè)備的優(yōu)勢(shì)是能夠非常自如地在諸如游戲等應(yīng)用中使用，但是它無法適應(yīng)更加廣泛的應(yīng)用場景。
原文始發(fā)于微信公眾號(hào)（艾邦VR產(chǎn)業(yè)資訊）：AR/VR目前可實(shí)現(xiàn)的5種交互方式介紹
