博客專欄

EEPW首頁(yè) > 博客 > 讓現(xiàn)實(shí)世界與虛擬影像交互的MR眼鏡,戴上啥感覺(jué)?

讓現(xiàn)實(shí)世界與虛擬影像交互的MR眼鏡,戴上啥感覺(jué)?

發(fā)布人:傳感器技術(shù) 時(shí)間:2021-05-22 來(lái)源:工程師 發(fā)布文章

如果你問(wèn)在未來(lái),智能手機(jī)后下一代科技產(chǎn)品會(huì)是什么?觸摸點(diǎn)擊操作后下一種主流交互方式會(huì)是怎樣?那么在我們的猜測(cè)中,用手勢(shì)操作虛擬界面的MR眼鏡,或許就是答案之一。

電影里,蜘蛛俠戴的這種現(xiàn)實(shí)與虛擬影像結(jié)合的眼鏡,現(xiàn)實(shí)中其實(shí)已經(jīng)有了,它真正的名字叫MR眼鏡。

和很多朋友更熟悉的VR眼鏡對(duì)比,通俗點(diǎn)來(lái)說(shuō),戴上VR眼鏡后就看不到現(xiàn)實(shí)世界了,而戴MR眼鏡可以看虛擬影像,又可以看到真實(shí)物體。

說(shuō)得挺邪乎,宣傳視頻拍得也都挺酷炫,但戴上MR眼鏡后的真實(shí)體驗(yàn)是什么樣的呢?

愿意在MR眼鏡領(lǐng)域深耕的公司,其實(shí)不多。這次我們體驗(yàn)的,是國(guó)內(nèi)公司影創(chuàng)科技的新產(chǎn)品“鴻鵠”。

為了盡量讓大家能體驗(yàn)到使用MR眼鏡的效果,我們把GoPro綁在眼鏡上,試圖還原佩戴后肉眼看到的畫(huà)面。

這就是戴上眼鏡后看到的畫(huà)面,與普通影像不同的是,當(dāng)我們開(kāi)始移動(dòng),變換自己的位置時(shí)就會(huì)發(fā)現(xiàn),眼鏡中的虛擬影像會(huì)像真實(shí)的物體一樣,立在你設(shè)定好的位置。

需要說(shuō)明的是,由于眼鏡是針對(duì)雙眼成像,而GoPro只能記錄單眼的畫(huà)面,再加上攝像機(jī)拍攝的畫(huà)面與人眼看到的畫(huà)面也存在差距,戴上眼鏡后真實(shí)看到的顯示區(qū)域,其實(shí)會(huì)比我們視頻中記錄的更大一些。

我們只要伸出手,就可以利用手勢(shì)來(lái)操作界面。多說(shuō)一嘴,MR眼鏡的手勢(shì)操作,和我們以前見(jiàn)過(guò)的智能手機(jī)、智能電視的手勢(shì)交互相比,實(shí)現(xiàn)起來(lái)要難得多。

首先硬件上,除了中間的主攝,可以看到眼鏡兩側(cè)還各有一個(gè)攝像頭,它們是6DoF空間定位攝像頭,負(fù)責(zé)識(shí)別用戶的手勢(shì)。

這種手勢(shì)識(shí)別需要對(duì)人手的21個(gè)關(guān)節(jié)點(diǎn)進(jìn)行3D位置的估計(jì),通過(guò)這些關(guān)節(jié)點(diǎn)的信息來(lái)預(yù)估一只手的形狀和位置,從而識(shí)別用戶的手勢(shì)命令,再通過(guò)大量的機(jī)器學(xué)習(xí),從而實(shí)現(xiàn)更好的MR體驗(yàn)

我們也在鴻鵠眼鏡上體驗(yàn)了捏取、滑動(dòng)等各種動(dòng)作,老實(shí)說(shuō),還不太習(xí)慣。

在手勢(shì)操作之外,鴻鵠還支持手柄操作,兩種交互形式結(jié)合起來(lái),能最大程度的降低用戶的學(xué)習(xí)成本。

另外值得一提的是,鴻鵠隨機(jī)自帶兩個(gè)輕便型手柄,支持三維空間中的六自由度追蹤??梢韵袢翁焯肧witch一樣,與計(jì)算單元主機(jī)進(jìn)行組裝或拆卸。

另外,MR眼鏡的空間定位、軟件運(yùn)行、圖像處理等功能,都集成在了這個(gè)小小的計(jì)算單元之中,然后數(shù)據(jù)傳輸?shù)窖坨R后,最終呈現(xiàn)在用戶眼前。

鴻鵠通過(guò)這種分體式設(shè)計(jì),讓計(jì)算單元獨(dú)立在眼鏡之外,可以揣進(jìn)口袋里,這種設(shè)計(jì)也讓眼鏡變得很輕薄,佩戴使用更舒適。

鴻鵠搭載的是高通驍龍XR2平臺(tái),在它的加持下,我們可以在MR眼鏡上使用各種安卓應(yīng)用以及定制應(yīng)用,比如畫(huà)質(zhì)頗高的賽車(chē)游戲。

其中讓我們印象最深刻的,也是特別能綜合體現(xiàn)MR眼鏡優(yōu)勢(shì)的一款應(yīng)用,是鴻鵠定制的畫(huà)筆應(yīng)用。它允許用戶握著6DoF手柄,在真實(shí)空間中使用各種畫(huà)筆進(jìn)行涂鴉。

奇妙的地方在于,這些都是真正的3D圖像。當(dāng)你放下畫(huà)筆,走近那些涂鴉時(shí),可以發(fā)現(xiàn)它們?nèi)恳粤Ⅲw的形式呈現(xiàn)在眼前。那一刻恍惚感覺(jué)自己就是神筆馬良。

這是我們?cè)谑褂肕R眼鏡時(shí)最愉悅的體驗(yàn),它讓我想起小時(shí)候剛接觸電腦時(shí),用Windows的畫(huà)圖工具,以及金山畫(huà)王軟件,瘋狂作畫(huà)的那些時(shí)光

公允地說(shuō),MR是一種仍在成長(zhǎng)中的新技術(shù),目前針對(duì)它特性而開(kāi)發(fā)的定制應(yīng)用,數(shù)量還不多。

但如果你問(wèn)在未來(lái),智能手機(jī)后下一代科技產(chǎn)品會(huì)是什么?觸摸點(diǎn)擊操作后,下一種主流交互方式會(huì)是怎樣?那么在我們的猜測(cè)中,用手勢(shì)操作虛擬界面的MR眼鏡,或許就是答案之一。

*博客內(nèi)容為網(wǎng)友個(gè)人發(fā)布,僅代表博主個(gè)人觀點(diǎn),如有侵權(quán)請(qǐng)聯(lián)系工作人員刪除。

超級(jí)電容器相關(guān)文章:超級(jí)電容器原理




關(guān)鍵詞: MR眼鏡

技術(shù)專區(qū)

關(guān)閉