博客專欄

EEPW首頁 > 博客 > 讓現(xiàn)實世界與虛擬影像交互的MR眼鏡,戴上啥感覺?

讓現(xiàn)實世界與虛擬影像交互的MR眼鏡,戴上啥感覺?

發(fā)布人:傳感器技術(shù) 時間:2021-05-22 來源:工程師 發(fā)布文章

如果你問在未來,智能手機后下一代科技產(chǎn)品會是什么?觸摸點擊操作后,下一種主流交互方式會是怎樣?那么在我們的猜測中,用手勢操作虛擬界面的MR眼鏡,或許就是答案之一。

電影里,蜘蛛俠戴的這種現(xiàn)實與虛擬影像結(jié)合的眼鏡,現(xiàn)實中其實已經(jīng)有了,它真正的名字叫MR眼鏡。

和很多朋友更熟悉的VR眼鏡對比,通俗點來說,戴上VR眼鏡后就看不到現(xiàn)實世界了,而戴MR眼鏡可以看虛擬影像,又可以看到真實物體。

說得挺邪乎,宣傳視頻拍得也都挺酷炫,但戴上MR眼鏡后的真實體驗是什么樣的呢?

愿意在MR眼鏡領(lǐng)域深耕的公司,其實不多。這次我們體驗的,是國內(nèi)公司影創(chuàng)科技的新產(chǎn)品“鴻鵠”。

為了盡量讓大家能體驗到使用MR眼鏡的效果,我們把GoPro綁在眼鏡上,試圖還原佩戴后肉眼看到的畫面。

這就是戴上眼鏡后看到的畫面,與普通影像不同的是,當我們開始移動,變換自己的位置時就會發(fā)現(xiàn),眼鏡中的虛擬影像會像真實的物體一樣,立在你設(shè)定好的位置。

需要說明的是,由于眼鏡是針對雙眼成像,而GoPro只能記錄單眼的畫面,再加上攝像機拍攝的畫面與人眼看到的畫面也存在差距,戴上眼鏡后真實看到的顯示區(qū)域,其實會比我們視頻中記錄的更大一些。

我們只要伸出手,就可以利用手勢來操作界面。多說一嘴,MR眼鏡的手勢操作,和我們以前見過的智能手機、智能電視的手勢交互相比,實現(xiàn)起來要難得多。

首先硬件上,除了中間的主攝,可以看到眼鏡兩側(cè)還各有一個攝像頭,它們是6DoF空間定位攝像頭,負責識別用戶的手勢。

這種手勢識別需要對人手的21個關(guān)節(jié)點進行3D位置的估計,通過這些關(guān)節(jié)點的信息來預(yù)估一只手的形狀和位置,從而識別用戶的手勢命令,再通過大量的機器學習,從而實現(xiàn)更好的MR體驗

我們也在鴻鵠眼鏡上體驗了捏取、滑動等各種動作,老實說,還不太習慣。

在手勢操作之外,鴻鵠還支持手柄操作,兩種交互形式結(jié)合起來,能最大程度的降低用戶的學習成本。

另外值得一提的是,鴻鵠隨機自帶兩個輕便型手柄,支持三維空間中的六自由度追蹤。可以像任天堂Switch一樣,與計算單元主機進行組裝或拆卸。

另外,MR眼鏡的空間定位、軟件運行、圖像處理等功能,都集成在了這個小小的計算單元之中,然后數(shù)據(jù)傳輸?shù)窖坨R后,最終呈現(xiàn)在用戶眼前。

鴻鵠通過這種分體式設(shè)計,讓計算單元獨立在眼鏡之外,可以揣進口袋里,這種設(shè)計也讓眼鏡變得很輕薄,佩戴使用更舒適。

鴻鵠搭載的是高通驍龍XR2平臺,在它的加持下,我們可以在MR眼鏡上使用各種安卓應(yīng)用以及定制應(yīng)用,比如畫質(zhì)頗高的賽車游戲。

其中讓我們印象最深刻的,也是特別能綜合體現(xiàn)MR眼鏡優(yōu)勢的一款應(yīng)用,是鴻鵠定制的畫筆應(yīng)用。它允許用戶握著6DoF手柄,在真實空間中使用各種畫筆進行涂鴉。

奇妙的地方在于,這些都是真正的3D圖像。當你放下畫筆,走近那些涂鴉時,可以發(fā)現(xiàn)它們?nèi)恳粤Ⅲw的形式呈現(xiàn)在眼前。那一刻恍惚感覺自己就是神筆馬良。

這是我們在使用MR眼鏡時最愉悅的體驗,它讓我想起小時候剛接觸電腦時,用Windows的畫圖工具,以及金山畫王軟件,瘋狂作畫的那些時光

公允地說,MR是一種仍在成長中的新技術(shù),目前針對它特性而開發(fā)的定制應(yīng)用,數(shù)量還不多。

但如果你問在未來,智能手機后下一代科技產(chǎn)品會是什么?觸摸點擊操作后,下一種主流交互方式會是怎樣?那么在我們的猜測中,用手勢操作虛擬界面的MR眼鏡,或許就是答案之一。

*博客內(nèi)容為網(wǎng)友個人發(fā)布,僅代表博主個人觀點,如有侵權(quán)請聯(lián)系工作人員刪除。

超級電容器相關(guān)文章:超級電容器原理




關(guān)鍵詞: MR眼鏡

技術(shù)專區(qū)

關(guān)閉