深度科普：關(guān)于智能眼鏡的一些冷知識

　　智能眼鏡的崛起，是必然的趨勢。大約在四年前，我認(rèn)識Steve Mann教授時，就毅然決然地去研究智能眼鏡了。Steve Mann，世界穿戴電腦之父，是一個瘋狂的全才，號稱“當(dāng)代達(dá)芬奇”。沒事作個小曲，有空印個電路，搞搞服裝設(shè)計，解個微分方程，閑時寫個劇本，熬夜擼個代碼在他那兒完全不是事兒。

　　穿戴電腦是個大交叉學(xué)科。在他的實(shí)驗(yàn)室里忙碌的這三年，不但學(xué)到了各種奇葩技能，更重要的，是讓我系統(tǒng)地了解到一個從事穿戴電腦研究長達(dá)四十年之久的教授的思想體系，讓我了解到智能眼鏡的方方面面。從今年年初畢業(yè)回國到現(xiàn)在也快一年了，在國內(nèi)看到了智能眼鏡越來越旺的發(fā)展勢頭，內(nèi)心非常激動。在這里，我想把自己所學(xué)到的關(guān)于智能眼鏡的淺薄知識分享給大家。同時也歡迎大家抱著純潔的心態(tài)與我討論接下來會提到的一些觀點(diǎn)。有不當(dāng)之處，請讀者諒解指正。只要不打臉，一切好說。

　　認(rèn)識復(fù)雜事物，先從概念開始。

　　首先，虛擬現(xiàn)實(shí)(Virtual Reality, 或VR)，增強(qiáng)現(xiàn)實(shí)(Augmented Reality, 或AR)和介導(dǎo)現(xiàn)實(shí)(Mediated Reality, 或MR)不是技術(shù)而是概念。在智能眼鏡硬件上實(shí)現(xiàn)這些概念的方法才是技術(shù)。拋開各個公司各種越來越多的營銷名詞，我們需要來系統(tǒng)地理解一些基礎(chǔ)知識。智能眼鏡的這些核心概念是一個連續(xù)體，像愛因斯坦提出的由時間和空間共同組成的時空連續(xù)體(Space-Time Continuum)一樣, 真實(shí)的物理世界和虛擬的數(shù)字世界也共同組成了一個叫介導(dǎo)現(xiàn)實(shí)連續(xù)體(Mediated-Reality Continuum)的東西。在這個連續(xù)體中，我們可以清楚地理解虛擬現(xiàn)實(shí)， 增強(qiáng)現(xiàn)實(shí)和介導(dǎo)現(xiàn)實(shí)的區(qū)別和聯(lián)系。

　　需要指出的是，在論文中的這個連續(xù)體是一個龐大的體系。為了增加閱讀性，從而讓大家簡單地了解最近聽到的這些名詞，我會用自己的理解把它暴力地做一個非學(xué)術(shù)性的簡化。

　　VR/AR — 虛擬現(xiàn)實(shí)和增強(qiáng)現(xiàn)實(shí)的關(guān)系

　　讓我們先從一個點(diǎn)R0開始聊，這個點(diǎn)叫做原生感知現(xiàn)實(shí)。這是正常人類的視覺系統(tǒng)能看到并理解的世界。簡單點(diǎn)來說，這就是一對叫“人眼”的相機(jī)拍到的一組照片，就是裸眼畫面。

　　以此為原點(diǎn)，向右延伸，我們就有了一根數(shù)軸。數(shù)軸上的標(biāo)度代表了我們往裸眼畫面上投放數(shù)字信息的多少(Amount of Augmentation)。投放后呈現(xiàn)在我們眼中的畫面就是增強(qiáng)現(xiàn)實(shí)。

　　當(dāng)數(shù)軸上的標(biāo)度不斷增加，我們會離R0越來越遠(yuǎn)。最終，我們會得到一個極端情形，即虛擬現(xiàn)實(shí)。在這個離R0無窮遠(yuǎn)的點(diǎn)上，我們的裸眼畫面完全被數(shù)字內(nèi)容覆蓋?，F(xiàn)實(shí)中的事物，也和我們的雙眼毫不相關(guān)。因此，VR是AR軸上的一個點(diǎn)，是AR的一個極端情形。我們說VR是AR的一個真子集。如下圖。

　　根據(jù)增強(qiáng)現(xiàn)實(shí)量的多少，我們可以標(biāo)出各個主流智能眼鏡在數(shù)軸上的位置。接下來，我們來看幾個眼鏡形態(tài)例子，并對它們進(jìn)行標(biāo)注：

　　1. 輕量級AR — 類似Google Glass的智能眼鏡

　　輕量級AR只可以小范圍的顯示數(shù)字信息。由于不需要生成電腦圖像，通常是單眼棱鏡光學(xué)透視的設(shè)計方案。我們把這類眼鏡稱為Notification System(提示型系統(tǒng))。這類眼鏡的市場是在于拍照，里面有個指導(dǎo)思想叫做Equivalence，大概講的是如何通過分布在每個人身上的相機(jī)來構(gòu)建和諧社會。這個有機(jī)會我以后再跟大家分享。

　　2. 中量級AR — 類似Microsoft Hololens的智能眼鏡

　　這類眼鏡視角最大達(dá)到50度，是中量級AR，可以在視野里疊加3D數(shù)字模型。為了立體效果，通常是雙目棱鏡光學(xué)透視。微軟也把這類眼鏡叫Mixed Reality(混合現(xiàn)實(shí))。但這是他們做AR眼鏡的商用名稱，有別于學(xué)術(shù)上的概念。為了防止大家混淆，真正的混合現(xiàn)實(shí)涉及的范圍在我們的文中沒有提及，以后有機(jī)會再聊。在國內(nèi)，有一家做中度AR的公司叫亮風(fēng)臺，創(chuàng)始人和我一樣都是云南人，也是巧得一逼。

　　3. 重量級AR — 類似HTC和The Void的所謂動態(tài)VR眼鏡

　　戴上VR頭顯，背上電腦，在一個布滿標(biāo)記和外置相機(jī)的體驗(yàn)館里進(jìn)行游戲。大家把這種體驗(yàn)叫做動態(tài)VR(真實(shí)環(huán)境會被渲染成游戲場景)。在我們的圖上，大家可以看到它離VR很近，但已經(jīng)不屬于純VR了。理論上來講，它實(shí)際上是重量級AR體驗(yàn)。雖然用的是VR頭顯，但形態(tài)不能決定本質(zhì)，所以大家要認(rèn)識清楚。我相信動態(tài)VR是虛擬現(xiàn)實(shí)行業(yè)下一步的發(fā)展方向，也可以看出VR在從一個點(diǎn)慢慢往左延伸。

　　4. 純VR眼鏡

　　純VR頭顯大家就見得比較多了。今年在國內(nèi)涌現(xiàn)出了大批的VR頭顯設(shè)備。個人覺得頭顯硬件做的不錯的公司是樂相科技。純VR體驗(yàn)設(shè)備一般是固定式的，打個游戲、坐個過山車啊什么的，這種體驗(yàn)做得好的公司很多，大家碰到的時候可以花個幾十塊錢去體驗(yàn)一下。

　　從以上例子不難看出VR和AR的融合趨勢，一方面輕量級AR開始在視角擴(kuò)大的進(jìn)程中向著中量級AR靠攏;另一方面，像The Void一樣的體驗(yàn)館，將現(xiàn)實(shí)環(huán)境的幾何結(jié)構(gòu)融入VR體驗(yàn)中，使得VR向重量級AR轉(zhuǎn)變。那AR之后的MR如何實(shí)現(xiàn)呢?要實(shí)現(xiàn)MR，只需要在頭戴顯示器中加入一對特殊的相機(jī)。剛才理清楚了VR和AR的關(guān)系，我們就開始聊聊MR了。

　　MR — 數(shù)字化的視覺感知

　　讓我們再回到R0，并開始另一個維度的延伸。之前說R0是裸眼畫面，不同的人甚至是不同的物種，各自的裸眼畫面是不一樣的。有的人高，有的人矮，老鷹看得遠(yuǎn)，馴鹿看得暗。因此，在對現(xiàn)實(shí)本身的感知能力上我們還有另一條線。這條數(shù)軸從R0往豎直方向延伸，標(biāo)度代表視覺感知能力的大小。這條線和原先的AR軸相交構(gòu)成一個平面，這個平面就是之前提到的叫MR Continuum的東西。

　　在我看來，可以修改的眼前畫面就包括了現(xiàn)實(shí)畫面和要疊加的數(shù)字畫面。在下圖中，裸眼無法直視的燒焊場景在MR眼鏡中變得清晰柔和，眼鏡使得佩戴者在看清場景的同時通過數(shù)字內(nèi)容的指導(dǎo)去完成正在進(jìn)行的工作。

　　我還在實(shí)驗(yàn)室時，曾經(jīng)幫助一家美國的醫(yī)療成像公司做膚下血管成像的相關(guān)算法。這也是MR的一種應(yīng)用。眼鏡佩戴者就像有了X射線般的超級視力，即使是在具有挑戰(zhàn)性的臨床環(huán)境，也能快速容易地確定血管位置。

　　腦洞如果開大點(diǎn)，基于可以被數(shù)字化的現(xiàn)實(shí)，我們可以試著去做一些很神奇的事情。像下圖這種立體街頭藝術(shù)可以做到眼鏡中來。

　　甚至，我們可以通過各種濾鏡把雙眼看到的景物以某種畫風(fēng)重新渲染。讓你身處在一片花園中看到梵高或達(dá)利眼中的世界。

　　實(shí)現(xiàn)了MR概念的智能眼鏡，就是給你一雙神奇的眼睛，然后根據(jù)你的需要再讓你看增強(qiáng)現(xiàn)實(shí)。因此，AR比MR少了一個維度，是MR的一個真子集。這樣我們在MR連續(xù)體中就衍生出下圖關(guān)系。

　　看到這里，有心人可能已經(jīng)發(fā)現(xiàn)易瞳科技設(shè)計師的匠心了。除了像大眼套小眼外，它表示的就是MR連續(xù)體。實(shí)際上Logo有四個圈，那少了的一個圈(虛線部分)包含的部分是什么呢，我這里先賣個關(guān)子，大家不妨來猜猜。猜中有紅包。

　　較之VR和AR，MR的概念范圍更大，不僅要身兼AR和VR，還需要在協(xié)調(diào)的基礎(chǔ)上，開創(chuàng)新的技術(shù)，鉆研新的算法。以這些概念為核心的智能眼鏡的出現(xiàn)將使人們對計算機(jī)的認(rèn)識產(chǎn)生觀念上的變化。這是一個哲理，也是人類史上計算機(jī)發(fā)展的一個潮流。