微軟揭密HoloLens黑科技

作者：時(shí)間：2016-05-27 來(lái)源：eettaiwan

加入技術(shù)交流群
- 掃碼加入
  和技術(shù)大咖面對(duì)面交流
  海量資料庫(kù)查詢

　　微軟(Microsoft)在日前于布魯塞爾舉辦的IMEC技術(shù)論壇上揭密其HoloLens增強(qiáng)實(shí)境(AR)眼鏡及其專用加速器——Holographic Processing Unit (HPU)處理單元。

本文引用地址：http://m.butianyuan.cn/article/201605/291798.htm

　　在今年3月下旬，微軟已經(jīng)開始出貨HoloLens的開發(fā)人員版了。這款開發(fā)人員版HoloLens一發(fā)布，網(wǎng)路上隨即充斥著各種拆解分析，但至今卻未見來(lái)自這款頭戴式顯示器的設(shè)計(jì)者發(fā)表任何評(píng)論。

　　“我們已經(jīng)發(fā)表HoloLens約18個(gè)月了，通常僅強(qiáng)調(diào)使用體驗(yàn)與軟體——這是第一次我們打算討論硬體部份，”微軟HoloLens開發(fā)部門副總裁Ilan Spillinger表示。

　　微軟的HoloLens頭戴式顯示器包括4個(gè)環(huán)境感測(cè)器、Kinect微型深度相機(jī)以及慣性量測(cè)單元(IMU)。而在其核心部份的HPU基本上是一款數(shù)據(jù)融合感測(cè)器，可以從HoloLens上的一連串感測(cè)器擷取輸入。同時(shí)，它還能加速演算法，以利于追蹤用戶的環(huán)境、運(yùn)動(dòng)與手勢(shì)，以及顯示全息影像。

　　這款28nm HPU基本上采用高度客制化的DSP陣列設(shè)計(jì)，執(zhí)行功耗還不到10W。它包括多顆Tensilica DSP核心，從而為執(zhí)行數(shù)百個(gè)HoloLens特定指令集實(shí)現(xiàn)最佳化。

　　每個(gè)核心都針對(duì)一種特定功能與功能子集而客制化。在聽起來(lái)像是范紐曼(Von Neumann)的架構(gòu)中，每個(gè)核心通常都有其獨(dú)特的記憶體單元組織，用于加速“需要特殊本地記憶體與獨(dú)特記憶體架構(gòu)的新型演算法，而不是典型的1-2-3級(jí)快取，”Spillinger解釋。

　　該HoloLens HPU設(shè)計(jì)在一款專為其頭戴式裝置量打造的精簡(jiǎn)主板上

　　HoloLens 頭戴式裝置采用英特爾(Intel) 14nm Cherry Trail SoC，以及執(zhí)行于Windows 10的嵌入式繪圖核心。在主板的兩側(cè)還搭載64 Gb快閃記憶體與2 Gb外記憶體，平均分布于其HPU與Cherry Trail SoC之間。

　　Spillinger并未透露這款HPU的開發(fā)藍(lán)圖，但表示他已經(jīng)“看到一些可執(zhí)行該演算法的新機(jī)會(huì)”。

　　該HPU也適用于Google上周為其資料中心發(fā)布的新款加速器，以及一家新創(chuàng)公司正開發(fā)中的設(shè)計(jì)。

　　Spillinger呼吁半導(dǎo)體工程師盡快為開發(fā)更高性能、更低功耗的晶片做好準(zhǔn)備，從而協(xié)助其打造更輕巧、更低成本且搭載更多感測(cè)器與功能的頭載式顯示器。

　　Ilan Spillinger的職業(yè)生涯一開始是先在英特爾開發(fā)Centrino——其首款筆記型電腦專用處理器。接著曾經(jīng)在IBM設(shè)計(jì)Infiniband與 Power晶片，后來(lái)則協(xié)助微軟與任天堂(Nintendo)為Xbox 360與Wii游戲機(jī)開發(fā)ASIC晶片。

　　Spillinger在2007年底加入微軟，并開始開發(fā)Kinect。該計(jì)劃后來(lái)與其他工程師的計(jì)劃合并，共同開發(fā)擴(kuò)增實(shí)境頭戴式顯示器，而HoloLens計(jì)劃也隨之誕生。

　　復(fù)雜的感測(cè)器陣列

　　如上圖中的HoloLens感測(cè)器陣列包括4顆環(huán)境感測(cè)器，用于追蹤頭部動(dòng)作以及控制顯示器的手勢(shì)。深度感測(cè)器是縮小版的Kinect，可支援手勢(shì)追蹤約1 公尺范圍的短距離模式，以及映射室內(nèi)的長(zhǎng)距離模式。200萬(wàn)畫素(2MPixel)的高解析度視訊相機(jī)則用于投射使用者看到的影像。

　　光學(xué)內(nèi)部真相