博客專欄

EEPW首頁(yè) > 博客 > 小扎深夜炸場(chǎng),世界首款MR頭顯暴打Vision Pro!Meta版ChatGPT搬進(jìn)「元宇宙」,網(wǎng)紅神器眼鏡高能現(xiàn)身

小扎深夜炸場(chǎng),世界首款MR頭顯暴打Vision Pro!Meta版ChatGPT搬進(jìn)「元宇宙」,網(wǎng)紅神器眼鏡高能現(xiàn)身

發(fā)布人:傳感器技術(shù) 時(shí)間:2023-10-07 來(lái)源:工程師 發(fā)布文章
【新智元導(dǎo)讀】Meta昨夜的發(fā)布會(huì),又給我們帶來(lái)了億點(diǎn)點(diǎn)震撼。Meta Quest 3終于揭開神秘面紗,Llama 2加持的Meta AI搬進(jìn)了元宇宙,而智能眼鏡的演示甚至比頭顯還要讓人期待。
他來(lái)了他來(lái)了,小扎帶著Meta Quest 3卷土重來(lái)了!


比起前幾年相對(duì)安靜的Meta Connect開發(fā)者大會(huì),昨天深夜的這場(chǎng)大會(huì)相當(dāng)震撼。


首先炸場(chǎng)的,就是今年六月就官宣了的Quest 3。等了三個(gè)月,實(shí)際細(xì)節(jié)終于公布了!


而第二代眼鏡的強(qiáng)大功能,也讓現(xiàn)場(chǎng)觀眾在演示中不斷發(fā)出陣陣驚呼。


去年,價(jià)格過(guò)高的Meta Quest Pro銷量慘淡,6月,蘋果用Vision Pro給VR界樹立了全新的標(biāo)桿。


現(xiàn)在,Meta已經(jīng)被逼得箭在弦上了——它必須拿出東西來(lái),證明一年三百多億美元的錢沒白燒,硅谷的虛擬現(xiàn)實(shí)界,仍有它的一席之地。


在演講結(jié)束時(shí),小扎總結(jié)道:MR+AI+智能眼鏡,這個(gè)組合就是未來(lái)。



在他看來(lái),智能眼鏡意味著終點(diǎn)——把AI和頭顯都結(jié)合在了一起,硬件問(wèn)題終于解決了。


Quest 3:首款MR頭顯亮相


世界上首款混合現(xiàn)實(shí)頭顯Meta Quest 3,終于面世了!



10月10日,Quest 3將正式上架,現(xiàn)在已經(jīng)開放預(yù)購(gòu)。


125GB版本起價(jià)499.99美元,512GB版本649.99美元。



最便宜的只要3600塊,這個(gè)定價(jià)是把兩萬(wàn)多塊的Vision Pro按在地上摩擦。


更不消說(shuō),Quest 3還不需要外接電池包這類東西。



VR帶來(lái)的沉浸式體驗(yàn),會(huì)把我們瞬間帶到違反物理定律的奇幻世界。


而MR帶給我們的,則是與物理世界建立聯(lián)結(jié)。
通過(guò)Quest 3,你可以在VR和MR中隨意切換。


而只要雙擊Quest 3的側(cè)面,你就可以在VR體驗(yàn)和MR的混合環(huán)境之間無(wú)縫過(guò)渡,選擇是完全身臨其境,還是讓虛擬元素疊加在周圍的物理環(huán)境中。


從《行尸走肉》的比較視頻中可以看出,它的視覺分辨率比Quest 2提高了30%,音域提升了40%,也比Quest 2更薄,重量分布更均衡,所以具有最大的舒適度。



我們可以在咖啡桌上彈奏虛擬鋼琴。



可以在眼前玩大型樂(lè)高。


可以和朋友一起玩游戲。


也可以在客廳中打開一扇門,走進(jìn)另一個(gè)世界。


與Quest 2相比,Quest 3的高保真全彩直通像素增加了10倍以上,這樣就能讓物理環(huán)境始終保持在我們的視線范圍之內(nèi)。


在家里就能和在身處異地的朋友一起看NBA。



在你的客廳中,你可以放置任何虛擬現(xiàn)實(shí)物品。


比如在小扎客廳的照片墻上,就貼著他在沖浪的動(dòng)圖。


每當(dāng)走過(guò)客廳的這一角,就會(huì)看到栩栩如生的戶外風(fēng)景。


處理器:巔峰性能,來(lái)自高通


Quest 3是世界首款采用全新驍龍XR2 Gen 2平臺(tái)的設(shè)備,后者由Meta和驍龍合作開發(fā)。


它的圖形處理能力,達(dá)到了Quest 2的兩倍。



此外,這也是高通首次在VR頭顯芯片中,內(nèi)置特征檢測(cè)和6DoF跟蹤功能。


它可以讓Quest 3等頭顯將「最密集」的任務(wù)之一轉(zhuǎn)移到專用芯片上,不僅讓用戶始終能夠在3D環(huán)境中保持方向,同時(shí)還能將功耗和延遲降低一半以上。


說(shuō)到延遲,高通表示,頭顯現(xiàn)在可以提供全彩直通視頻,平均延遲僅為12毫秒——和蘋果Vision Pro的定制 R1 芯片一樣快。



由此,Quest 3的加載時(shí)間也快如閃電,在沉浸式游戲中會(huì)呈現(xiàn)出令人難以置信的高清細(xì)節(jié)。


介紹到《刺客信條 Nexus VR》時(shí),小扎還難掩激動(dòng)地說(shuō),「終于講到這兒了,我知道大家都在等這個(gè),確實(shí)值得等待!」


鏡片更薄,分辨率更高


在Quest 3中,Meta采用了最先進(jìn)的顯示器和光學(xué)元件。


與Quest 2相比,Quest 3的4K+無(wú)限顯示實(shí)現(xiàn)了近30%的分辨率大飛躍。


每度25像素,每英寸1218像素,讓Quest 3實(shí)現(xiàn)了整個(gè)Quest系列的最佳分辨率。


這也讓Quest 3的視覺效果非常壯觀,戴上它后,你簡(jiǎn)直想要伸手去觸摸周圍的世界。



此外,在新一代Pancake技術(shù)的加持下,Quest 3不僅在光學(xué)剖面上比Quest 2減薄了40%,而且還不會(huì)影響視覺的沉浸感。



在舒適度上,Quest 3也比Quest 2有了提升。


因?yàn)橥庑胃。N合度可以定制、重量分布更均衡,我們就可以在玩游戲時(shí)得到最舒服的體驗(yàn)。



100+ Xbox游戲,任你玩


另外,小扎還宣布了一個(gè)好消息:Xbox Cloud Gaming將于12月登陸Quest 3,解鎖100+款游戲。


其中就包括我的世界、Roblox、Rumble、XTADIU等等,每月費(fèi)用約為16.99美元。



把辦公搬進(jìn)元宇宙


有了Quest 3,以后你就可以在虛擬世界辦公了。


Word、Excel等辦公軟件,都可以使用。


上班也會(huì)變得更加「有趣」。


開源Llama2,重塑Meta全家桶


接下來(lái),就到了最重要的AI時(shí)刻。


今年,Meta還沒有正式開過(guò)關(guān)于AI的發(fā)布會(huì),都在默默地發(fā)布自己的開源模型。


先是,2月LLaMA大模型開源,一石激起千層浪,AI社區(qū)模型火炬徹底被點(diǎn)燃,壯大了「羊駝家族」。


緊接著,分割模型SAM、語(yǔ)音模型SeamlessM4T、多模態(tài)AI模型ImageBind、Code llama、Llama 2接連開源,已經(jīng)打下了堅(jiān)實(shí)的基礎(chǔ)。



正如小扎所說(shuō),「這只是開始」。


接下來(lái),就是要把AI帶入Meta全家桶,開啟不一樣的體驗(yàn)。


「表情包生成器」Emu,5秒出圖


前幾天,OpenAI剛剛推出DALL·E 3,文生圖再次上升到一個(gè)新階段,甚至有網(wǎng)友紛紛表示R.I.P. Midjourney。


今天,小扎也推出了自家的人工智能圖像生成模型——Emu(Expressive Media Universe)。


Emu最大的特點(diǎn)是,只用簡(jiǎn)單的文字,5秒即生圖片。


比如:「一只在彩虹森林中的神仙貓咪」。



「徒步旅行者和北極熊」。



「水下的航天員」。



「在花叢中的一位女士」。



「如果恐龍是一只貓咪」。



與其他文生圖模型相比,Emu最有趣的是,可以一鍵生成表情包。


當(dāng)你正和人聊天時(shí),不用絞盡腦汁去翻找一個(gè)合適的表情包了。


比如,和朋友約好了背包旅行,想要發(fā)一個(gè)生動(dòng)的準(zhǔn)備去旅行的表情包。


「一只快樂(lè)的刺猬騎著摩托車」



選擇自己喜歡的一個(gè),發(fā)送。



當(dāng)然了,你可以生成各種各樣的表情包,僅需要簡(jiǎn)單幾個(gè)詞。


很快,任何人都可以在Ins中進(jìn)行圖像編輯——重?fù)Q風(fēng)格和背景,背后就是由Emu和分割模型SAM加持。


重?fù)Q風(fēng)格,可以根據(jù)你所描述的風(fēng)格,重構(gòu)想像輸出圖片。


如下, 輸入「水彩」,你的照片就立刻變成水彩畫了。


或者,把扎克伯格小時(shí)候的照片變成「搖滾朋克風(fēng)格」。



又或者給金毛換一個(gè)「長(zhǎng)頭發(fā)」,就得到了:



你甚至可以為圖片更換背景。


找到一張自己躺在草坪中的照片,輸入「被小狗包圍」,一群可愛的小狗就伴你左右了。


又或者,家庭合照中,背景也可以隨意切換。



Meta版ChatGPT終于來(lái)了


「我們每天,都會(huì)用不同的AI做不同的事」。


除了文生圖,小扎正式官宣Meta自家的人工智能聊天機(jī)器人——Meta AI,可以稱為Meta版的ChatGPT。



Meta AI是基于開源模型Llama2打造的,同時(shí)還連接了微軟Bing搜索,能夠獲取實(shí)時(shí)信息。


你可以直接與它對(duì)話,甚至自研Emu加持,能夠聊天生圖。



想象一下,您和您的朋友正在群聊中討論去圣克魯斯應(yīng)該走哪條小路。Meta AI會(huì)在聊天中快速給出回答。


如果徒步旅行結(jié)束后,你想用一種有創(chuàng)意的方式來(lái)紀(jì)念這一天,怎么辦?


Meta AI可以幫你。


輸入@MetaAI /imagine+描述性文本提示,比如 「創(chuàng)建一個(gè)帶有徒步旅行者和紅杉樹的徽章」,就搞定了。


小扎介紹,Meta AI很快就可以在WhatsApp、Messenger、Instagram上使用。



最重要的是,今天全新發(fā)布的硬件產(chǎn)品Quest 3和二代眼鏡都將集成Meta AI。



角色宇宙


除此之外,你還可以在Meta AI上,玩轉(zhuǎn)各種角色。


也就是說(shuō),你可以得到28種不同的AI「明星助手」,每個(gè)助手都有角色定義。



比如,當(dāng)你想聊聊今天吃什么,或者怎么烹飪的時(shí)候。


你就可以找經(jīng)驗(yàn)豐富的廚師長(zhǎng)Max,由洛杉磯最火的韓國(guó)籍廚師Roy Choi扮演。


又或者,你想寫一個(gè)AI人物的故事,你就可以找擅長(zhǎng)創(chuàng)意寫作的Lily。



外出旅行,網(wǎng)紅打卡地推薦,旅行專家Lorena可以為你提供建議。



美國(guó)說(shuō)唱歌手「史努比狗狗」就是地下城主,引來(lái)臺(tái)下觀眾一陣大笑。



小扎現(xiàn)場(chǎng),還給大家親自做演示。



看得出來(lái),他玩得是真開心!



AI studio讓每個(gè)人開發(fā)自己的AI


演示結(jié)束后,小扎又推出了一個(gè)支持創(chuàng)建人工智能的平臺(tái)AI Studio,讓會(huì)編碼,甚至不會(huì)編碼的人都可用。



對(duì)此,企業(yè)可以通過(guò)這個(gè)平臺(tái),創(chuàng)建改善客戶服務(wù)體驗(yàn)的AI。
對(duì)于創(chuàng)作者來(lái)說(shuō),他們將能夠構(gòu)建專為元宇宙打造的AI應(yīng)用。



另外,Meta還在打造一個(gè)沙盒,將于明年發(fā)布,讓任何人都可以嘗試創(chuàng)造自己的人工智能。


隨著人工智能宇宙不斷發(fā)展壯大,Meta預(yù)計(jì)將把這個(gè)沙盒帶到元宇宙中,讓每個(gè)人有機(jī)會(huì)創(chuàng)建更高水平的人工智能。


Ray-Ban Meta:首款搭載Meta AI的智能眼鏡


本次發(fā)布會(huì)上的另一大亮點(diǎn),就是全新的Ray-Ban Meta智能眼鏡了!


日常戴上它,你不用掏出手機(jī)就可以和朋友打電話。



戴上它,你還可以輕松實(shí)現(xiàn)第一視角的視頻拍攝。


隨時(shí)隨地能向粉絲展示自己的生活,簡(jiǎn)直是網(wǎng)紅必備神器!



而且,只需雙擊兩下眼鏡上的按鈕,即可在手機(jī)和眼鏡的攝像頭之間實(shí)現(xiàn)無(wú)縫切換。



甚至還能讓你知道目前觀看直播的人數(shù),和最新的評(píng)論是什么。

功能這么炸裂的產(chǎn)品,賣多少錢呢?


起價(jià)299美元,10月17日上市。



這次,Meta在攝像頭、麥克風(fēng)和揚(yáng)聲器上都進(jìn)行了大幅的升級(jí)。


可以說(shuō),從Ray-Ban Stories的500萬(wàn)像素,升級(jí)到Ray-Ban Meta的1200萬(wàn)像素超寬屏攝像頭,提升是非常明顯的。


畢竟上一款配備500萬(wàn)像素后置攝像頭的蘋果手機(jī),還是2010年推出的iPhone 4……


拍攝方面,照片分辨率直接從初代的2592 x 1984像素,直接躍升到了3024 x 4032像素。同時(shí),還可以實(shí)現(xiàn)1080p 30幀的視頻錄制。



不僅如此,Meta還給眼鏡搭載了高通最新的驍龍AR1 Gen 1芯片。


雖然,AR1 Gen 1在性能上不是最強(qiáng)的,但它專門針對(duì)時(shí)尚、輕巧的智能眼鏡進(jìn)行了優(yōu)化,不會(huì)有過(guò)熱和燙傷臉部的風(fēng)險(xiǎn)。



具體來(lái)說(shuō),芯片采用了雙ISP設(shè)計(jì),可同時(shí)進(jìn)行照片和視頻拍攝,甚至可直接向社交媒體賬戶進(jìn)行直播。


而對(duì)Wi-Fi 7和藍(lán)牙5.3的支持,也讓用戶可以更輕松地將素材分享到網(wǎng)上。


此外,AR1 Gen 1還具有端側(cè)AI(on-device AI)功能,不僅可以增強(qiáng)圖像和音頻質(zhì)量,而且還可以進(jìn)行視覺搜索和實(shí)時(shí)翻譯。


就芯片本身而言,AR1 Gen 1理論上可以支持分辨率高達(dá)1280 x 1280的嵌入式屏幕。


但遺憾的是,Meta并未在其智能眼鏡中加入任何AR技術(shù)——錄制的視頻不是3D的,也不能添加任何AR效果,眼鏡上也沒有顯示屏。



不過(guò),在設(shè)計(jì)層面,新款的Ray-Ban Meta確實(shí)更加豐富了——不僅有Wayfarer和Headliner兩種鏡框,而且還有一系列顏色可以自由搭配。


其中,透明的藍(lán)色、黃色和黑色鏡框,還可以顯示出鏡腿上電路的形狀。



其他的升級(jí)還有:


多達(dá)5個(gè)麥克風(fēng)的陣列(包括鼻梁上的1個(gè)),不僅可以讓通話和語(yǔ)音指令更加清晰,而且還可以記錄視頻片段中的空間音頻。


鏡腿上搭載的開放式揚(yáng)聲器,音量和低音效果也比初代更好。


鏡框更加輕薄,具備IPX4防水功能,充電后可持續(xù)使用4小時(shí),在附帶的皮套中充電可再使用32小時(shí)或大約8次充電。



有了Meta AI,什么都能做


然而,對(duì)于AI的升級(jí),Meta可以說(shuō)是畫了個(gè)大餅。


也就是,今天全新發(fā)布的Meta AI,要等到明年才能上機(jī)。


等到那個(gè)時(shí)候,具備有多模態(tài)能力的Ray-Ban Meta,才算是一款完整的智能眼鏡——


識(shí)別鏡頭拍攝到的物體、讀取眼前的文字都不在話下,甚至還能給照片或視頻配文。



如果你擅長(zhǎng)給自家貓貓拍照,想分享給廣大網(wǎng)友,卻不擅長(zhǎng)寫文案怎么辦?


Meta AI也給你包了!



如果你正在旅游,卻不知道眼前的景觀是什么,可以直接問(wèn)Meta AI。


根據(jù)眼鏡里實(shí)時(shí)呈現(xiàn)的鏡像,它就能告訴你眼前是什么。



不過(guò),目前還不清楚,在得到完整AI加持之后的Ray-Ban Meta眼鏡,能不能充當(dāng)一個(gè)智能助手的角色。


與此同時(shí),它又該如何成為一個(gè)「沒有屏幕」的AR類產(chǎn)品,也還是個(gè)謎。


但無(wú)論如何,在生成式AI大爆發(fā)的這一年,Meta也沒有落下。


這次發(fā)布會(huì)交出的答卷,可以說(shuō)非常精彩,并不遜于蘋果的Vision Pro,而且后者目前還并未正式售賣。


這就更讓人期待,硅谷巨頭們的VR大戰(zhàn)了。


*博客內(nèi)容為網(wǎng)友個(gè)人發(fā)布,僅代表博主個(gè)人觀點(diǎn),如有侵權(quán)請(qǐng)聯(lián)系工作人員刪除。



關(guān)鍵詞: 元宇宙

相關(guān)推薦

技術(shù)專區(qū)

關(guān)閉