地表最強全息AR眼鏡問世!Meta十年絕密豪賭燒10億,現場開箱老黃親測
新智元報道
編輯:Aeneas 桃子
【新智元導讀】就在剛剛,小扎攜掉最強AR眼鏡Orion登場!Meta首款AR眼鏡,苦研十年後,終於誕生了,成本高達10000美元。果然,小扎讓我們離元宇宙又近了一步。這會是一次全新的範式轉變嗎?
Meta首款AR眼鏡,終於亮相了!
醞釀十年,燒錢數十億,作爲小扎元宇宙宏圖大業的一部分,我們今日終於得見Meta AR眼鏡的真容。
這款名爲Orion的產品,由帶MicroLED 投影的眼鏡、人機交互的腕帶、提供計算能力的小盒子組成。
輕快的外觀,領先行業的AR體驗,Meta再爲業內做出開創性的壯舉。虛擬現實世界的入口,元宇宙的雛形,或許就是這般樣子。
有趣的是,因爲製作成本高達10000美元,這款眼鏡本次僅做展示之用,是產品原型,並不會正式發售。
英偉達老黃已經試戴上了
每個計算平臺,都會帶來我們與設備交互方式的範式轉變。上一次是鼠標、智能手機,這一次,會是AR眼鏡嗎?
此外,在Meta Connect 2024發佈會上,其他重要產品也悉數亮相——
Meta Quest 3S頭顯眼鏡發佈;Meta Ray-Ban眼鏡上線新功能;Meta首個擁有多模態能力的開源大模型Llama 3.2亮相。
AR眼鏡:元宇宙入口的新範式?
地表最強AR眼鏡,終於誕生了!
在昨晚的發佈會上,小扎激動地向全世界展示了這款地表最強AR眼鏡。
研發過程,經歷了整整十年。目標很簡單,但技術挑戰卻極其艱鉅。
目標有多簡單,無非是要滿足是眼鏡而非頭戴設備、無線、重量不超過100g、寬廣視野、全息顯示、清晰度夠高、能捕捉到細節、亮度足、在不同光線下都能看清、顯示面積夠大、足以呈現電影銀幕或多個工作用顯示器、能透過它看到外界這些要求罷了。
研發工程師們嘔心瀝血了整整十年,終於做出了Orion。
注意,這不是透視效果,這是物理世界上面疊加了全息圖
如果收到消息,你不必掏出手機,只要在全息圖中做出幾個手勢,就可以回覆了。
遠方的人,可以以全息圖的形式瞬間傳送到你身邊。
敲敲手指,你就可以玩紙牌、象棋、全息乒乓球了。
小扎表示,Orion會給未來的元宇宙世界提供更多入口。
可以說,它包含着AI空間計算終極形態的野心。
比起蘋果過於笨重的Vision Pro,Orion的確有了未來空間計算AI設備的雛形。
此次發佈的Orion,具有寬視野顯示器,內置無線AI,是Meta十年來一直致力實現的事。
顯示器
在Orion中,Meta選擇了微型LED顯示器。
可以說,這款AR眼鏡的最大挑戰,就是顯示器。
由於需要以不符合原理的方式彎曲光束,團隊需要建造一個全新的顯示架構。
它可以讓眼鏡框架中的微型投影儀將光線射入波導,將納米級3D結構打印到透鏡中,使光線發生折射,從而在我們的環境中顯示不同深度和尺寸的全息圖。
爲此,團隊沒有使用玻璃光學器件,而是使用了碳化硅的新材料。
後者很輕,不會產生奇怪的光學僞影或C stray散光,且具有非常高的折射率,這,就是實現大視野和有效利用光子的關鍵。
散熱
另一個挑戰就是散熱。我們不可能把風扇塞進一副眼鏡裡,怎麼辦呢?
唯一消除熱量的方式,就是將其輻射出去。
團隊做了兩件事。首先,框架由散熱材料鎂製成。其次,Orion中的許多定製組件也是用鎂材料設計。
而且團隊構建了數十個定製硅芯片,不僅節能,還能針對AI機器感知和圖形算法進行優化。
這樣,Orion就可以採用手眼跟蹤以及slam算法,大大降低了算法所需的功耗。
外形
Orion的尺寸爲一英尺,具有光學對準功能,精度達到了人類頭髮絲厚度的1/10。
它有七個微型攝像頭和傳感器,尺寸很小,因而可以嵌入鏡框邊緣。
Meta表示,在目前最小的眼鏡外形中,他們實現了可用的最大視野。
這使得數字內容能與我們所看到的世界融爲一體。
全新互動模式:肌電圖腕帶
傳統的AR眼鏡,是用語音控制和手眼跟蹤來導航用戶界面。
但Meta認爲,我們還需要一種更謹慎、私密的全新方式,跟AR眼鏡進行交流。
這就是全新上線的肌電圖腕帶和眼球注視功能。
腕帶會檢測你的神經運動信號,這樣你就可以用手勢進行點擊。
只需看着目標,就可以進行選定。
總之,Orion的輸入和交互系統,將語音、眼鏡注視、手部追蹤和EMG腕帶無縫結合,讓我們可以更輕鬆、更快、更舒適地操作。
AR眼鏡能否成爲主流?Meta表示,只要解決了這兩個問題,就能實現。
第一,能否實現根本性的技術突破,比如將大顯示屏融入一副普通眼鏡中?
第二,什麼用例是你只能在AR眼鏡上操作,不能在其他設備上完成的?
而Orion原型,就是Meta對這兩個問題的回答。這個原型是對未來的一瞥,現實已觸手可及。
雖然作爲消費產品,它的價格仍然昂貴得嚇人,但毫無疑問,它可能是未來最先進的消費電子產品,是自智能手機以來最有影響力的新設備。
在下一波以人爲本的計算浪潮中,藉助Orion,Meta又邁出了重要一步。
Quest 3S,價格比Vision Pro親民
混合現實頭顯Quest 3在6月初首次發佈之後,Meta這次推出了同系列低配版Quest 3S頭顯。
相較於原版(499美元起),Quest 3S更具性價比,僅賣299.99美元(約2100元)。
Quest 3S與Quest 3也有着相同的功能:
高分辨率全綵混合現實,能夠讓物理世界和虛擬世界無縫融合,並在高通Snapgon XR2 Gen 2搭載。
通過Touch Plus控制器,可以進行手部追蹤的自然交互。
當然,Quest 3S也是採用的Meta自研Horizon OS系統,各種娛樂、健身、社交、遊戲應用,應有俱全。
而且,隨着軟件定期更新,頭顯也會變得越來越好。
若說這兩款頭顯,有何不同?
最主要的變化在於設計、菲涅爾透鏡(Fresnel lenses),以及略有縮小的視角場(FOV)。
Quest是一款集家庭娛樂系統和私人教練於一體的產品。
Connect大會上,宣佈了全新Prime Video、亞馬遜音樂、Twitch程序上線,未來還將推出Alo Moves XR和SuperNatural Together多人的健身應用程序。
值得一提的是, DC知名遊戲Batman: Arkham Shadow終於在Quest 3系列頭顯中免費玩。
在VR世界中,體驗蝙蝠俠前所未有的世界。
與此同時,戴上頭顯辦公,也是一個不錯的選擇。
Meta將微軟辦公軟件集成到應用之中,畫布延展,多人協作,打工人都不曾想到,未來辦公這麼美好。
很快,Quest頭顯也將輕鬆連接到Windows 11個人電腦上,通過鍵盤直接配對。
電腦屏不夠用,也不用外接顯示屏了,一個Quest頭顯就能實現。
Meta稱,我們正在建設的:不是下一個遊戲平臺,而是下一個計算平臺。
在這個平臺中,你可以看電影、聽音樂、做電子表格、與朋友一起玩遊戲,閒逛,甚至聊天。
因此,計算平臺系統Horizon OS,便是開啓這一幕最理想的界面。
會上,Meta還公佈了基於Horizon OS平臺上工具更新。
主要有擴展混合顯示功能的套件,比如音頻到表情、聲線追蹤(ART)、微手勢、直通攝像頭訪問API等。
如下,是通過微手勢觸發移動的示例。
另外,在虛擬化身上更新,Meta計劃讓照片在虛擬空間動起來。
這就非常類似,蘋果Vision Pro中的「空間視頻」。
這裡,Meta將其稱之爲Hypersscape,可以將你帶入照片中的虛擬世界,就像是在一個平行時空中的自己。
這背後就利用高斯渲染技術,通過雲渲染和流媒體方式,讓其在Quest 3頭顯中活靈活現。
小紮在主旨演講中,展示了紐約Daniel Arsham的藝術家工作室。
通過手機掃描房間,並在Horizon中便可輕鬆將物理世界,帶到數字世界中。
根據官方定價,配備128GB入門級Quest3S,僅需299.99美元。256GB存儲空間,售價399.99美元。
想要直通頂級體驗,那就得配上512 GB Quest 3。
新增記憶能力,Ray-Ban眼鏡再升級
另一邊,首發自研AR眼鏡之外,Meta還爲Ray-Ban眼鏡更新了一些新功能。
幾個月前,集成Meta AI助手眼鏡,大秀了一場。
這次,Meta稱不用說「嘿,Meta」,直接用喚醒詞即可開啓對話,讓人與設備之間交談更絲滑。
比如,當你拿起面前這件衣服,盯着它並表示,「幫我記住這件夾克,這樣我就可以向Nas展示」。
同時,Ray-Ban眼鏡新增了記憶功能。
假設當你打飛的到了某個地方時,不必絞盡腦汁記住自己在哪裡,眼鏡就可以爲你代勞了。
而且,更貼心的是,你可以用自己聲音設置一個提醒——安全着陸時,三個小時內給媽媽發短信。
眼睛看哪,Ray-Ban便會指向哪。
比如,看着傳單上的電話號碼、或者二維碼,眼鏡可以根據你所看內容,採取行動。
另外,眼鏡的視頻輸入正添加Meta AI助手支持,方便獲得實時的幫助。
當你去另一座城市,遇到新的地標,或者想要了解下一步旅行計劃,直接可以與Meta AI實時交流。
大會上,Meta還預告了下一個新功能——實時翻譯。
當你與西班牙語、法語、意大利語的人交談時,可以通過眼鏡的開耳揚聲器,直接聽到的是「英語」的版本。
小扎現場和同事演示了,西班牙語和英語如何無縫交流精彩一幕。
這簡直就是異域旅行者們的福音,完全無障礙暢玩全世界。
總結一波:Quest 3S頭顯、雷朋智能眼鏡、全息AR眼鏡、Llama 3.2大模型……這屆Meta Connect 2024大會,小扎贏麻了。
參考資料:
https://x.com/boztank/status/1838999636402647453
https://about.fb.com/news/2024/09/introducing-orion-our-first-true-augmented-reality-glasses/
https://www.meta.com/blog/quest/connect-2024-keynote-recap-quest-3s-llama-3-2-ai-wearables-mixed-reality/