Meta Orion 初探:如果這只是原型,成品將會令人驚嘆
在我首次體驗Meta Orion AR眼鏡之前,我並不打算愛上它。我原本計劃冷靜地試用,快速找出這款尚未準備好進入市場的混合現實產品的優點和缺點。然而,我無法做到這一點,因為我享受了它的每一部分,幾乎到了興奮的程度。
讓我們先回顧一下。
Meta Orion AR眼鏡幾週前在Meta Connect大會上首次亮相,公司創始人兼CEO Mark Zuckerberg親自展示。現場演示因其構造、圖像質量、眼動和手勢追踪,以及智能Meta AI集成而引起了廣泛關注。
Orion看起來像是Google曾希望Google Glass能達到的效果,坦白說,也像是Apple Vision Pro今天應該達到的效果。
外觀像是厚眼鏡
我讀了一些早期的實測報告,既感興趣又有些嫉妒。我已經試用了超過十年的AR、VR和混合現實頭戴設備以及智能眼鏡,但我感覺到Orion是一個轉折點。即便如此,我還是認為它不可能那麼好。如果Meta還未準備好向公眾發布,Orion應該更多是一個實驗而非產品,其實用性最多也只是有限。
本週,Meta邀請我到其紐約總部親自試戴Orion。自從第一次聽說它以來,感覺這是一條漫長的道路,但公平地說,Meta已經走了更遠的路。
你可以在鉸鏈處稍微彎曲,但我從未完全折疊它們
Orion項目五年前以一個巨大的頭戴設備和一個沉重的背包開始(見下圖)。Meta可穿戴設備副總裁Ming Hua,也是Orion團隊的領導人,告訴我,當時的笑話是你必須非常強壯才能從事AI眼鏡的工作。
Meta在這些年迅速縮小了系統。到2022年,這個項目,當時被稱為Balboa,是一個被拆解的Quest Pro。到2023年,它只略微小了一些。幾乎是奇蹟般地,Orion從這個龐大且笨重的頭戴設備變成了一副幾乎時尚的鎂合金眼鏡,重量不到100克。
這就是我們的歷程。是的,左邊那個人背著一個背包。
縮小元件的技術,包括構建定制硅片,並將其分散在Orion的各個部位,本身就是一個成就。我看到了一個透明版本的Orion的圖片,幾乎每一平方毫米都充滿了電路、硅片和元件。即便如此,Meta還未能將所有東西都裝入框架內。
一些定制硅片存在於無線圓盤中。雖然Meta曾經試驗過圓盤的其他功能,如六自由度拇指控制和一些攝像頭,但在我的演示中,圓盤只是靜靜地放在旁邊。
眼鏡內置了足夠的傳感器來追踪眼睛和頭部的運動,但Meta為Orion輸入開發了一個肌電圖(EMG)手環,該手環可以讀取手腕在進行各種手勢時產生的微弱電信號。我曾使用過一些EMG手環,它們又笨重又不舒服。而Orion的伴隨手環不比一個汗帶厚,也不會不舒服。
圓盤上有一些未使用的技術。在我的演示中,我從未觸摸過它。
Orion的核心特徵可能是其顯示系統。鏡片看起來大多是透明的,但有一個複雜的微型LED投影儀、碳化硅和波導技術的交互作用,創造了一個驚人的無縫AR體驗。
投影儀位於框架中,鏡片旁邊有一層薄薄的碳化硅塗層,這種材料以其高折射率和低圖像鬼影能力而選擇。波導技術涉及在碳化硅表面上進行精細的刻蝕,將光和圖像引導到鏡片表面,形成寬達70度的視野。最終解析度達到每度13像素(ppd)。
規格令人著迷,但是真正讓我信服的是體驗。我只是瞥見了我們AR眼鏡的未來。
這個手環提供肌電圖輸入。如果它不夠緊,它就無法接收到信號。
穿戴未來
當他們遞給我黑色的Orion框架時,我第一個注意到的是它比我預期的輕。是的,它們比我的眼鏡厚很多,但實際上並不大很多。
當我第一次戴上它們時,感覺並不比我在挑選新眼鏡時的感覺不同。Meta的團隊堅持要找到合適的鼻托,我認為這與確保眼球追踪攝像頭的位置有關。Ming Hua提到框架使用鎂合金是因為其輕便和剛性,因為即使是頭髮寬度的偏移也會導致雙顯示器偏離軸線,導致雙重AR視覺。
由於這是一個正在進行的工作,我的一些演示由一個在電腦後面的人驅動和管理。他主要遠程進行故障排除和重啟;除此之外,我可以自行操作Orion。
除了智能眼鏡,我還戴上了一個EMG手環。它被放置在我手腕的高處,緊緊地以便能夠接收到我的指尖運動,這樣我可以感受到觸覺反饋,知道我已成功傳輸了一個手勢指令。
合適的鼻托很重要。
設置和校準與Apple Vision Pro相似,系統要求我僅用眼睛看一系列漂浮在我面前的點。我馬上注意到,無論我看向哪裡,我總是能看到Orion的AR顯示。後來,我學會了如何找到70度視野的邊界,但這需要努力,在正常佩戴和活動中,視覺填滿了我的視野(但從未遮擋它們)。
系統還訓練我使用幾個手勢來訪問和控制菜單以及與應用程序交互。主要是食指和拇指的捏合動作或中指和拇指的捏合動作。我在使用一個應該讓我滾動的甩手動作時成功率較低。在我的長時間演示中,EMG手環慢慢滑下我的手腕,最終像手鐲一樣掛著。這意味著它無法讀取我的手勢。如果我將它保持在手腕高處並使用稍微用力的手勢,它工作得很穩定。
主界面
主菜單也讓我想起了Vision Pro,我下意識地用手指捏合並抓住下面的條狀物,將界面拉近我。在整個演示過程中,我無法戴上我的眼鏡,這意味著一些視覺效果有點模糊,這就是為什麼我將它們拉近。我想知道,如果我擁有或曾經戴過隱形眼鏡,體驗會有多好。
我有幾個核心的Orion體驗,每一個都以其獨特的方式令人印象深刻。
Meta提供了一些體驗的B-roll圖片,這些圖片與我看到的非常相似。
當Ming Hua打來電話時,我看著接聽按鈕並捏合手指,視頻通話就會彈出在我面前,看起來像是一個漂浮的42英寸屏幕。當我起身走動時,屏幕保持在原位。我甚至可以從側面看它。它真的看起來像是我現實世界的一部分。我可以看到主界面手勢將界面拉到我面前。不僅視頻質量不錯,空間音效也很清晰。六個麥克風意味著我可以用正常的語調說話,Hua可以完美地聽到我。
不同的房間,但配料基本相同,是的,我看到了標籤出現在配料上。
我站起來走到一組配料前,包括菠蘿、可可、香蕉、乳清、棗子和椰子片。有一個手勢可以啟用Meta AI,但對我來說從未成功,所以我看著Meta AI圖標並用手指輕敲來訪問它。
然後我說:“給我一個食譜。”Meta AI理解這意味著它應該看著前面的配料並給出一個食譜。這是我們經常在沒有AI幫助的情況下做的事情。
在這種情況下,我看到Orion識別所有配料,並在每一個上放置小標籤。這裡的3D映射非常準確。幾秒鐘內,我得到了一個可用的食譜,可以翻頁瀏覽。當我從桌上移走一個配料並要求另一個食譜時,Meta AI進行調整,給我一個椰子包裹的香蕉。好吃。
“給我一個食譜”
我打開Instagram,這自然是主菜單的一部分,然後用捏合和上掃手勢滾動。甩手手勢在這裡也不起作用。有人在另一個窗口給我發消息,當有電話打進來時,我看著接聽選項,捏合手指,第三個窗口出現,顯示對方的略顯不安的VR化身。他在那邊戴著Quest 3s頭戴設備,但說未來兩個人戴著Orion眼鏡時,會看到對方的VR化身。
在AR中多任務處理是一件事。
在我們交談的過程中,我環顧三個屏幕。很難評估邊緣的圖像質量,因為我並沒有看那裡。當我看時,一切都很清晰。Hua告訴我,系統不僅追踪你的視線,還使用一種叫做瞳孔複製的技術,確保無論你看向哪裡,仍然能看到相同的圖像。
換句話說,如果你不正確地看圖像,圖像也不會扭曲。我認為這有助於Orion體驗的隨意沉浸感。我對使用Google Glass的記憶並不美好,總是不得不向上和向右看才能看到小屏幕。如果頭戴設備戴得不正確,東西看起來很奇怪。
當我在玩AR遊戲時,我非常認真。
Orion可以玩遊戲。我的第一個體驗是一個太空遊戲,我用眼睛和頭部運動來駕駛飛船,通過捏合拇指和食指來射擊。遊戲充滿了我的視野,非常有趣,我玩了所有五個關卡,得到了6000多分。
我唯一的抱怨是,我總是不小心退出遊戲進入Meta AI。我不知道為什麼會這樣,但我很快通過主界面手勢返回遊戲。
這個多人遊戲比看起來更有趣。
之後,我們玩了一個多人遊戲。我的對手戴著一副Orion眼鏡,站在離我8英尺遠的地方,我們玩虛擬乒乓球。我用手掌移動虛擬球拍,將半透明的綠色球反彈到牆上,進入他的空間。我在這裡表現不佳,輸了兩局。玩完後,他們鼓勵我繞著遊戲區域走動,從側面看它。我的失敗場地發出光芒;我伸手去觸摸……什麼都沒有。
是的,這準確地代表了我所看到的。
我對Orion的可行性有一些擔憂,特別是在聽說Meta認為他們可能無法獲得足夠的碳化硅來支持大規模分發後。然而,Hua似乎不那麼確定,告訴我在公佈後,許多碳化硅製造行業的人聯繫了他們。該材料仍然是顯示技術的可能選項之一。
這是個好消息,因為我感覺碳化硅在寬廣且相對沉浸的視野中起了重要作用。有趣的是,我剛才的基本體驗只是通向未來更好的Orion智能眼鏡的一步。
我戴的這副眼鏡的屏幕解析度是13ppd,但Meta已經有一副Orion原型,其解析度達到26ppd,是第一副眼鏡的兩倍。他們在房間裡有這副眼鏡,並邀請我試戴。
在我早先的演示中,我打開了一個瀏覽器窗口,觀看了最近Mets對Phillies的MLB分區系列賽片段。看起來相當不錯。現在,在26ppd的Orion智能眼鏡上,圖像質量有明顯的不同。球員的面孔和球場都更加清晰。
我意識到,當大家都在談論穿戴未來時,Meta正在快速推進,迅速更換和試驗新元件和功能。更薄、更輕、更高效、解析度更高且價格與高端智能手機相當(或更低)的Orion智能眼鏡可能比我們想像的更快到來。
當我最終摘下Orion AR智能眼鏡,經過近一小時的佩戴(它們最終要求充電),我驚訝地發現我的臉部沒有任何不適。我喜歡我的Vision Pro和Quest 3s體驗,但在15分鐘後,你知道你戴著一磅重的硅和塑料在臉上。Orion感覺像眼鏡,非常非常智能且具有AR功能的眼鏡。
未來是否已經近在咫尺?
編者評論:
Meta Orion AR眼鏡的出現無疑讓人驚嘆。從一個巨大的頭戴設備到輕便的智能眼鏡,Meta展示了它在技術縮小和創新方面的非凡能力。這不僅僅是技術上的進步,更是對未來生活方式的憧憬。Orion的核心特徵,如高質量顯示、精確的眼動和手勢追踪,以及智能AI集成,都為未來的AR應用奠定了基礎。
然而,我們也需要保持謹慎。雖然這些技術看起來很有前景,但在實際應用中,還有很多挑戰需要克服。例如,如何解決長時間佩戴的舒適性、如何確保數據隱私和安全、以及如何讓這些技術普及並被大眾接受,都是值得深入探討的問題。
總的來說,Meta Orion AR眼鏡的出現為我們描繪了一個充滿可能性的未來,但我們需要更多的時間和實踐來驗證其真正的價值和影響。無論如何,這是一個令人興奮的時刻,值得我們期待和關注。
以上文章由特價GPT API KEY所翻譯