一年一度的Meta Connect 2024于加利福尼亞州門洛帕克召開。扎克伯格以意料之中的新品Quest 3S作為開場，宣布Meta的元宇宙之夢開始向入門級消費市場普及。

同時，Meta還公布了其AI大模型Llama 的最新3.2版本，提供了視覺多模態能力，聯合最新的AI語音對話能力AI Voice 。這些模型發布最大的意義在于，Meta補齊了所有的主流多模態，這為其融合AI和XR硬件打下了堅實的基礎。同時，Meta公布的幾項AI應用，如AI實時翻譯、堪比“Her 2.0”的實時AI數字人也在業界解決方案上更進了一步，有成為殺手應用的潛力。

除此之外，本次發布的AR眼鏡Orion，小扎稱之為地表最強AR眼鏡，它也給未來的元宇宙世界提供了更多入口。雖然仍不完美，但也是一個承載著AI空間計算設備最終形態野心的產品。據外媒報道，這款產品的成本超1w美金。

Mate依舊堅持在元宇宙和AI兩條路上持續前進，并通過產品的融合，努力將虛擬現實和人工智能結合在一起。

2024年的Connect大會，扎克伯格再一次向世界展示了他布局下的虛擬現實世界的入口形態，我們看到了虛擬與現實的融合，自主可控和人工智能的融合，以及現實產品形態和未來操作體驗上的融合。

01 Meta Quest 3S 登場，降價不降料

Meta Quest 3S最先登場，這次它罕見地將產品價格先于參數和新功能更早進行發布。

扎克伯格急于讓所有人知道這款全新的VR眼鏡只賣299.99美元，比去年同期發布的Quest 3足足便宜了200美元，而且，它相比Quest 3并沒有減配太多。

Meta Quest 3S擁有和“大哥”Quest 3相同的高通驍龍XR2 Gen 2芯片和8GB運行內存，這意味著，它們兩者在計算數據的處理能力上完全相同。

同時，Quest 3S使用了和Quest 3完全相同的Touch Plus控制器，支持眼手部動作捕捉技術。

甚至，Quest 3S還擁有更長的續航時間。在Meta給出的官方數據中，內置4324mAh電池的Quest 3S可以實現2.5小時的續航，而擁有更大電池容量的Quest 3（5060 mAh），最長只能工作2.2個小時。

作為一款廉價款的虛擬現實眼鏡產品，Quest 3S的遺憾之處是并沒有使用更主流的Pancake光學結構，它使用了和Quest 1、2系列同款的菲涅爾透鏡，這種設計相對更加成熟且成本低，但也意味著它整體的體積和重量會比Quest 3更大。

但兩款產品真正的區別是顯示效果上的差異：Quest 3S采用1832 x 1920（20 PPD每度像素）快速切換 LCD，刷新率為 90/120 Hz。

它的水平和垂直視場角只有96和90度，相比之下，Quest 3擁有2064 x 2208（25 PPD每度像素）以及水平110度、垂直96度的視場角。

很顯然，Quest 3S彰顯了Meta在多年元宇宙夢想下的野心，它用核心配置與主流產品相接近、但價格卻更便宜的虛擬現實眼鏡，推動VR眼鏡向更廣泛的用戶群普及。

而驅動Meta做出這樣一款產品的另一個動力，是其還在逐步完善中的虛擬現實生態。

在發布會上，扎克伯格表示Quest 3S將支持杜比視界技術，同時增加屏幕識別功能，能識別正在用的電腦并一鍵投屏。這拓展了Quest 3S這類虛擬現實頭顯產品更廣泛的使用場景。

不過Meta搞砸了一件事，在現場演示這項技術的時候，Quest 3S意外的出現了崩潰，引得現場一陣歡呼，扎克伯格無奈趕緊搪塞過去。

隨后，扎克伯格展示了最新版本的Horizon Worlds，雖然看起來還是很像“過家家”游戲，但也算正在慢慢進步著：今年推出了Avantar的多人同看Youtube的功能，希望以此吸引更多的油管用戶。

第三方的應用方面，最大的驚喜來自《蝙蝠俠：阿卡姆暗影》，這款游戲將于10月22日發布，并將與新Quest 3和3S捆綁銷售，有效期至明年4月。而之前已公布過的《異形：流氓入侵》和僵尸游戲《亞利桑那陽光》也會登陸Quest平臺。另外，Meta還宣布將為Quest推出Wordle（紐約時報每天一更的文字游戲）。

哦，對了，為了讓你買新的Quest 3S，Meta主動停產了Quest 2和Quest Pro，在賣光這兩個產品的庫存貨之后，你能選擇的，只有價格更便宜的Quest 3S，或者是配置更高的Quest 3。

02 小扎稱最強端側模型Llama 3.2來了

與上屆Connect 大會一樣，本次大會的主角也少不了AI。

扎克伯格宣布了其旗下基礎模型Llama 的3.2版本更新， 其大模型提供90B和11B兩個版本，端側模型則有1B和3B兩個大小。

小扎展示了針對Llama 3.2開發的一個新的產品功能：通過上傳圖片，不僅可以做到清除、添加魔法畫筆功能，而且也可以根據文字描述直接更換人物服裝，甚至用彩虹替換現在的背景。

根據Mata提供的技術文檔，可以直接把Llama3.2理解為一個支持多模態的Llama 3.1版本。因為Meta在圖像識別訓練過程的過程中，并沒有更新其語言模型的參數。

在訓練方法上Meta用了較為常規的方法，它為Llama3.1增加一個圖像適配器和編碼器，用Diffusion模型訓練對應的文字和圖像，再進行領域內容精校。

最后在對模型進行調整的后訓練（Post Training）階段，Llama 3.2還通過多輪的監督微調、拒絕采樣（利用一個輔助分布來生成樣本，并按照一定的概率接受或拒絕樣本）和直接偏好優化讓模型進行對齊。

有趣的是，在這一過程中，Meta利用Llama 3.1生成多組圖像字幕，以優化模型對圖像的描述。

在Meta 給出的測試結果中，Llama 3.2的90B版本的圖形推理能力在多項測試中領先GPT 4o-mini。而11B版本則全面超越Claude 3的小版本Haiku版本。

扎克伯格表示，Llama 3.2的端側版本 1B 和 3B 將是最強的端側AI。

它當前能接受文字輸入和輸出，支持最大 128K 令牌的上下文長度。這兩個端側模型是通過對Llama 3.1 8B 和 70B 的剪枝（修剪掉大模型中利用率較低的參數）和蒸餾（利用大模型做教師，小模型學習核心參數的訓練模式）訓練而成。在微調訓練過程中還加入了由Llama 3.1 405B提供的合成數據，以優化其在摘要、重寫、指令遵循、語言推理和工具使用等多項能力上的表現。

發布會現場顯示，Llama 3.2的3B版本在多項指標中超越谷歌6月份發布的 Gemma 2 2B 模型和8月微軟發布的Phi 3.5 3.8B模型，尤其在涉及端側常用的如摘要、指令跟隨和重寫任務中分數優勢明顯。

比如在測試遵守用戶指令的能力的測試集IFEval上，Llama 3.2 3B的版本比同等大小的Phi 3.5提升超過20%。在測試調用工具能力的兩項Benchmark上，Llama 3.2也優勢明顯。

這讓Llama 3.2 在端側的實際應用體驗上能做到小扎所說的目前“最強”。不過在基礎能力如推理、數學上，Llama 3.2 3B 大多落后于Phi 3.5 mini。

另外，這些模型在發布當天即支持高通和聯發科硬件，并針對 Arm 處理器進行了優化。

除了能支持圖像多模態理解的Llama 3.2，Meta此次Connect上還推出了Meta AI Voice。一次性補齊了所有主流多模態功能。在現場演示中，它和GPT-4o一樣，能支持對話打斷，聲音也很自然，但遺憾的是并沒有展示它有GPT-4o那樣豐富的語調和情感表現。

雖然性能僅僅只是追平了GPT-4o，但Meta AI Voice找到了新賣點：它提供了5位名人的語音選項，比如007中冷面女上司的朱迪·丹奇、摘金奇緣的女主角林家珍的語音。

比起因疑似盜取斯佳麗·約翰遜聲線而被告上法庭的OpenAI，Meta顯然在這方面做得更靠譜。據《華爾街日報》報道，Meta已為每位名人的聲音支付了“數百萬美元”。一些名人希望限制其聲音的使用范圍，并確保在 Meta AI 被使用時他們不會承擔責任。

據《路透社》報道，名人版語音將于本周在美國及其他英語市場通過 Meta 旗下的應用家族推出，這些應用包括 Facebook、Instagram 和 WhatsApp。

除了對基礎模型能力進行補齊，Meta在AI應用方面也展示了一些新功能。這些功能在很大程度上都是現有AI解決方案中支持的功能，但Meta做的更進了一步。也更貼合其社交媒體或AI眼鏡的使用場景。

比如現在Meta AI Studio支持直接構建AI數字人系統。在現場展示中，與數字人對話的延遲很低，其動作效果和聲音都很真實自然。

想象一下，有一個用如此真實聲音和面容和你對話的AI作為你的情感陪伴者，我愿稱之為“看得見”的 Her 2.0。

它是否將開啟AI陪伴型產品的黃金時代，還待用戶來進一步檢驗。

另一個非常驚艷的產品是Meta Live翻譯，借助Meta AI新的多模態能力，它能直接識別并將原始語言的口型更換到目標語言的口型。這一功能實際上已被HeyGen等公司先一步實現了，但基于Meta應用的覆蓋廣度，它可能將成為第一個完全流行的相關產品。

雖然Llama 3.1已經是目前開發者使用量最大的開源模型，但為了在應用層也能有更好地拓展，Meta在此次Connect大會上也發布了首個官方LLama產品開發工具 Llama Stack的發行版，它能極大簡化開發者在不同環境中使用 Llama 模型的工作流程，還能實現檢索增強生成（RAG）和集成安全功能的工具化應用的一鍵部署。

此次Llama 3.2的發布對Meta而言，意義極為重大。它補齊了Llama在前沿多模態模型上的核心短板，也為其后續的AI硬件產品，如支持AI智能的雷朋眼鏡的多模態功能提供了基礎。

03 爆款產品“雷朋眼鏡”，趁熱打鐵上新

去年Meta Connect大會上，可能誰都沒想到，最火的產品不是Quest 3，而是Meta和眼鏡制造商雷朋（Ray-Ban）一起推出的二代AI眼鏡產品。

盡管一代默默無聞，也不妨礙歐美的科技發燒友們搶購二代雷朋智能眼鏡，據IDC統計，Meta已出貨超過70萬副雷朋眼鏡，尤其是今年第二季度的訂單量，要比第一季度增加了一倍多。而在整個雷朋Meta眼鏡的生命周期內，截至2024年5月，其全球銷量已突破100萬臺，市場預計2024年全年出貨量有望超過150萬。

Meta趁熱打鐵，今年立即推出了它的新產品。

與其說是新產品，不如說這是一個全新的半透明款式，因為它整體的設計上和去年如出一轍。

但它擁有科技感更強的透明眼鏡本體——果然全天下的硬件公司對于“科技感”的理解都差不多，必須半透明。

Meta在這一代的眼鏡中增加了更多AI功能，其中最大的改進是增加了實時的人工智能圖像識別功能，可以使用戶向雷朋Meta眼鏡詢問當前看到的場景或者物體。用戶還可以通過眼鏡直接掃描二維碼并撥打視線中看到的電話號碼。

另外，這款太陽鏡還支持了類似智能手機的提醒功能，加入了包括英語對法語、意大利語或西班牙語之間的實時語言翻譯，以及與亞馬遜音樂、Audible和iHeart Radio等音樂流媒體應用程序的集成。

04 Orian，Meta口中的AR眼鏡終極形態？

Orian早就應該量產了，但是因為疫情Meta全面緊縮了預算，扎克伯格決定擱置發布，這導致Meta直到2024年才拿出了首款的AR眼鏡產品。

這是一款重量僅98克的AR眼鏡，這個重量在AR眼鏡產品中并不算特別輕。

Orian的鏡框由鎂合金制成，它比鋁合金更輕，也更容易散熱。鏡片由碳化硅制成，它耐用、重量輕、折射率高，這使得眼鏡上投影儀發射的光線可以擴展到更大的視野面積。

但稱Orian是一副AR眼鏡，似乎并不嚴謹。它想要正常工作的話，需要通過一個腕帶和一個計算主體協同。

計算主體提供了更多的處理算力，眼鏡無法遠離它單獨工作，想要正常使用Orian，就得無時無刻地將計算主體佩戴在身邊。

腕帶的作用更有意思，它由高性能紡織材料制成，并使用肌電圖 (EMG) 來理解與手勢相關的神經信號。在幾毫秒內，這些信號會被轉換成輸入信號，傳達給計算主體，有點科幻電影那意思。

顯示部分，Orion擁有70度的視場角，框架內配有Micro LED投影儀，可以把影像投射到鏡片的硅基片上，這一點和目前所有的AR眼鏡工作原理類似。

扎克伯格表示希望人們使用Orion來實現兩個主要目的：與疊加在現實世界上的數字信息相互交流，以及與人工智能互動。

后者比較好理解，Orion擁有和雷朋Meta眼鏡相同的AI能力，包括全新加入的圖像識別能力以及語言交互能力。

前者更抽象。在現場，Meta演示了全息影像和現實世界結合的場景，Meta為這款眼鏡開發了AR版本的Messenger的應用，它可以實現實時的全息投影視頻通話，就好像對方站在你身邊一樣。

為了宣傳AR眼鏡，Meta還搬出了黃仁勛作為第一波體驗Orion的用戶，扎克伯格說：“老黃試過都說好”！

在扎克伯格看來，AR眼鏡的成熟之路將是一個循序漸進的過程。一方面，會通過無顯示屏的人工智能眼鏡，比如雷朋 Meta實現更快速地普及。

另一方面，將通過帶小顯示屏的眼鏡，比如Meta即將推出的Hypernova普及，這種眼鏡可以提供更輕松地觸控交互，比如與Meta AI交互或者與朋友之間的通信。

小扎表示，Orion代表AR眼鏡的最終形態：成熟的AR眼鏡擁有足夠的計算能力，讓你可以把智能手機留在家里。

話雖如此，雖脫離了手機，但出門還得帶著計算主體協同，這也離我們想象中的最終形態有些差距。

除此之外，還有一盆現實的冷水很及時地潑了下來：Orion的續航只有2小時。往多了說，Orion只能讓你在虛擬世界里當2個小時的超級英雄。

而且想要實現AR眼鏡的終極自由可能不會太便宜。據The Verge和TechCrunch等外媒報道，在展示測試機時，Meta的工作人員表示目前Orion的硬件成本超過了10000美元。這意味著這款產品的價格要遠超蘋果的Vision Pro。

結語

從2022年折戟元宇宙被多方嘲諷，到2023年成為開源AI的王，再到今年用智能眼鏡叩開新一代AI硬件的大門。扎克伯格在這三年之間完成了一項幾乎不可能的絕地反擊。

這期間他的兩個重要決策：做開源AI和開發輕量級智能眼鏡，都在今天的Connect上開花結果。

從對搭載了AI功能的雷朋眼鏡的展示中，我們確實看到了眼鏡這一載體在AI 時代的優勢：它既能夠利用語音調用大模型，更能最直接的利用起多模態AI的潛力。直接的“看”比起用手機“掃”在用戶體驗上要自然的多。而這種直接很可能會決定下一代智能設備的轉移。

最后發布的Orion，更是一個承載著AI空間計算設備最終形態野心的未來之作。比起厚重不適的Vision Pro，小扎的輕量化MR愿景更像是空間計算的未來。而現在這個愿景已經有了雛形。如果AI時代的智能設備遷移注定發生，比起AI Pin之類的小打小鬧的嘗試，Meta才是最接近其門檻的公司。

如果和一個身處2022年的人聊起這一切，他一定不會相信，扎克伯格這個看起來有點軸的技術宅，他真的信守承諾，帶著我們離元宇宙的入口越來越近。