阿里 AI 眼鏡高調(diào)入場,百鏡大戰(zhàn) T0 隊(duì)伍將迎來新成員

Meta 首款 AR 眼鏡全爆料!憑借十年功力,給你好看!
從輕量級的 VR 到虛實(shí)融合的 MR,下一個(gè)驚喜是 AI+AR
近日,Meta 虛擬現(xiàn)實(shí)和增強(qiáng)現(xiàn)實(shí)技術(shù)的核心研發(fā)部門 Reality Labs 近日迎來了十周年慶,官方以《通往下一代計(jì)算平臺之路的十年》為題,對 Meta 在 XR 道路上的十年探索做了一番回顧。
從收購 Oculus 后在 PC VR 領(lǐng)域先人一步的探索,到 Quest 系列在輕量級移動 VR 領(lǐng)域的獨(dú)占鰲頭,再到 Ray-Ban 系列智能眼鏡,以及最新爆料的 AR 眼鏡。
十年來,Meta 在 VR、MR、AR 三大領(lǐng)域全線探索,推出十幾款硬件終端,是元宇宙最大的玩家。
回顧過去,展望未來,Meta 想表達(dá)的是:憑借十年功力,我會給你好看!
導(dǎo)讀:
01 早期:終端產(chǎn)品探索和關(guān)鍵技術(shù)積累,PC VR 先人一步
02 主線:從輕量級的 VR 到虛實(shí)融合的 MR,Quest 開啟移動 VR 新篇章
03 插曲:視頻通話終端、腦機(jī)接口,探索新的人機(jī)連接方式
04 未來:AI+AR,先將智能眼鏡戴到眼前
05 未來:Meta 首款 AR 眼鏡即將到來,官方的爆料都在這里了
早期:終端產(chǎn)品探索和關(guān)鍵技術(shù)積累,PC VR 先人一步
虛擬現(xiàn)實(shí)曾經(jīng)是科幻小說的夢想,但互聯(lián)網(wǎng)也曾經(jīng)是一個(gè)夢想,電腦和智能手機(jī)也是如此。未來即將到來,我們有機(jī)會共同構(gòu)建它。
這是 Meta 虛擬現(xiàn)實(shí)打怪路上的的第一步,在這段時(shí)間里,Meta 在組織架構(gòu)、產(chǎn)品形態(tài)、技術(shù)應(yīng)用上,都進(jìn)行了大量嘗試。
先是在 2014 年,Meta 以 20 億美金的價(jià)格收購了 VR 公司 Oculus,并入公司后設(shè)立 Oculus Research。2018 年 F8 開發(fā)者大會上,正式將 Oculus Research 更名為 Reality Labs。
命名的變化,大體也能讀出 Meta 入局這一領(lǐng)域的戰(zhàn)略決心。
圍繞公司的戰(zhàn)略布局,Reality Labs 技術(shù)側(cè),在面部表情和眼動追蹤、高分辨率顯示、人眼變焦能力、虛擬化身、畸變矯正、視頻直通、無線串流等關(guān)鍵技術(shù)做了大量儲備。

一切都始于一個(gè)開發(fā)套件和一個(gè)夢想。
產(chǎn)品側(cè),Oculus 分別推出了兩款在當(dāng)時(shí)極具代表性產(chǎn)品:Oculus Rift、Oculus Go。
Oculus Rift 是一款 PC VR 頭顯,下設(shè)從 DK1 到 DK2 的多個(gè)型號,其中消費(fèi)者版本于 2016 年上市,收獲了超過 9000 名早期用戶的 240 萬美元的眾籌資金。

△ 圖源:CNET
屏幕單眼分辨率 1080 x 1200,刷新率 90Hz。內(nèi)置傳感器支持 6DoF 頭部與手部追蹤,支持 Unity3D、Source 3D 游戲引擎、Unreal 引擎等,配置有控制器,通過 HDMI、USB 接口與 PC 相連。
Oculus Rift 不單是 Meta 的 VR 新物種,一定程度上,Oculus Rift 也為整個(gè) VR 行業(yè)樹立了產(chǎn)品標(biāo)桿。后續(xù),我們看到了大量類似頭顯產(chǎn)品的上市發(fā)布。
Oculus Go 則是一款獨(dú)立 VR 設(shè)備,由 Oculus、高通、小米三方聯(lián)合研發(fā),在 Oculus Connect 開發(fā)者大會期間亮相,并于 2018 年上市。

△ 圖源:Pocketlint
屏幕單眼分辨率 1440 x 1280 的 LCD 屏幕,支持 3DoF 頭部追蹤,內(nèi)置的 Oculus Store 可提供流媒體應(yīng)用、游戲下載。
149 美元親民的售價(jià),極大降低了消費(fèi)者體驗(yàn) VR 的門檻,并加速了 VR 的普及。
另外兩款產(chǎn)品在這一時(shí)期也對 VR 頭顯的發(fā)展產(chǎn)生了重要影響。
在 Rift 取得成功之后,2016 年底,第一代 Oculus Touch 發(fā)布,這個(gè)用手部姿勢操控 VR 的控制器,開啟了 VR 頭顯交互的新篇章,它將玩家的雙手帶入了虛擬世界。

△ 圖源:PCMag
在第一代 Rift 發(fā)布三年后,Oculus Rift S 帶著 Quest 首次推出的由內(nèi)而外的追蹤技術(shù)(Inside-Out),于 2019 年 上市,它消除了頭顯對外部傳感器的需求,讓玩家可以無線探索新世界。

時(shí)間線
-?2014?收購 Oculus,成立 Research
2018 年更名為 Reality Labs
- 2016?Oculus Rift 上市
斬獲 9000 名早期用戶的 240 萬美元的眾籌資金
- 2016?Touch 控制器發(fā)布
將玩家的雙手帶入了虛擬世界
- 2018?Oculus Go 發(fā)布
掀起 VR 頭顯普及風(fēng)暴
- 2019?Rift S 發(fā)布
首次推出 Inside-Out 追蹤技術(shù)
主線:從輕量級的 VR 到虛實(shí)融合的 MR,Quest 開啟移動 VR 新篇章
MR 和 AR 將成為個(gè)人電腦的繼任者,XR 將改變世界。
Meta 在 2019 年推出了功能、體驗(yàn)俱佳的 Oculus Quest VR 一體。產(chǎn)品一經(jīng)發(fā)布,市場表現(xiàn)強(qiáng)勁,即成為了 VR 領(lǐng)域的熱門產(chǎn)品。
Quest 2 作為其后續(xù)產(chǎn)品,進(jìn)一步優(yōu)化了佩戴舒適性與功能,延續(xù)火熱勢頭。根據(jù) IDC 數(shù)據(jù),Quest 2 自發(fā)布以來售出了超過 1480 萬臺,成為迄今為止最成功的 VR 設(shè)備。
而旗艦級 Quest Pro 的發(fā)布,更象征著 Meta 在輕量級 VR 上的極致探索。并且,以低于 2000 美元的價(jià)格,提供了眼動追蹤和自然面部表情。
Oculus Quest、Quest 2、Quest Pro,絕對稱得上是消費(fèi)級 VR 頭顯的代表作,我們將這三款產(chǎn)品的功能特性羅列如下,從中可以看到產(chǎn)品在外觀、功能的變化。
Oculus Quest 是一款真正意義上的開箱即用、高清顯示、沉浸式聽音、虛擬現(xiàn)實(shí)切換、內(nèi)容豐富 VR 一體機(jī)。屏幕單眼分辨率 1440 x 1600,OLED 材質(zhì)。內(nèi)置音頻定位系統(tǒng),保持聲音始終圍繞左右。采用多攝像頭傳感器,實(shí)現(xiàn)了虛擬世界與現(xiàn)實(shí)世界(黑白)的直通。內(nèi)容愈加豐富的 Oculus Store 也為 Oculus Quest 帶來了更多的可玩性。

△ 圖源:The Verge
Quest 2 采用更輕量化設(shè)計(jì),首次搭載高通驍龍 XR2 平臺,CPU 和 GPU 性能提升了一倍。單眼分辨率提升到了 1832 x 1920,雙眼分辨率超過 4K。引入眼動、手勢追蹤,增強(qiáng)交互體驗(yàn)。

△ 圖源:The Verge
Quest Pro 采用 Pancake 光學(xué)方案,機(jī)身進(jìn)一步得到瘦身。單眼分辨率為 1820 x 1920px,PPI 相比 Quest 2 提升了 37%。搭載了高通驍龍 XR2+ 平臺,支持頭部、手勢和手柄追蹤,以及低時(shí)延全彩視頻直通。同時(shí)還新增了面部識別功能,配合眼動追蹤,能夠?qū)崟r(shí)渲染至虛擬世界的畫像之上。

△ 圖源:CNET
我不再需要在一個(gè)屏幕上工作,而是可以擁有很多屏幕,然后可以從任意多個(gè)角度與你分享,我可以通過單擊切換工作區(qū),我們的化身可以協(xié)作,就像我們在同一個(gè)房間一樣,使用虛擬白板等比現(xiàn)實(shí)世界中的同類工具更好的工具。
繼輕量級 VR 之后,MR 的產(chǎn)品推出,也是水到渠成。
從 Oculus Quest 到 Quest Pro,Meta 實(shí)現(xiàn)了從黑白視頻直通到全彩視頻直通的功能過渡。從眼動追蹤,到手勢追蹤,再到面部識別,進(jìn)而做到虛擬世界畫像實(shí)時(shí)渲染。
2023 年,Meta 發(fā)布了首款面向消費(fèi)市場的 MR 設(shè)備 Quest 3。
Quest 3 可以通過簡單的觸摸操作,從虛擬世界切換至虛實(shí)融合世界,與蘋果 Vision Pro 有著極其相似的體驗(yàn)。

△ 圖源:IGN
同時(shí),Quest 3 還引入了專為 MR 打造的 Augments 功能,可以在物理世界中錨定虛擬圖像。例如,你可以在臥室墻壁上掛一個(gè)虛擬鐘表,可以將虛擬桌游放置在餐桌上,只要你每次戴上 Quest 3 都能在同一位置上看到它們。
并且和 Vision Pro 一樣,你也可以坐在沙發(fā)上,在客廳布置一塊虛擬大屏,觀影或玩游戲。
雖然屏幕顯示、空間交互方面沒有 Vision Pro 那般極致,但 Quest 3 的佩戴舒適度、價(jià)格、生態(tài)內(nèi)容,同樣具備優(yōu)勢。
時(shí)間線
- 2019?Quest 發(fā)布
Meta 首款輕量級 VR 一體機(jī)
- 2020?Quest 2 發(fā)布
迄今為止銷量最高的 VR 設(shè)備
- 2022?Quest Pro 發(fā)布
Meta 在輕量級 VR 上的極致探索
- 2023?Quest 3 發(fā)布
Meta 首款 MR 設(shè)備
插曲:視頻通話終端、腦機(jī)接口,探索新的人機(jī)連接方式
在當(dāng)年全球智能音箱風(fēng)起云涌的大環(huán)境下,Meta 也做了兩款帶屏智能音箱 Portal 系列。
按照 Meta 給出的產(chǎn)品定位,Portal 是一款通過屏幕、AI 驅(qū)動的可提供社交、內(nèi)容、娛樂的智能家居產(chǎn)品。

△ Portal Plus,圖源:CNET
和其它智能音箱略有不同,Portal 并不以語音助手為主打,而將重心放在了社交上。內(nèi)置了 Facebook Messenger,可以非常方便地供用于長時(shí)間視頻聊天。人像追蹤技術(shù),還能始終將用戶置于畫面中間。
此外,利用攝像頭與 AI,Meta 還在 Portal 順道嘗試了一把 AR 應(yīng)用。
用戶在聊天中可為自己頭像增加動態(tài)特效,還有就是為兒童講角色扮演故事。

△ 圖源:Meta
在 story time 應(yīng)用下,Portal 會開啟角色扮演的講故事的模式,父母或在遠(yuǎn)方的親戚那一端的顯示器會成為一個(gè)故事的提詞器,他們在為孩子講故事的同時(shí),故事的人物角色和動畫就會以 AR 的效果呈現(xiàn)出來。
有趣的是,Portal 出自 Building 8,這一團(tuán)隊(duì)以腦機(jī)接口的前沿研究而為人所知,但他們的技術(shù)落地產(chǎn)品卻是一款視頻通話設(shè)備。
這個(gè) Meta 在元宇宙道路上的小插曲,很快就被悄悄暫停了。
未來:AI+AR,先將智能眼鏡戴到眼前
這是一款首創(chuàng)、方便、易于使用的設(shè)備,不會強(qiáng)迫你在物理世界和數(shù)字世界之間做出選擇,而是以一種無縫、直觀的方式將它們組合在一起。這是我們對 AR 眼鏡的長期愿景,我們現(xiàn)在正在朝著這個(gè)目標(biāo)努力。
在 2021 年 9 月,Meta 選擇與雷朋合作,推出了首款音頻眼鏡 Ray-Ban Stories。
這是一款無顯示、無智能的,純音頻眼鏡。有著雷朋一貫的時(shí)尚外觀,內(nèi)置揚(yáng)聲器,可以佩戴眼鏡聽音樂、聽博客、接聽電話。

△ 圖源:Meta
但同時(shí),它又不單單是一款音頻眼鏡,有著 Meta 的小心思。
Meta 在眼鏡上,放了兩顆 500 像素?cái)z像頭,使得眼鏡可以拍攝照片、視頻。起初我們會認(rèn)為,拍攝可能主要為 Meta 社交平臺貢獻(xiàn)素材。
直到 2023 年 10 月,Ray-Ban Meta 的發(fā)布,讓我們看到了 Meta 更大的野心。
Ray-Ban Meta 集成了 Meta AI,可以語音與眼鏡互動。再借助攝像頭的能力,眼鏡試圖在音頻眼鏡上通過 AI 大模型實(shí)現(xiàn)突破性創(chuàng)新。

△ 圖源:WSJ
幾個(gè)月后,Meta 又為這款眼鏡上線了一項(xiàng)名為「地標(biāo)識別」的功能,為用戶提供了一種新的多模態(tài)交互體驗(yàn)。借助眼鏡上的攝像頭,可以通過 AI 自動識別所處位置地標(biāo),并通過語言、文字提供詳細(xì)的描述。
得益于過去 18 個(gè)月人工智能模型的快速突破,我們現(xiàn)在認(rèn)為,我們在全面 AR 眼鏡之路上所擁有的智能眼鏡將具有更廣泛的吸引力,并且比我們之前想象的更有用——即使在沒有顯示器的情況下。
從音頻、拍攝,到 AI 多模態(tài)融入,以及最終的 AR 顯示,這或許就是 Meta AR 眼鏡演進(jìn)的路徑。
時(shí)間線
- 2020?Project Aria 亮相
Meta 首個(gè) AR 眼鏡概念機(jī)
- 2021?Ray-Ban Stories 發(fā)布
不只是一款時(shí)尚的音頻眼鏡
- 2023?Ray-Ban Meta 發(fā)布
集成了 Meta AI 的智能眼鏡
- 2024?敬請期待
真正的 AR 眼鏡
未來:Meta 首款 AR 眼鏡即將到來,官方的爆料都在這里了
就像智能手機(jī)并沒有取代筆記本電腦或臺式電腦一樣,AR 眼鏡也不會成為 MR 頭顯的終結(jié)。相反,我們看到的是構(gòu)成未來結(jié)構(gòu)的一系列設(shè)備。
去年 3 月,Meta 曾披露過未來 5 年的產(chǎn)品圖景。新的 AR 眼鏡即是其中之一,當(dāng)時(shí)給出的發(fā)布時(shí)間是 2025 年。
在最近的一次公開采訪中,Meta 首席技術(shù)官 Andrew Bosworth 回應(yīng)了新品發(fā)布時(shí)間:它將在不太遙遠(yuǎn)的某個(gè)時(shí)候發(fā)布。
而更多關(guān)于 Meta AR 眼鏡的消息,也在談話中有意無意地流露出來。
顯示界面方面,可以確定的是,新眼鏡肯定會配備顯示屏幕,是一款真正意義上的 AR 眼鏡。
輸入方式方面,眼球追蹤技術(shù)將會是虛擬現(xiàn)實(shí)交互上最直接的交互方式。
Andrew Bosworth 認(rèn)為,雖然 Vision Pro 在人機(jī)交互上做出了一些成績,但做得還不夠好。但他并沒有流露太多關(guān)于 Meta AR 眼鏡的交互應(yīng)用。
他指出,神經(jīng)接口、空中打字、滑動和觸摸、眼球追蹤、手指點(diǎn)擊融合等,這些交互新體驗(yàn),這就是 Meta 現(xiàn)在正在做的事情。
的確,過去幾年,我們已經(jīng)不止一次地看到了 Reality Labs 展示「神經(jīng)接口」的肌肉腕帶,包括 EMG、超現(xiàn)實(shí)編解碼器化身、情境化人工智能,這些新技術(shù)都將伴隨著計(jì)算領(lǐng)域的下一個(gè)重大范式轉(zhuǎn)變的發(fā)生,為我們提供革命性的人機(jī)連接和交互體驗(yàn)。
Andrew Bosworth 指出,Meta 在眼鏡顯示界面、輸入方式上取得了巨大進(jìn)展,但毫無疑問,控制屏幕成本、提升續(xù)航仍是目前最大的挑戰(zhàn)。
另外,此前被放棄的空間視頻拍攝功能,也有可能在新 AR 眼鏡上回歸。但 Andrew Bosworth 表示,暫時(shí)還未想到 AR 眼鏡與 Quest 頭顯在空間視頻上的互動玩法。
Ray-Ban Meta 智能眼鏡已經(jīng)為我們展現(xiàn)了 Meta AI 的實(shí)用性和娛樂性,接下來,生成式 AI 依然會是新 AR 眼鏡的一大亮眼功能,但它不僅用于日常對話,它還將成為 Meta 未來構(gòu)建元宇宙的重要功能應(yīng)用,在社交和游戲虛擬場景的搭建上,AI 都將發(fā)揮價(jià)值。
未來,值得期待。
主筆:達(dá)達(dá) / 深圳灣
審校:陳壹零 / 深圳灣
編輯:陳述 / 深圳灣