Meta Connect 大會 2022: Meta Quest Pro 以及邁向元宇宙
去年,Mark Zuckerberg 在 Meta Connect 大會上分享 Meta 對元宇宙的願景——一系列相互連結的數位空間,可以實現在現實世界中無法完成的事,並與最重要的人們創造更深入的連結。 今天,Mark Zuckerberg 與 Meta Reality Labs 的領導團隊及特別嘉賓們,一同登上虛擬舞台,呈獻在過去一年為了實現此願景取得的進展。
介紹 Meta Quest Pro
今日最重要的是 Meta Quest Pro——Meta 全新頂級系列的第一個頭戴式裝置,擴展 VR(Virtual Reality)的可能性。過去幾年,Meta 以 Project Cambria 為代號稱呼 Meta Quest Pro,並陸續分享相關細節,現在 Meta 很興奮分享完整內容:Meta Quest Pro 充滿許多創新功能,例如提供強大 MR(Mixed Reality)體驗的高解析度感應器、清晰視覺效果的 LCD 顯示器,以及眼球追蹤與自然臉部表情(Natural Facial Expressions)技術幫助大家的虛擬替身(Avatar)在 VR 中更自然地在虛擬世界中反映出各種變化。
Quest Pro 將於 10 月 25 日開始出貨,台灣售價為 1,649.99 美金,包含頭戴式裝置、 Meta Quest Touch Pro 控制器與充電座。 現在已可於 Meta Store 預訂 Quest Pro 。
硬體技術規格的部分重點內容:
- 首款搭載全新 Qualcomm Snapdragon XR2+ 平台的設備
- RAM: 12GB
- 儲存空間:256GB
- 10 個高解析度的感應器
- 多次折射的餅乾鏡頭(Pancake lenses),提供清晰銳利的視覺效果,但同時降低 40% 的光學模組厚度
- 眼球追蹤與自然臉部表情技術,提高社交臨場感
- 全彩的穿透模式(Passthrough),讓 MR 體驗更進化。
- Quest Pro 可向下相容至 Quest 2 內容,即刻享受多樣化的 VR 遊戲與體驗
- 2 個 LCD 顯示器採用局部調光(local dimming)與量子點技術(quantum dot technology),提供更豐富更鮮艷的色彩表現。
- 特製局部調光技術,由專門的背光硬體與相應的軟體驗算法驅動,支援獨立控制 500 多個單獨的 LED 模組(LED Blocks),讓顯示器的對比度比 Quest 2 高出 75%
- 每英寸像素(pixel)較 Quest 2 增加 37%
- 全新設計的 Touch Pro 控制器具備自身感應器,將更準確的追蹤動態範圍達完整 360 度,再加上全新的 TruTouch Haptics 觸覺回饋系統,將提供更廣泛也更精確的反應範圍,搭配可充電的電池。
- Meta 迄今為止最輕巧、配重平衡最佳的 VR 頭戴式裝置。
查看 Meta Quest Blog 上專門介紹 Quest Pro 文章,了解所有細節。
不斷進化與成長的 VR 生態系
VR 開發者生態系正蓬勃發展。目前,Meta Quest Store 中遊戲與 App 的消費已累積超過 15 億美金。現在有 33 款總營收超過 1 千萬美金的遊戲,自去年以來總營收超過 5 百萬美金的 App 總數已經翻倍,目前共有 55 個。而且這種成功不僅限於頂尖開發者,在 Quest Store 上 400 多個 App 中,其中約有三分之一已創造數百萬美金的營收。
《陰屍路:聖徒和罪人》僅在 Quest 平台上的收入就突破 5 千萬美金——幾乎是其他平台所有收入的 2 倍。在上線 24 小時內,Zenith: The Last City 旋即在 Quest Store 上達百萬美金的營收,而 《惡靈古堡 4》則突破 2 百萬美金的營收。 《刃與魔法:流浪者》的營收在 2 天內也累積達 1 百萬美金,其他開發者在短短不到 3 天的時間內也達到相似的數字。
當然,建構健康與永續的 VR 生態系是為了讓開發者有不同的方式接觸到他們的受眾。這就是 Meta 推出 App Lab 的原因,自去年推出後,目前已有 2 千多個 App 上架。許多很棒的遊戲,如 Smash Drums, Ancient Dungeon 與《拼圖巡遊》,也都是由 App Lab 起步。
Meta 也見證大家行為的轉變:當 Quest 2 推出時, VR 中絕大多數時間都是單人享受其中。現在,大家大部分時間都花在多人遊戲與社交應用上——相聚閒逛、玩遊戲、學習新嗜好等。
Meta Horizon Worlds
Meta 相信元宇宙將串聯 VR 頭戴式裝置、手機、筆記型電腦與桌上型電腦,甚至是目前還未出現的設備。今天在 Connect 大會上,展示 Meta Horizon Worlds 將拓展至其他平台,因此無論是拿起手機或筆記型電腦,都可聯繫在 VR 中閒逛的朋友,反之亦然。例如,若正在 VR 中欣賞喜劇節目,即可即時將連結分享給朋友,無論朋友身處何處皆可運用非 VR 的裝置加入一起觀賞。當大家可以透過任何設備連結到 VR 世界,人們之間的連結將可提升至另一層次。 Meta Horizon Worlds 將成為全球各地許多人體驗 VR 世界的首要方式。儘管目前網路尚未能提供完整的 VR 體驗,但未來將全面開放給新的開發者、創作者與大家。
Meta 正在測試讓大家在 Horizon Worlds 中拍攝影片,並輕鬆地直接將影片轉為 Reels 分享到 Instagram,幫助創作者與觀眾建立連結,並以全新的方式分享作品。 Meta 正與 Instagram 一些最優秀的創作者合作,期待他們分享自己打造的世界,敬請專注相關時程。
Meta 也讓打造 Horizon Worlds 變得更容易。過去,大家必須在 VR 中建構一切。現在,已看到大家在 VR 以外的 Crayta 建構出不可思議的內容,Crayta 是 Facebook 上讓大家創作遊戲的平台。 Meta 正持續將創意工具擴展至 VR 之外的世界,透過使用 TypeScript 這個強大的程式設計語言,來創造更動態與互動的世界。 Meta 正努力讓大家能將三網格項目(tri-mesh items)導入 Horizon Worlds,並使用 Maya 、 3Ds Max 、 Blender 與 Adobe Substance 3D 等 3D 內容創建工具打造部分內容。
這些優質工具是專業人士用於打造 3D 中的內容。這些由專業人士製作的圖像品質,正是支持這些工具的優點之一。整合所有工具需要投入時間,但其結果將出乎期待。而且,Meta 正與 Epic Games 合作將創用 CC(Creative Commons)授權的內容由 Sketchfab library 帶至 Meta Horizon Worlds 。
在 Meta Horizon Worlds 中的個人空間——把它想像成在元宇宙中的家,應是一個社交空間,可以邀請朋友來訪,無論他們使用什麼設備。 最重要的是,大家將感受到當家做主的感覺,並體驗與現實世界中的家相似的舒適度。
Meta 也宣布,明年將開始與 NBCUniversal 進行長期合作,將具指標意義的喜劇與驚悚體驗帶入元宇宙中。《我們的辦公室》(The Office)、 Blumhouse 、 Universal Monsters 與《萬聖節驚魂夜》都將出現在 Meta Horizon Worlds 中,讓大家運用 VR 以前所未有的方式沉浸在這些 IP 中。明年, Peacock app 上架到 Quest 後,大家也可享受喜愛的 NBCUniversal 節目。
YouTube VR
Meta 宣布與 YouTube VR 團隊合作新展開社交創新。 YouTube 將更像是 Quest 上的共享體驗。若大家在 Horizon Home 中與朋友相聚,將很快地找到 YouTube 並一起觀賞影片,就如同大家實體聚在一起看片一般。
同時,將可處理多項工作,在 Horizon Home 工作或上網時繼續讓 YouTube 影片正常播放。
Meta 正與 YouTube 團隊合作,讓未來的體驗更加靈活。未來,在 Quest Pro 上,將很快可整合 YouTube 影片(透過 2D 面板)至其他 VR app 中。想像一下,觀看有關打造聖米歇爾山(Mont-Saint-Michel)的影片時,同時在《拼圖巡遊》遊戲中體驗祖聖米歇爾山的 3D 拼圖,或者在玩 The Thrill of the Fight 的同時上拳擊課——或者是利用在玩 《漫步閒遊:迷你高爾夫》 過程中的等待時間,同時觀看 YouTube 上的音樂影片。
Connect 2022 中的遊戲
自 2020 年《漫威鋼鐵人 VR》於 PlayStation VR 上推出後,Meta 一直是忠實粉絲,因此極其興奮地宣布,《漫威鋼鐵人 VR》將於 11 月 3 日登陸 Quest 2,這要感謝才華洋溢的 Camouflaj 與 Endeavor One 團隊 ,以及 Meta 的合作夥伴索尼互動娛樂與漫威娛樂。
微軟 CEO Satya Nadella 宣布 Xbox Cloud Gaming (Beta) 即將登陸 Quest Store,還分享太空狼人殺 Among Us VR 遊戲的發布日期與開放預購,進一步更新《陰屍路:聖徒和罪人 第 2 章:報應》預期的發布時間,並透露 Skydance Interactive 的全新專案。 查看 Meta Quest 部落格,瞭解所有的遊戲新聞。
健身運動
VR 不僅讓大家嘗試新類型的遊戲或享受如臨其境的體驗——VR 中的健身體驗也無與倫比。無論是上教練課或偶爾鍛煉自己,Quest 都有各式各樣的 App 讓大家開始運動。在 Connect 大會上,Meta 宣布今年即將推出的幾款新產品與其更新,將幫助大家在 VR 健身之旅上獲得進展。
Meta Quest 2 Active 套組
Meta Quest 2 Active Pack 是 Meta 推出第一個健身配件組,將於 10 月 25 日以 69.99 美金的價格發售——從今天開始於 Meta Store 預訂。配件組包含一個新的可用於頭戴式裝置的可擦拭臉部靠墊、一套額外的腕帶與全新可調整的指關節帶,讓大家在揮出上勾拳時不必擔心控制器掉落。這些健身配件組,將可幫助大家完成更多汗流浹背的鍛煉。
Meta 也推出 Made for Meta 計劃,前身為 Oculus Ready,與幾家主要的硬體製造商合作,明年開始將為 Quest 提供更多配件。
整合 Meta Quest Move 健身數據同步至健身追蹤 App
追蹤與分享健身的進度是許多人的重要動力,因此 Meta 催生出 Meta Quest Move 。然而,仍有許多值得努力的面向,可以讓 VR 成為強大的健身工具。今年, 應大家的期待正式推出 Meta Quest 相關的健身紀錄 App 與 iOS 上的健康 App 。
全新的健身體驗
已有許多人非常喜愛 Within 推出的 Supernatural,也很熟悉這款訂閱制的熱門健身 App 中的 Flow 與拳擊鍛煉。現在,將新增全新鍛煉方式—膝撞—啟動核心與下半身具爆發力的訓練方式,幫助大家訓練平衡與協調。 10 月下旬,Flow 、拳擊鍛煉與其他全身訓練內容將陸續上線。
Quest 平台上尚有 Gym Class – Basketball VR,這是一個以實體籃球比賽為基礎、最多 6 人同時上線的遊戲。 無論身高或技巧如何,皆可練習投籃、運球,或跳到空中完成驚人的扣籃。 Gym Class – Basketball VR 在 App Lab 上大獲成功,下載量突破 100 萬, IRL Studios 也將於今年秋天將內容上架至 Quest Store 。
健身 API 測試版與其未來計畫
最後,Meta 將於今年秋季發布新的健身 API 測試版,讓特定的開發者使用,讓大家更容易為 Quest 平台創建健身內容。若未來,實施後,Meta 的健身 API 將讓大家選擇是否與開發者分享 Meta Quest Move 的即時數據(例如總卡路里消耗量與訓練的分鐘數)。將可開創個人話的體驗,例如自訂訓練統計頁面或根據個人的訓練進展解鎖新的級別。
也有些人是仰賴外部動力來增加訓練動力,明年 Meta 將分享可與選定的朋友分享健身進度的方式,讓朋友 VR 健身之旅中互相支持。
未來的工作方式不斷進化
VR 並不只限於娛樂與遊戲(及各種優點)。 VR 更可協助提高工作效率並完成工作。 Quest Pro 的設計考慮到工作生產力,對於使用 VR 作為生產力工具的族群來說,將是一次重大升級——硬體只是其中一部分, Quest Pro 與 Quest 2 上的軟體部分也將同步提升工作與協作方式。
因此,Meta 將在未來幾個月內分享 Meta Horizon Workrooms 多項重大更新。
首先是備受期待的功能:大家很快就可以透過 Zoom 加入 Workrooms,並可在線上會議中展開分組討論,讓大家在同一個線上會議中,從大型的簡報分享順利地轉至小型更親近的分組討論。非常促進對話與腦力激盪。 Meta 也特別為設計師、建築師與其他專注在 3D 內容中的工作者努力,發展讓大家在 Workrooms 中查看 3D 模型的方式。
Meta 也降低 VR 與更傳統平台之間的阻礙。 Meta 稱此專案為 Magic Room,也是會議的未來。目標是讓所有協力工作者在共享空間中感受相同,無論身處何地或使用什麼技術。 Meta 正在更新 Workrooms,讓大家透過手邊的任何設備加入虛擬辦公室,無論是使用 Quest Pro 或者通過手機加入,皆可沉浸在相同的流暢體驗,(儘管 Magic Room 也將順利地與 Meta 的其他主要工作產品 Meta Portal 與 Workplace 配合使用)。
Meta 強調無法單獨建構元宇宙,就如同大家的日常工作一般,每家公司的工作方式都不同——並且使用不同的工具。
微軟 CEO Satya Nadella 加入了 Connect 大會,宣布新版本的 Microsoft Teams 即將登陸 VR 。 Teams 連結全球數億人,而這個新的 VR 原生版本的 Teams 將讓微軟超越在 2D 螢幕上的協作方式。 Teams VR 也將在近期導入 Meta Avatars,如同其他 VR App,大家將可在其中展示自己的虛擬替身。
更多內容將與大家分享:近期將可直接從 Meta Horizon Workrooms 中加入 Teams 會議。對於 Microsoft 365 企業用戶,也可由 Quest 2 與 Quest Pro 使用這些工具(包括 Windows 365)。隨時隨地,將工作從 Office 或 Sharepoint 轉至 VR 頭戴式裝置。
最後,Quest 與 Portal 都將支援 Microsoft Intune 及 Azure Active Directory 。 隨著企業開始將 Quest 2 與 Quest Pro 整合到大家的日常工作中,管理與保護頭戴式裝置的重要性,就像管理筆記型電腦與手機一般,Microsoft Intune 及 Azure Active Directory 將協助企業提供大家期待的安全保護與管理選項。
Presence Platform
去年 Connect 大會上,Meta 推出 Presence Platform,也就是一套機器感知與 AI 功能開發者套件——包括穿透模式(Passthrough)、空間錨點(Spatial Anchors)與場景理解(Scene understanding)——讓開發人員能夠打造更逼真的 MR 、互動與語音體驗,讓虛擬內容與實體世界更無縫地融合交疊。 今天,Meta 為大家介紹 Presence Platform 中最新的工具套件 Movement SDK 。
透過 Quest Pro 使用向內的感應器,Movement SDK 將可在虛擬替身上即時模擬臉部表情。雖然今天的虛擬替身仍需仰賴空間音訊與沈浸式圖像協助打造社交臨場感,但臉部表情及肢體語言將會徹底改變虛擬世界中遠端會議及虛擬表演。
隨著 Movement SDK 的導入,Meta 將支援第三方角色形體化的社交臨場感。 Meta 內部的藝術家團隊創造一個外星人角色 Aura 。她可以眨眼、鼓起臉頰、左右動動嘴等。如影片呈現,Aura 的臉部動作、膚色及眼球運動被使用於讓她參與社交活動。除了臉部動作外,混用變形(Blend Shapes)更可啟發其他動作。例如,當她快樂時,頭髮上的斑紋將會亮起——這是她星球上重要的社交線索——當她生氣時,她也會把頭髮弄捲。
元宇宙中的虛擬替身與身分識別
每個人的虛擬替身都各自代表著不同的人,或者至少是數位代表。 代表每個人的虛擬替身需盡可能真實的讓大家在元宇宙與 Meta 的 App 中表達與表現自我。今年稍早,Meta 推出了人工電子耳(人工耳蝸植入器)、耳罩式助聽器及輪椅,但 Meta 在外在表徵的面向上也將有許多改善,包含更多的身體型態,與可貼近更真實的皮膚的色調處理(Shaders)。
每個人的穿著也很重要。今天,Meta 宣布虛擬替身商店(Avatar Store)將於今年稍晚推出 VR 版。大家將可購買一些喜愛品牌的虛擬服飾,Meta 正在與體育、娛樂等領域的夥伴合作,讓大家找到適合個人風格的衣服。 Meta 期待帶動一個互通的數位商品市集——代表若大家買了一件毛衣,無論使用什麼 App,都可以將這件毛衣穿在虛擬替身上。
虛擬替身的腿也是大家引頸期待的未來進展。「我想大家都在期待吧!」Zuckerberg 開玩笑地在主題演講中提及,未來不會只有上半身漂浮在空中!
這可能很像指需要在後台啟動開關,不過其實這需要投入非常多心力才可實現。當大家的數位身體渲染不正確時——舉例來說,在錯誤的位置,它可能會讓人分散注意力甚至令人不安,並立即讓人想脫離體驗。而且腿的部分真的非常難突破! 如果大家的腿在桌面下,甚至只是在我們的手臂後方,那麼頭戴式裝置就無法正確地感知看到雙腿,這需要仰賴猜測。
Meta 團隊花了很多時間,確保 Quest 2 能準確並穩定地將大家的下半身帶入 VR 的世界中。首先,Horizon Worlds 將開始讓虛擬替身加入下半身,Meta 將從中瞭解進展狀況,並隨著 Meta 透入更多時間發展技術,拓展置其他體驗。
請記住,虛擬替身仍在不斷發展——變得更好看、更有行為力、更有表現力、更多客製細節。 Connect 大會上,已預先展示下一代 Meta 虛擬替身將比目前的版本更具表現力也更細膩。
每一步都讓大家更接近逼真的虛擬替身。仍需數年的努力,但 Meta 正在穩定改善技術,並努力瞭解大家希望虛擬替身如何出現在 VR 世界。 Meta 正在研究如何運用 AI 幫助大家設計準確的虛擬替身,所以大家自由決定是否花費時間調整這些細節(如果大家願意)。未來,大家將可能在不同的場合擁有多個虛擬替身——在工作會議上表現真實的自己,與朋友相聚時則使用比較動畫的版本。甚至以電影角色,甚至是動物或者龍,出現在聚會中。
邁向 AR(擴增實境)
去年,Meta 邁出第一步,與 EssilorLuxottica 合作推出第一代智能眼鏡 Ray-Ban Stories 時。在短短一年內,又有重大進展:將影片拍攝時長從 30 秒增加到 60 秒,並讓大家更輕鬆地將內容從眼鏡上傳到 Instagram 。
免手持是 Ray-Ban Stories 的核心,讓大家在當下保持連線,而無需到處找手機。近期,大家將可更進一步在 Ray-Ban Stories 上免手持地撥出電話或發送簡訊。
大家喜歡在 Ray-Ban Stories 上聽音樂,因此 Spotify Tap 播放功能也將被推出。只需點擊並按住眼鏡的一側即可播放 Spotify,若再次點擊並按住,Spotify 便會推薦更多內容。
關於 Meta Spark 的最新進展,包含即日起將讓創作者使用 Spark Studio 建構互動式 3D 物件,並開始透過 Meta Spark Player 在 MR 中展開測試。 Meta 仍在打造工具,幫助創作者更瞭解注視與空間意識將如何幫助 3D 內容疊加在實體世界中。
Reality Labs 研究內容
Reality Labs 首席科學家 Michael Abrash 分享的內容,對 Connect 大會非常重要。 Michael Abrash 與 Mark Zuckerberg 一同介紹 Meta 研究團隊的幕後工作,包含 Codec Avatars 與 Project Aria 等最新進展,同時也分享創建第一個真正以人為中心的人機介面的相關成果。
在 Reality Labs,我們正在發明一個全新的計算平台——一個圍繞人們、社交連結與重要關係而構建的平台。更多內容,歡迎查看 Reality Labs Research 新聞中的內容。
今日展示的研究與產品是延展到未來路徑的一部分——我們無法單獨建構元宇宙。我們希望聚集最優秀的開發者、工程師、藝術家與其他人,讓這個未來成為真實。感謝大家加入這趟宛若史詩的精彩旅程。