根據 The Information的一份報告，Meta 計劃在 2024 年之前發布四款新的 VR 頭顯，據稱這是其 AR 設備的補充。
Meta 的四款新耳機中的第一款將是 Project Cambria，該報告稱預計將于今年 9 月推出。
據報道，Cambria 的后續行動已經在進行中。代號為 Funston，預計在 2024 年推出。
至于其他兩款耳機，它們是 Meta 更實惠的 Quest 2 耳機的下一代迭代，據報道代號為 Stinson 和 Cardiff，預計分別在 2023 年和 2024 年發布。
但是，Cambria 以外的頭顯將成為目標的哪些功能仍然有些不清楚。對于圍繞計算架構中的一些根本變化構建的頭顯來說，Meta 認為將 XR 設備或它一直在研究的全息折疊光學器件提升到一個新的水平所必需的還為時過早，盡管可能變焦技術 Meta 已經研究了多年幾乎準備好迎接黃金時段了。
值得注意的是，Meta未來的VR 頭顯或將搭載其自研的用于AI處理的定制加速器芯片。
據外媒ROAD TOVR報道稱，Meta Reality Labs的研究人員已經制造了一款VR頭戴設備原型機，該原型機可以支持Codec Avatars項目的渲染，并且搭載了專門用于AI處理的定制加速器芯片。
Meta更名前就致力于Codec Avatars項目
早在Facebook更名為Meta前，該公司就一直致力于Codec Avatars項目，該項目旨在使VR實現“如照片般逼真”的虛擬化身。這一系統結合AI處理和設備上的眼動追蹤、嘴巴追蹤等傳感器，將使用者的臉以最接近真實的方式投射進虛擬世界。
該公司的Codec Avatars研究的早期版本得到了NVIDIA Titan X GPU強大算力的支持。但在Meta最新的Quest 2一體機等設備上，并不能完全發揮其功能。
據稱該公司已著手研究如何在低功耗獨立耳機上實現 Codec Avatars，上個月發表在IEEE CICC會議上的一篇論文中，Meta透露它正在設計一個采用7nm工藝的定制芯片用于作為Codec Avatars的加速器。
集成32 位 RISC-V CPU的定制芯片
據悉，該芯片的占位面積僅為 1.6mm²，該小組在芯片設計過程中，設計人員考慮了生成Codec Avatars 模型所需要的數據。
“測試芯片采用7nm制程，具有神經網絡加速器，由1024乘法累加陣列、2MB片上SRAM和32位RISC-V CPU組成。”研究人員說。
反過來，他們還重建了 Codec Avatars AI 模型的一部分，以配合芯片的特定架構。
“我們通過重新構建基于卷積神經網絡的眼睛注視模型并針對硬件進行定制，使得模型更加適合芯片。這降低了片外內存訪問的能耗和延遲。” Reality Labs研究人員寫道。“通過在電路級有效地加速卷積運算，所展示的原型芯片實現了每秒 30 幀的性能，并且功耗低且外形小巧。”
通過加速 Codec Avatars 工作負載的密集部分，該芯片不僅加快了進程，而且還降低了功率及發熱。由于芯片的定制設計，它能夠比通用 CPU 更有效地做到這一點，然后為 Codec Avatars 的眼動追蹤組件的重新架構軟件設計提供信息。
雖然定制芯片處理部分 Codec Avatars 編碼過程，但 XR2 管理解碼過程并渲染化身的實際視覺效果。
得益于專用芯片的加速，Meta的Codec Avatars或許可以在一體機上運行。但目前我們不知道虛擬化身的視覺渲染效果如何。在非一體機上運行時，該模型將用戶建模掃描的非常詳細，這可能過于復雜，不能在Quest2等一體機上得到完整的呈現。目前還不知道Codec Avatars強大的“逼真”畫面在這客觀條件的限制下最終呈現的效果會如何。
我們可以想象，一系列XR特定的功能都可以通過這種專門設計的加速芯片來實現。比如在XR世界中實現空間音頻是XR玩家們愿意看到的，這可以增加沉浸感。但逼真的聲音模擬在實際使用中不僅會增加成本，并且也會影響續航。
另外，位置跟蹤和手勢跟蹤也是XR體驗的關鍵部分，在這些地方將硬件和算法結合起來進行設計可以使XR設備在速度和功率方面取得巨大的提升。
參考鏈接：Prototype Meta Headset Includes Custom Silicon for Photorealistic Avatars on Standalone
Demi Xia編譯
-
微信掃一掃
一鍵轉發 -
最前沿的電子設計資訊
請關注“電子技術設計微信公眾號”
- 美國公司聲稱發現室溫超導材料，被授予了高于室溫的第二 位于美國佛羅倫薩州的Taj Quantum的公司在社交媒體宣布，被授予了高于室溫的第二類超導體專利。據稱，這種獨特的 II 型超導體（專利號：17249094）可在較寬的溫度范圍內工作，包括遠高于室溫的溫度，從約 -100° F (-73° C) 到約 302° F (150° C) - 這是一種特性這在超導體世界中并不常見。
- 俄羅斯“貝加爾湖”基準測試對比英特爾和華為芯片，慘敗 俄羅斯服務器處理器 Baikal-S 的開發人員將其性能與美國和中國的同類芯片進行了比較。涉及六個流行指標。
- 麻省理工發現新型量子磁鐵釋放電子潛力 研究人員發現了如何控制異?；魻栃拓惱锴蕘碇圃煊糜谟嬎銠C、機器人和傳感器的柔性量子磁體。
- 萬物電氣化：探索綠色未來之路 在本文中，我們將重點介紹美國年度脫碳展望(ADP)2022報告中的一些重要發現。本報告著眼于實現凈零經濟的各種情景。我們在本文中重點關注的方法稱為“中心情景”，它遵循到2050年實現凈零排放的時間表。
- 下一個醫療前沿：網聯可穿戴設備 醫療和消費級可穿戴設備將繼續增強連接性和電池壽命，以實現對血壓、體溫和身體水分等多種生物標志物的實時和非侵入性監測。
- 中國成功發射首款柔性太陽翼衛星，折疊主體厚度不到5cm 7月23日，我國在太原衛星發射中心使用長征二號丁運載火箭，成功將銀河航天靈犀03星發射升空，衛星順利進入預定軌道，該衛星主要用于衛星通信技術驗證，也是中國首款使用柔性太陽翼的衛星。
- 降低侵入式風險，清華開發出“入耳式”腦機接口 近日，清華大學研究團隊宣布開發出一種名為SpiralE?BCI的腦機接口，該器件采用“入耳式”設計，使用者只需要將器件插入耳道，即可讀取相應腦電波信息，侵入性遠遠低于其他的侵入式腦機接口設備。
- 新型橫向太陽能電池，竟然可以無限疊加有機半導體薄膜 對于人類來說，太陽能是一種非常重要的可再生能源，而太陽能電池是將太陽能轉化為電能的主要方法，因此開發廉價、可靠和高效的太陽能電池對于從化石燃料向清潔能源的過渡至關重要。
- ST亮相MWC上海：升級版智能座艙，首款USB-IF認證芯片，帶你 ST攜智能出行、電源&能源、物聯網&互聯等領域的產品和智能解決方案亮相MWC上海展，并帶來多款升級展品，讓觀眾通過充分了解ST的創新技術和解決方案，領略科技之美，探索產業新動態。
- 全球MCU加速內卷，如何“卷”出更具活力的大生態？——202 國產MCU頭部企業已在各自擅長的領域扎穩腳跟，高達三位數的國產MCU公司在20%的市場中為了生存而奮斗，而早已完成產業整合的國際MCU大廠卻在80%的市場中勝似閑庭信步。未來三年內預計MCU整體需求將減緩，行業內競爭將趨于激烈。在2023年全球MCU生態發展大會上，國際和本土知名MCU廠商的技術和應用專家，為來自消費電子、家電、工業控制、通信網絡、新能源汽車和物聯網領域的OEM廠商和方案集成商代表帶來MCU領域的最新技術趨勢和應用解決方案。
- ETC收費領域實現國產化，終端到服務器端均可使用龍芯處 “國產自主車道控制器”由四川智能交通系統管理有限責任公司組織研制，基于龍芯2K1000LA處理器，目前已在四川省高速公路聯網收費系統多個收費站試點應用，它的成功研制標志著我國高速公路數字化建設在國產化方面取得了新突破。
- 超級電容器的能量容量取得里程碑式進展 超級電容器具有很高的潛力，因為它們的充電速度比電池快得多，只需幾秒到幾分之一秒。然而，目前的超級電容器只能存儲少量的能量，這限制了其潛在的應用范圍?？茖W家表示，如果超級電容器能夠被設計為存儲更多能量，那么它們的物理重量將比電池更輕，充電速度也更快，這將產生重大的商業影響。
- 激發未來小小女工程師對STEM課程的興趣，對工程界至關重要 泰克科技組合軟件總經理Rick?Khulman:?“激發孩子們——尤其是女孩們對STEM的興趣，對我本人乃至廣大工程界
- 數據閉環——自動駕駛下半場的“入場券” 自動駕駛戰爭的上半場拼的是硬件和算法，下半場拼的則是數據和將數據點石成金的能力，即數據閉環能力。
- Nothing Ear（2）真無線降噪耳機拆解 在2023年3月，Nothing正式發布了全新迭代產品——Nothing Ear（2）真無線降噪耳機，在外觀方面延續了家族式的透明元
- 小米Sound Move智能音箱拆解 Xiaomi Sound Move搭載4單元，采用雙對稱立體聲學結構設計，通過高解析力雙揚聲器和雙被動輻射器，經由小米聲學金
- 射頻傳輸線基礎 今天大家一起學習一下射頻傳輸線基礎這篇講義
- 奔馳半年成績單：讓賺錢變得更優雅！ 2023年上半年，梅賽德斯-奔馳集團呈現出強勁的財務表現和業務增長。本文詳述各方面的具體表現。
- 自動駕駛對動力系統的影響 7月13日，由中國汽車工程學會、青島市工業和信息化局主辦，中汽翰思管理咨詢公司協辦的第十五屆汽車動力系統技
- 紅配綠，黑與白？什么樣的配色才能俘獲審稿人的芳心？ 好的科研繪圖配色令人印象深刻，也能更準確地傳遞數據信息，今天小編就帶大家看一下怎樣去選擇最適合自己數據，能
- AP AUTOSAR設計思想及原理 本文給大家分享一下在 AP AUTOSAR 里面我們怎么樣去做一個設計，整個 AP 的設計思想及原理。
- 多合一電驅動系統設計和挑戰 7月13日，由中國汽車工程學會等主辦的第十五屆汽車動力系統技術年會（TMC2023）在青島舉行。會上許多公司展示了引
- 電動化降價，智能化收費：未來汽車的雙重變革 從2023年開始，價格戰的陰影一直籠罩在汽車行業上面，“卷”是進行時，但是怎么”卷”出來是所有人考慮的問題。
- 寶華韋健TWS耳機PI7 S2評測 全新一代 Pi7 S2 的體驗如何？耳機在保持上代經典「英倫風」的同時，又能帶來哪些新體驗呢？下面，就讓我愛音頻網帶
- 瑞薩電子MCU和MPU產品線將支持Microsoft?Visual?Studio?Code 客戶現可以在VS?Code中設計和調試瑞薩嵌入式處理器的軟件，與瑞薩自有e2?Studio?IDE相輔相成
- 逐點半導體IRX游戲體驗品牌正式上線 從移動視覺處理方案到特定游戲調優，推動手游體驗邁向新的征程
- 大聯大世平集團推出基于onsemi產品的電動汽車（EV）充電樁方案 大聯大控股宣布，其旗下世平推出基于安森美（onsemi）NTBG022N120M3S和NCD57084產品的電動汽車（EV）充電樁方案。
- 意法半導體發布創新紅外傳感器，提升樓宇自動化的人員存在和移動檢 帶有微加工熱敏晶體管的高集成度、超低功耗傳感器可取代傳統的被動紅外探測器
- 比科奇介紹其打造更加智能移動通信基礎設施新愿景 比科奇在MWC上海世界移動通信大會期間介紹了其在引入人工智能（AI）等技術打造更加智能的移動通信基礎設施方向
- WiSA E開發套件開始向全球發貨，旨在統一非Sonos音頻市場 面向中國、韓國、日本和美國的各大品牌發貨
- 安森美和麥格納簽署戰略合作協議，投資碳化硅生產以滿足日益增長的 麥格納將在其主驅逆變器方案中集成安森美的EliteSiC以增加電動汽車的續航里程和能效
- 小尺寸大功率Harwin連接器子系列可從360°?EMC后殼中受益 Harwin公司宣布其Kona大功率連接器子系列現已推出帶后殼的產品。
- Arm 擴大開源合作伙伴關系，加強投入開放協作 Arm 和我們的生態系統的關鍵信念之一是與開源社區合作，共創一個高度發達的 Arm 架構，使軟件的落地更加穩定，從
- WiSA推出兩款功能強大的新工具，用于實現、管理和測試WiSA技術支持 新工具可為客戶提供全面支持，助其開發和制造采用WiSA E和WiSA DS設計、用于多聲道音頻的產品
- 艾邁斯歐司朗推出智能多像素EVIYOS?2.0?LED，適用于高精度自適應 EVIYOS?2.0具備高分辨率、完全防眩智能遠光功能，在遠光模式下自動降低眩光；EVIYOS?2.0將圖像和安全警示投射
- 全新Arm IP Explorer平臺助力SoC架構師與設計廠商加速IP選擇 Arm推出全新Arm IP Explorer平臺
