對壘聯發科，高通也打出AR芯片王牌，元宇宙給半導體行業帶來多少“想象”？

聯發科之前在自己的技術峰會上，展示了自己的第一款VR芯片，并且抱上了索尼的大腿。索尼即將上市的PS VR2頭顯就采用了這顆芯片，從之前索尼介紹的PS VR2功能和效果來看，這顆芯片無疑是非常強大的。而作為聯發科目前最大的競爭對手高通，在16日的驍龍技術峰會上，除了推出了新一代的驍龍8 Gen2芯片之外，還發布了自家最新針對AR應用的芯片——驍龍AR2 Gen1。

盡管和聯發科的VR芯片領域有一些不同，高通的這個芯片主要是處理增強現實的場景應用，而不是針對虛擬現實，但很顯然兩者的發展軌跡有很相似的地方。當然聯發科的VR芯片未來更多會用在娛樂場景，比如說游戲和視頻；而高通的AR芯片則用于增強現實，理論上會有更多比有趣的場景，畢竟是和真實環境結合起來。

高通的AR芯片也采用的是臺積電的4nm制造，和之前高通用于AR/VR的芯片相比，性能提升多少還不清楚，但是芯片的面積減少了40%，耗電量也減少了50%。當然目前使用這顆芯片的廠商還比較少，對這顆芯片的了解也不多，倒是制造《寶可夢GO》的廠商Niantic展示了一款搭載這款芯片的原型AR眼鏡。

從這個眼鏡的原型設計來看，高通是希望將這個芯片用于智能穿戴設備中，做到盡量日常化和簡單化，而不像VR芯片用于頭顯那樣與眾不同。不過這個原型機看起來似乎還是無法用在生活日常，不過效果似乎還不錯。這款AR眼鏡能夠實現引導式導航，也能夠在現實場景上覆蓋更多信息，當然也能玩AR游戲。不過從續航來看，這個眼鏡似乎很一般，最高也才兩個小時，看起來整個設備的耗電比想象的要高一些，整體眼鏡的重量倒是低于250g，不需要和其他設備連接，直接單獨運行。

不過按照高通的想法，這個芯片以后應該是用在更輕薄的設備上，比如我們日常佩戴的眼鏡那種形狀。現在性能似乎應該不是太大的問題，但是外形、功能以及應用上，到底能給用戶帶來什么樣的意義，現在還很難說。而且AR生態現在各大廠商都在探索之中，還沒有誰做得特別成熟，或者說沒有廠商能給用戶帶來很好的體驗，所以高通這顆芯片會不會有很大的市場，現在還不好說！

元宇宙背后的芯片機會

從去年下半年開始，元宇宙的概念可謂是科技行業的一個最大熱點，各大科技公司均紛紛宣布大力布局元宇宙。目前，普遍認為AR/VR將會成為元宇宙的重要入口，因此也成為了各大公司大力投資的領域。AR/VR硬件領域，Facebook的Quest系列已經成為全球最受歡迎的VR設備，而中國的巨頭如字節跳動和騰訊在最近也有大的投資，其中字節跳動收購了中國公司中市場占有率最高的VR設備廠商Pico，而騰訊也在最近收購了黑鯊，將專注于VR硬件設備。AR硬件領域，去年下半年雷朋和Facebook攜手推出了第一款面向大眾的智能眼鏡Ray-ban Stories，中國的華為等公司也紛紛推出概念原型機，而隨著蘋果的高端AR/VR設備預計在2022或2023年發布，預計未來AR硬件也將走上快速成長的道路。

ARVR硬件的性能對于能夠支撐的用戶體驗極為關鍵，而其中的芯片也就成為賦能其硬件性能的核心部件。目前，在ARVR市場上，最主要的供貨商毫無疑問是高通，其Snapdragon XR系列成為了目前幾乎所有VR設備的選擇，而在去年年底的高通投資日上，高通CEO Cristiano Amon也著重強調了ARVR（XR）市場將成為高通未來最關鍵的發力方向之一，并且預計目前相關芯片在2021年已經出貨達到千萬數量級。而在今年早些時候，高通也和微軟在CES 2022上正式發布了在AR領域的合作計劃，其中微軟和高通將共同開發定制化的Snapdragon芯片用于AR眼鏡中，其中將進一步包括對于微軟Mesh平臺和高通Snapdragon spaces這兩大AR開發平臺的支持。

從去年到今年的動態來看，ARVR芯片市場正處于高速增長的階段，而目前高通在這個市場上幾乎處于壟斷地位。但是，隨著該市場規模的進一步增長，一定會有更多的芯片廠商進入該市場。

ARVR芯片的技術門檻

ARVR芯片的技術門檻決定了有多少芯片公司能進入該市場競爭。我們不妨從VR芯片技術開始分析。

首先，從架構上來說，VR芯片的架構基本和其他智能設備的SoC類似，由一個處理器（AP）來運行操作系統并且掌控整體硬件的操作。因此，VR芯片首先需要擁有一個較強的處理器，但是這一點目前來說并非高不可攀——ARM的高性能處理器IP的使用和集成已經成為大多數SoC廠商的標準操作，因此我們認為VR芯片中的處理器并非是一個難以跨越的門檻。

在VR SoC的眾多IP中，最重要的決定用戶體驗的IP就是負責渲染和顯示的GPU。目前，VR設備的主要應用還是游戲，而幾乎所有的VR游戲都是3D圖像（因為3D圖像能給用戶提供最好的沉浸感體驗），因此GPU的性能就決定了這些3D游戲的多邊形數量和渲染效果。目前的VR游戲的3D圖像質量大約相當于10年前的PC和主機游戲，因此隨著VR游戲市場的擴大和生態的形成，游戲圖像質量將會成為主機之間競爭的核心指標，而這也將推動對于VR芯片中GPU渲染能力的需求。與桌面級GPU不同的是，VR芯片中的GPU必須考慮能效比，因為目前主流的VR設備都是依靠電池來供電，因此能效比將決定VR設備的續航時間，同時也需要保證VR設備散熱沒有問題。

除了游戲圖像質量之外，VR設備中用戶體驗的一大需求就是分辨率。目前VR設備中一個重要的被用戶體驗問題就是屏幕分辨率不夠所產生的“紗窗效應”（即用戶看到的圖像好像隔了一層紗窗），因此VR設備對于4K甚至更高分辨率的需求更甚于手機。因此，我們預計在未來幾年中VR設備的屏幕分辨率也將是各大廠商競相追逐的目標，這也需要VR芯片的GPU能有足夠的性能來支持高分辨率的屏幕。

在GPU之外，VR芯片中另一個最重要的IP當屬人工智能加速器。與傳統手機中不同，VR設備中的眾多交互都需要人工智能的介入。舉例來說，VR設備一個重要的需求就是設備和用戶的定位和追蹤，并且把這個信息融合到游戲的虛擬環境中，這就需要使用人工智能中的SLAM技術才能高質量地實現。另外，目前VR設備中，交互越來越多地使用手部追蹤和眼部追蹤等先進技術來實現自然的交互，而這些追蹤都需要使用人工智能模型，而且隨著追蹤精度的增加，模型需要的算力也在上升。最后，人工智能也是一個解決GPU渲染能力瓶頸的重要技術。屏幕分辨率上升和用戶對于圖像質量的追求給GPU很大的壓力，但是事實上用戶在同一時間并不會注意到屏幕上所有的像素點，而只會關注他們眼睛聚焦地方附近的像素點。因此，一個技術解決方案就是選擇性渲染（foveated rendering），即使用眼部追蹤技術結合人工智能模型來判斷用戶眼睛聚焦的位置并且在相應的地方做高質量渲染，而在用戶關注不到的地方則可以降低渲染質量，從而減輕GPU的壓力。目前，該技術已經使用在了Sony的PSVR2中，未來可望會用到更多的VR設備中。

從上面這些分析中，我們可以看到VR設備中的人工智能甚至比起在手機中更重要，因為這些人工智能模型首先是賦能用戶體驗重要特性的關鍵，同時也必須實時運行在VR設備中，而難以依靠云技術。這些人工智能模型的復雜度決定了VR芯片上必須有一個足夠強力的人工智能加速器，同時擁有強算力和很好的能效比，才能支持這些應用。

除了GPU和人工智能之外，無線連接也是VR芯片中較為重要的部分。對于一些高質量游戲，目前的主流做法是讓游戲運行在桌面計算機上，同時把圖像通過串流（stream）的方式傳送給VR設備，而這也就需要穩定和高速的WiFi連接。

今天來看VR芯片的需求和門檻已經較為明確，而相對而言AR芯片還處于較早期。與VR相比，AR眼睛無需連續運行大量的圖像渲染，但是需要能實現全天候佩戴，而且對于重量有非常嚴格的需求（例如重量與一般的墨鏡相當），這就進一步限制了眼睛上的電池容量，因此對于芯片來說會需要更進一步做低功耗優化。無論從Magic Leap還是微軟的Hololens來看，AR圖像渲染也是AR眼鏡中一個極其重要的用戶體驗，因此對AR芯片的GPU將是一個挑戰，即如何平衡渲染能力和功耗。人工智能也是類似，AR眼鏡也需要對用戶做SLAM，并且也需要支持手部追蹤這樣的交互，因此我們認為AR芯片可以認為是更低功耗版的VR芯片。

AR芯片的未來是定制

針對目前市場上大多數AR設備依然采用通用芯片的情況，芯原股份業務運營高級副總裁汪洋指出：“AR是近年來才開始發展的一種新型產品，市面上現有的很多通用計算芯片，一般主要針對如手機、平板電腦、PC等應用而深度優化和綁定。在被應用到AR設備中時，常常會出現部分功能冗余、部分特定功能無法滿足，以及顯示性能或是功耗不理想等問題，這極大限制了AR設備端的發揮。這些設備的使用體驗欠佳，不利于市場的打開，也阻礙了AR技術和設備的進一步迭代。”

而面向AR設備開發定制化芯片或將為AR的發展提供有利契機。安謀科技智能物聯網事業群聯合負責人商德明表示，AR產品具有全新的應用場景，既要滿足日常佩戴對重量的要求，又要打造極致的交互體驗。這就使得定制化芯片在實際應用中顯得更加重要。

Rokid創始人暨CEO祝銘明則指出，AR眼鏡的進化，依賴于核心部件和生態系統的支撐，其中核心部件包括光學與芯片等。區別于電腦、手機芯片，AR芯片對算力和低功耗有著更高要求，涉及高昂的開發成本和技術門檻。“自研芯片+自主OS”的緊耦合是AR芯片未來的演進方向。芯片不能孤立進化，軟硬一體的高度協同才能夠使計算性能最大化。

事實上，越來越多國際終端設備大廠開始選擇自主定制AR芯片。在2022國際消費電子展（CES）上，高通表示，正在與微軟合作開發用于AR眼鏡的定制芯片。高通首席執行官Cristiano Amon在發言中表示：“我們宣布，我們正在為下一代、高能效、超輕AR眼鏡開發一款定制的增強現實驍龍芯片，用于微軟生態系統。”

此外，蘋果、亞馬遜、Meta等國際科技巨頭均有啟動自身造芯的計劃。小米、OPPO等國內終端廠商也開始設計自己的芯片。這些自研芯片項目未來不排除面向AR產品進行相應的開發。

所謂定制化芯片業務又稱為ASIC（特殊應用集成電路），是指一類應特定客戶要求和特定電子系統的需要而設計、制造的集成電路。相較于人們熟悉的通用型芯片，如CPU、GPU、基帶、藍牙、WiFi等，ASIC對于客戶的應用需求具有更強的針對性。由于是專門定制，所以定制芯片在某一特定領域的性能一般會強于通用芯片。同時，這也能幫助AR設備廠商在產品上體現差異化優勢。