從架構(gòu)開始剖析VR產(chǎn)業(yè)的現(xiàn)狀

在盛極一時(shí)的智能手機(jī)日漸式微，呼聲四起的可穿戴和智能家居等物聯(lián)網(wǎng)遲遲未爆發(fā)之際，虛擬現(xiàn)實(shí)中路殺出，攪動日趨平靜的智能終端死水，并給終端市場注入了一波新的活力。

包括上游的架構(gòu)廠商ARM，芯片廠商瑞芯微、高通;中游的方案商希姆通、中科創(chuàng)達(dá)和下游如大朋、Pico等廠商迅速切入，力求跟上下一波硬件趨勢。而這些廠商在其中也嚴(yán)肅對待，各出奇招。

日前，瑞芯微舉辦了一場VR產(chǎn)業(yè)鏈對接峰會，為大家剖析VR產(chǎn)業(yè)的現(xiàn)狀與展望。

ARM：從架構(gòu)入手支持VR

VR作為一種并不算新的產(chǎn)品，擁有三種終端形態(tài)：VR一體機(jī)、PC機(jī)和盒子(與手機(jī)配合使用)。其沉浸式體驗(yàn)也讓VR在實(shí)際中帶來了多樣的應(yīng)用需求。

VR的應(yīng)用領(lǐng)域

而由于其本身工作原理和體驗(yàn)的硬性要求，使得廠商不但要在芯片層面上提高，還需要從軟件角度去優(yōu)化。除此之外，如何結(jié)合上層包括機(jī)械零件、光學(xué)配件在內(nèi)的多種零配件，并在成本、性能和產(chǎn)品上給消費(fèi)者帶來極致體驗(yàn)，就成為產(chǎn)業(yè)鏈參與者的責(zé)任。

ARM作為芯片最上游的提供商，從源頭上給VR產(chǎn)業(yè)助力。作為一個(gè)IP供應(yīng)商，ARM提供的服務(wù)包括其CPU和GPU的產(chǎn)品線，而由于VR的產(chǎn)品特性，對ARM提出了很強(qiáng)的性能需求。

ARM如何打造VR的新體驗(yàn)

ARM認(rèn)為，對于想VR產(chǎn)品有最好的體驗(yàn)，那么就要求其體驗(yàn)達(dá)到PS4這類主機(jī)的水平，而這個(gè)期限將會在2018年，屆時(shí)ARM的CPU和GPU將會給VR帶來強(qiáng)勁的助力。來到關(guān)鍵的GPU領(lǐng)域，ARM的表現(xiàn)也是無可匹敵的。

作為移動處理器的絕對王者，ARM的Mali GPU從2008年發(fā)布以來，逐漸在移動GPU領(lǐng)域占領(lǐng)了一席之地。來到VR領(lǐng)域，憑借其出色圖像處理性能、OpenGL ES 和 EGL的延遲優(yōu)化、系統(tǒng)帶寬的減少和完善生態(tài)等特性，ARM GPU將成為VR GPU的當(dāng)仁不讓之選。

ARM Mali GPU發(fā)展路線圖

日前ARM發(fā)布的最新的CPU架構(gòu)Cortex –A73和GPU架構(gòu) G-71，正是在VR領(lǐng)域奮進(jìn)的具體印證。

瑞芯微：RK3399接力RK3288強(qiáng)攻VR市場

國內(nèi)芯片廠商中，瑞芯微可算是走在最前面的一個(gè)，憑借著一款RK3288，瑞芯微占領(lǐng)國內(nèi)80%以上的VR市場，遙遙領(lǐng)先于其他競爭對手，而今年他們推出了全新RK3399，為VR主控再添強(qiáng)援。

據(jù)瑞芯微Rockchip全球副總裁陳鋒介紹，RK3399采用了雙Cortex-A72大核+四Cortex-A53小核的big.LITTLE大小核架構(gòu)，并對整數(shù)、浮點(diǎn)、內(nèi)存等做了大幅優(yōu)化，產(chǎn)品在在整體性能和功耗等方面也有了革命性的提升。

而在GPU方面，RK3399則采用了ARM新一代的高端圖像處理器——四核的Mali-T860，其除了集成帶寬壓縮技術(shù)：如智能迭加、ASTC、本地像素存儲外，還支持了更多的圖形和計(jì)算接口，總體性能比上一代提升45%。

陳鋒指出，這款定位于中高端VR一體機(jī)芯片解決方案，不但支持三大VR行業(yè)新標(biāo)準(zhǔn)——20ms毫秒延時(shí)、75Hz以上畫面刷新率及1K以上陀螺儀刷新率，還具備八大技術(shù)優(yōu)勢：

1、超強(qiáng)4K 360度全景視頻解碼，并兼容2D/3D片源

2、VR低時(shí)延低于20ms毫秒，比優(yōu)化前Android系統(tǒng)提升5倍以上

3、顯示刷新幀率支持75Hz-120Hz

4、3億以上三角形輸出率

5、支持2K/雙FHD高分辨率屏幕

6、支持光學(xué)軟件反畸變、反色散、瞳距調(diào)節(jié)算法

7、支持軟件及硬件兩種左右分屏方式

8、支持主流游戲引擎平臺

加上豐富的接口支持，高性能的ISP，對Android和Linux的兼容，也讓RK3399在瑞芯微傳統(tǒng)的游戲盒子和二合一平板等強(qiáng)項(xiàng)領(lǐng)域持續(xù)走強(qiáng)?？紤]到RK3288對Windows和Chome OS的支持，想必新旗艦在未來也會加入對這兩個(gè)系統(tǒng)的支持，這就使的RK3399如虎添翼。

Nibiru：為VR搭建物理世界和虛擬世界的橋梁

前面提到，VR是一個(gè)對軟硬件需求極高的產(chǎn)品形態(tài)，如何搭建一個(gè)在物理世界和虛擬現(xiàn)實(shí)世界溝通的簡便橋梁，就成為開發(fā)者需要考慮的首要問題。南京睿悅(Nibiru)就是當(dāng)中的佼佼者。

依賴于在系統(tǒng)底層優(yōu)化、硬件性能優(yōu)化、陀螺儀融合算法和異步時(shí)間扭曲等多個(gè)領(lǐng)域的技術(shù)積累，Niburu主導(dǎo)研發(fā)的Nibiru SDK體系通過交互VR SDK(交互，圖形圖像SDK、音頻SDK)等核心技術(shù)建立起了貫穿軟件、硬件的上下游體系，服務(wù)全球開發(fā)者。Nibiru VR一體機(jī)系統(tǒng)占據(jù)絕對的市場份額， Nibiru VR手機(jī)系統(tǒng)被多家品牌手機(jī)采用。

Nibiru的聯(lián)合創(chuàng)始人劉峰瑞認(rèn)為，PC形態(tài)或手機(jī)形態(tài)的VR終端，由于其產(chǎn)業(yè)鏈的封閉或體驗(yàn)的缺失，將不會死VR的最終選擇，他認(rèn)為未來的VR將會是一體機(jī)的天下。

他提到，雖然上游的芯片商將芯片性能和方案已經(jīng)做得非常好了，但有了這些并不代表能做出一個(gè)好產(chǎn)品，這中間還需要硬件設(shè)計(jì)公司的多方面投入。而要搭建一個(gè)完善的VR生態(tài)系統(tǒng)，還需要有影音視頻、游戲等內(nèi)容廠商，在應(yīng)用上和各種外設(shè)廠家配合。這樣才能打造一整套的場景化的VR應(yīng)用?；谶@些邏輯，Nibiru從交互SDK入手，切入底層優(yōu)化，助力IDH設(shè)計(jì)，聯(lián)合品牌、制造和供應(yīng)鏈的能力，把產(chǎn)品引爆市場。

劉峰瑞認(rèn)為，想要VR大爆發(fā)，一個(gè)需要重點(diǎn)考慮的問題是陀螺儀的優(yōu)化處理，當(dāng)中包括了穩(wěn)定性和圖像的渲染。

按照他的觀點(diǎn)，雖然現(xiàn)在移動VR的GPU正在追趕PC顯卡的性能，但我們要明白當(dāng)中還有很大的一段差距，所以對于VR上復(fù)雜的內(nèi)容加載，就需要多方面考量。劉瑞峰認(rèn)為VR設(shè)備上雖然可以做復(fù)雜內(nèi)容，但有一點(diǎn)需要注意，那就是渲染一定要盡可能簡單，因?yàn)檫@樣才可以減輕GPU的壓力。

Nibiru現(xiàn)在配合ARM做了一些底層的優(yōu)化和構(gòu)建，能夠?qū)R設(shè)備的延遲做到30ms以內(nèi)，刷新率也可以根據(jù)主控芯片的性能將其提高到90FPS。[!--empirenews.page--]

而在VR影音視頻和游戲等方面，Nibiru已經(jīng)聯(lián)合了國內(nèi)的眾多內(nèi)容和游戲產(chǎn)業(yè)鏈廠商，致力于為消費(fèi)者提供全新體驗(yàn)。在這里，劉總特意提到了VR在近期火熱的直播平臺中的應(yīng)用。他認(rèn)為未來VR直播將成為一個(gè)主流，而Nibiru在這里所提供的核心算法和渲染技術(shù)，也是有其他平臺所無法比擬的優(yōu)勢的。

瑞芯微：RK3399接力RK3288強(qiáng)攻VR市場

國內(nèi)芯片廠商中，瑞芯微可算是走在最前面的一個(gè)，憑借著一款RK3288，瑞芯微占領(lǐng)國內(nèi)80%以上的VR市場，遙遙領(lǐng)先于其他競爭對手，而今年他們推出了全新RK3399，為VR主控再添強(qiáng)援。

據(jù)瑞芯微Rockchip全球副總裁陳鋒介紹，RK3399采用了雙Cortex-A72大核+四Cortex-A53小核的big.LITTLE大小核架構(gòu)，并對整數(shù)、浮點(diǎn)、內(nèi)存等做了大幅優(yōu)化，產(chǎn)品在在整體性能和功耗等方面也有了革命性的提升。

而在GPU方面，RK3399則采用了ARM新一代的高端圖像處理器——四核的Mali-T860，其除了集成帶寬壓縮技術(shù)：如智能迭加、ASTC、本地像素存儲外，還支持了更多的圖形和計(jì)算接口，總體性能比上一代提升45%。

陳鋒指出，這款定位于中高端VR一體機(jī)芯片解決方案，不但支持三大VR行業(yè)新標(biāo)準(zhǔn)——20ms毫秒延時(shí)、75Hz以上畫面刷新率及1K以上陀螺儀刷新率，還具備八大技術(shù)優(yōu)勢：

1、超強(qiáng)4K 360度全景視頻解碼，并兼容2D/3D片源

2、VR低時(shí)延低于20ms毫秒，比優(yōu)化前Android系統(tǒng)提升5倍以上

3、顯示刷新幀率支持75Hz-120Hz

4、3億以上三角形輸出率

5、支持2K/雙FHD高分辨率屏幕

6、支持光學(xué)軟件反畸變、反色散、瞳距調(diào)節(jié)算法

7、支持軟件及硬件兩種左右分屏方式

8、支持主流游戲引擎平臺

加上豐富的接口支持，高性能的ISP，對Android和Linux的兼容，也讓RK3399在瑞芯微傳統(tǒng)的游戲盒子和二合一平板等強(qiáng)項(xiàng)領(lǐng)域持續(xù)走強(qiáng)。考慮到RK3288對Windows和Chome OS的支持，想必新旗艦在未來也會加入對這兩個(gè)系統(tǒng)的支持，這就使的RK3399如虎添翼。

Nibiru：為VR搭建物理世界和虛擬世界的橋梁

前面提到，VR是一個(gè)對軟硬件需求極高的產(chǎn)品形態(tài)，如何搭建一個(gè)在物理世界和虛擬現(xiàn)實(shí)世界溝通的簡便橋梁，就成為開發(fā)者需要考慮的首要問題。南京睿悅(Nibiru)就是當(dāng)中的佼佼者。

依賴于在系統(tǒng)底層優(yōu)化、硬件性能優(yōu)化、陀螺儀融合算法和異步時(shí)間扭曲等多個(gè)領(lǐng)域的技術(shù)積累，Niburu主導(dǎo)研發(fā)的Nibiru SDK體系通過交互VR SDK(交互，圖形圖像SDK、音頻SDK)等核心技術(shù)建立起了貫穿軟件、硬件的上下游體系，服務(wù)全球開發(fā)者。Nibiru VR一體機(jī)系統(tǒng)占據(jù)絕對的市場份額， Nibiru VR手機(jī)系統(tǒng)被多家品牌手機(jī)采用。

Nibiru的聯(lián)合創(chuàng)始人劉峰瑞認(rèn)為，PC形態(tài)或手機(jī)形態(tài)的VR終端，由于其產(chǎn)業(yè)鏈的封閉或體驗(yàn)的缺失，將不會死VR的最終選擇，他認(rèn)為未來的VR將會是一體機(jī)的天下。

他提到，雖然上游的芯片商將芯片性能和方案已經(jīng)做得非常好了，但有了這些并不代表能做出一個(gè)好產(chǎn)品，這中間還需要硬件設(shè)計(jì)公司的多方面投入。而要搭建一個(gè)完善的VR生態(tài)系統(tǒng)，還需要有影音視頻、游戲等內(nèi)容廠商，在應(yīng)用上和各種外設(shè)廠家配合。這樣才能打造一整套的場景化的VR應(yīng)用。基于這些邏輯，Nibiru從交互SDK入手，切入底層優(yōu)化，助力IDH設(shè)計(jì)，聯(lián)合品牌、制造和供應(yīng)鏈的能力，把產(chǎn)品引爆市場。

劉峰瑞認(rèn)為，想要VR大爆發(fā)，一個(gè)需要重點(diǎn)考慮的問題是陀螺儀的優(yōu)化處理，當(dāng)中包括了穩(wěn)定性和圖像的渲染。

按照他的觀點(diǎn)，雖然現(xiàn)在移動VR的GPU正在追趕PC顯卡的性能，但我們要明白當(dāng)中還有很大的一段差距，所以對于VR上復(fù)雜的內(nèi)容加載，就需要多方面考量。劉瑞峰認(rèn)為VR設(shè)備上雖然可以做復(fù)雜內(nèi)容，但有一點(diǎn)需要注意，那就是渲染一定要盡可能簡單，因?yàn)檫@樣才可以減輕GPU的壓力。

Nibiru現(xiàn)在配合ARM做了一些底層的優(yōu)化和構(gòu)建，能夠?qū)R設(shè)備的延遲做到30ms以內(nèi)，刷新率也可以根據(jù)主控芯片的性能將其提高到90FPS。

而在VR影音視頻和游戲等方面，Nibiru已經(jīng)聯(lián)合了國內(nèi)的眾多內(nèi)容和游戲產(chǎn)業(yè)鏈廠商，致力于為消費(fèi)者提供全新體驗(yàn)。在這里，劉總特意提到了VR在近期火熱的直播平臺中的應(yīng)用。他認(rèn)為未來VR直播將成為一個(gè)主流，而Nibiru在這里所提供的核心算法和渲染技術(shù)，也是有其他平臺所無法比擬的優(yōu)勢的。

硅谷數(shù)模：USB Type C方案助力手機(jī)VR市場起飛

USB Type C無疑是近年來科技界的香餑餑。得益于正反插、高傳輸速度和對大功率的支持，USB Type C近年來逐漸成為移動設(shè)備的主流，連Intel都在大力推動Type C的普及。VR作為種移動設(shè)備，無疑也成為了USB Type C關(guān)注的熱點(diǎn)。

硅谷數(shù)模作為一個(gè)關(guān)注移動設(shè)備到大屏幕音視頻傳送的芯片公司，也把目光盯向了VR，期望用USB Type C給VR消費(fèi)者帶來完美體驗(yàn)。

硅谷數(shù)模劉金文認(rèn)為，手機(jī)和VR顯示連接的“可連接VR”將會是性能和便攜結(jié)合得最好的VR產(chǎn)品。

不同形態(tài)VR性能和便攜性對比

不同形態(tài)VR對設(shè)備的需求

劉金文繼續(xù)指出，如HTV VIVE這類連接PC的VR設(shè)備，不但需要HDMI線傳輸音視頻，還需要VR線來傳輸數(shù)據(jù)，再加上電源線，不但接線繁多，且使用很受限制;但類似谷歌 Cardboard類型的VR終端雖然成本低，但受限于手機(jī)的性能，加上“感人”的重量，這嚴(yán)重影響了消費(fèi)者的體驗(yàn)。

因此手機(jī)連接VR將會是比較好的產(chǎn)品形態(tài)，劉金文強(qiáng)調(diào)。如果VR采用這種模式，就可以利用一個(gè)Type C數(shù)據(jù)線滿足電源、數(shù)據(jù)、音視頻的傳輸需求。包括陀螺儀加速度、位置、前置攝像頭等等方面的信息都可以通過其傳送，劉金文補(bǔ)充說。

按照劉金文的說法，利用USB Type C去傳輸數(shù)據(jù)，是性能需求發(fā)展的必然結(jié)果。

USB Type C成為VR數(shù)據(jù)傳送首選的原因

而這些USB Type C傳送都是遵循DisplayPort接口標(biāo)準(zhǔn)，借由硅谷數(shù)模開發(fā)的SlimPort芯片支持移動設(shè)備和顯示之間創(chuàng)建的簡單連接技術(shù)。能夠明顯降低開發(fā)者的成本和產(chǎn)品設(shè)計(jì)的復(fù)雜度。

除了這些技術(shù)提供商外，還有希姆通等方案商提供一體化的方案，3DV star提供3D的算法和光學(xué)支持，上海樂相、圓周率Airpi、瑞晶顯像、3DVSTAR、品網(wǎng)、晨芯、英卡等企業(yè)也從VR產(chǎn)業(yè)鏈的不同階段切入，為中國VR產(chǎn)業(yè)的發(fā)展加油。在這些廠商的共同努力下，VR的真正普及指日可待。