HTC Vive VR行業應用負責人馬杰思 :HTC Vive與房間級虛擬現實體驗
原創2016年04月22日,由51CTO傳媒主辦的《中國首屆VR/AR技術大會》在北京駿馬國際酒店召開。我們邀請了業界知名的技術精英來分享VR/AR熱度下最前沿的探索,交流觀點并進行實踐分享,志在打造一屆真正有干貨有內容產出的技術盛會。除了技術交流分享外,我們還設置了現場體驗專區,提供***的***的VR設備供您體驗VR游戲、電影場景等。
下面是來自HTC Vive VR行業應用負責人馬杰思先生給大家帶來的是主題為《HTC Vive與房間級虛擬現實體驗》的精彩演講實錄。
馬杰思,目前在全球領先的VR公司HTC Vive工作。之前曾先后在虛擬現實、計算機視覺、人工智能等技術領域從事產品和商務工作。對VR行業格局和趨勢、產品觀念和認知、技術原理和邊界都有個人的思考與總結。曾在美國喬治梅森大學攻讀博士并任校學聯會主席,并擁有北大碩士和北航本科學位。
【以下為現場演講實錄】
大家好!我是HTC Vive中國區的行業應用負責人,大家如果對VR行業有一個了解很清楚,有一個叫法所謂的三大頭銜,HTC Vive是其中之一,而且是目前進入中國市場的,中國的總部設在北京。
HTC Vive這款設備包含了VR頭顯,兩個無線的手柄,還有兩個激光定位的基站,這套設備加在一起,我們把它稱之為目前最完整的VR體驗。我們這個設備坐著玩、站著玩、走著玩三種都支持,尤其是走著玩,在一個4.5×4.5大小的房間,可以實現自由移動的VR體驗。VR這個講是不容易講明白的,我們來看一段視頻,我們看一下自由移動式的VR體驗是什么樣的感覺。像這么一個特別***的VR頭顯,要做出來需要什么條件呢?今天正好是51CTO的場合,我講一些偏技術方面的問題,但也不會特別深。
90分聽起來好像是評測話題,我們回想一下,在手機時代我們怎么做評測的?大家都記得安兔兔,當時做手機評測我們通過CDU、CPU、閃存、內存等一系列性能的疊加,我們打一個高分,高分覺得運行流暢,體驗特別好;低分我們就認為它有一些卡頓。我個人認為,無論是高分還是低分手機,都能完成相同的任務,都能完成用戶的需求,只不過解決用戶需求的性能和效率的高低與快慢之間的差異而已。
對于VR來說,一個90分的頭顯和一個40分頭顯之間的差異,僅僅讓手機運行效率上的差異嗎?我們在市場上也可以看到,有非常多的頭顯,比如說在淘寶上輸入VR眼鏡,會出現四塊多、五塊多到六七千的都有,它們之間有一千倍價格的差異,到底差在哪里?4塊錢的VR頭顯,有沒有承載下一個計算平臺的革命。
要解釋清楚VR90分和40分差異在哪里?必須回到VR產品的定位和用戶需求,VR頭顯到底解決了什么樣的用戶需求?在VR行業里,這個話題說的比較少,但是在互聯網、手機行業大家討論的比較多。
VR的產品到底解決了什么?沉浸感。沉浸感大家也都知道,但是沉浸感到底是什么?我們怎么去理解沉浸感?但是你要去經歷,看的更多才會體會沉浸感,沉浸感就是讓你戴上頭顯以后,以為自己身處在真實的世界中,你好像瞬間移動到了另外一個世界,你自己渾然不知,有一種身臨其境的感覺。大家可能會覺得很可笑,我在我自己的屋子里,我戴一個頭顯,我難道不知道我自己在自己的屋子里嗎,現在的頭顯通過雙目的視覺、交互、聲音等技術,就是能夠欺騙你的感官,讓你以為有這么一個效果。我們下面來看一段視頻,也是在演示中看到用戶的反應,這個用戶在玩的不是特別恐怖的游戲,是一個可愛的游戲,是白天的,有一群長的很可愛的僵尸,大家可以看一下她的反應。
我自己給上百個玩家做過這樣的演示,我自己也經常能夠看到這樣的場景,隨著我做的演示越來越多,隨著我看到大家發出的尖叫聲越來越多,看到躺在地上不敢起了人越來越多,我覺得在這個場景挺有戲的。這樣的反應,在我們日常生活中是很難聽到的,也很難看到這樣的尖叫聲,看到大家在使用虛擬的媒介,在使用一個智能終端的,有發生這樣的反應,幾乎是沒有看到的。VR能夠給用戶帶來一種全新的體驗,而VR它的頭顯又大,又笨重,又不好用,功能設計沒有達到現在智能設備水平。但是VR走出來,就必須提供全新的體驗,這就是VR能夠帶來的全新體驗,這是其他所有的媒介目前都沒有辦法帶來的。
因此,VR的核心是追求***的,對虛擬世界的模擬,它要欺騙我們的視覺、聽覺、交互,也許未來還有觸覺、嗅覺,雖然我們以為我們身處在真實的世界中,以此來實現沉浸感。隨著這條道路越走越深,我們從業者一定制造出一個又一個更加真實的世界,一個更加能夠模擬真實世界的設備,這是VR努力的方向。
與此非常不同的,是大家經常看到的AR概念,很多人會說VR跟AR一定會融合,***可能會走向“MR”的存在,這可能是非常遙遠的未來。從現在這個階段來看,AR和VR解決了不同用戶的需求。VR的核心是追求***的,對現實世界智能的感知,實現互聯網服務,在線下以及在日常生活中更智能的服務。比如說AR購物,我們到商場里看到它的價格,以及詳情,都會自動在線下購物場景中顯現出來。我戴上VR眼鏡可以看到,在座的大家都是誰,這個取決于我要智能識別你的人臉,并且跟互聯網的數據做一個結合。AR和VR雖然都是眼鏡,但這兩種技術會不會融合,這是大家要去思考的問題。
因此我認為90分和40分VR頭顯最核心的差異在于沉浸感,40分的VR頭顯是沒有辦法提供沉浸感的,也就是說它連最基本的用戶需求都沒有滿足,就不用再說增加體驗、改善用戶反饋等。90分和40分不像手機一樣,是一個量變,完成相同的任務以不同的效率,它是一個質變,目前VR的設備差異就在這兒,90分VR技能是非常重要的,對于一個VR成敗來說是很重要的,但是90分也非常難。
達到90分需要什么條件?首先,大于80度的市場角,我們人的視角是大于180度,在HTC Vive擁有***的視角是110度,如果再小的話,沉浸感會下降,像HTC Vive設備,在未來一定會向著***的視場角進程。
第二,大于1920×1080的分辨率。大家都知道,用普通的屏幕,1080實際上已經非常的清晰,但是在VR里是不行的,因為VR眼鏡緊貼在你的眼前,用兩個透鏡把畫面放大很大的視場角上,因此,你的眼睛會看到象素,像右邊的圖,它會有紗窗效應,你感覺透著紗窗看外面的世界;而只有大于1080P的分辨率,才有可能比紗窗效應減弱。比如說蘋果的視網膜的分辨率,清晰度可能要16K的分辨率對于VR來說。
條件三,低余暉的OLED面板。普通的LCD和LED面板存在一個問題,當你的頭在快速動的時候,就會出現運動模糊的問題,畫面會出現脫影,只是因為發光時間過長,導致出現脫影問題。只有低于暉的OLED面板,由于發光時間特別短,因此不會脫影,你會你多快,畫面都非常的清晰。如果你是在兩毫秒以內的發光時間,這個畫面是非常清晰,用普通的LCD屏幕,發光在12毫秒以上,畫面會非常的模糊,也會導致眩暈問題。
由于發光時間變短,因此我們需要更高的刷新率,否則的話,屏幕就會出現顯示器會閃爍的問題。在VR里,如果使用60HZ的刷新率,眼睛看著會感覺畫面一閃一閃的,這時候就會眩暈。高的刷新率還可以令游戲的體驗更加流暢,右邊的114HZ是電競的顯示器,非常的順暢,只有這個才能給他們帶來高強度的電競的感覺。
條件五,低于20毫秒的運動到成像延時,在用VR的時候,要頭動。在動頭的時候,你這個畫面要進行更新,因為你看到不同的地方,在頭顯慣性傳感器檢測到頭部運動到發射信號、到游戲引擎,說這個東西變了,然后到游戲引擎渲染新的畫面,新的畫面投影到屏幕上,屏幕上的畫面投影到眼睛里,整個鏈路延遲必須在20毫秒以后,否則會出現問題。比如說在安卓系統下,為什么手機盒子體驗不好的重要原因,就是因為安卓系統本身內部的電路就是長于20毫秒。
條件六,預測算法和插幀算法。我們玩游戲都知道,由于場景復雜度不同,有的時候很簡單,我就只有一個角色,這個時候預算是不同的。在復雜場景情況下,玩游戲會出現掉幀這個事情。用普通的顯示器來玩,只要不掉幀,從六十掉到超過三十以下,我們的肉眼感覺不是特別的明顯,大家覺得三四十幀很好。但是在VR里,掉一幀都不可以接受,只要掉幀畫面是卡的,你的頭就覺得非常眩暈。我們大腦是非常有趣的生物,遠的看掉多少幀都沒有事,但是掉一幀頭就受不了。
這六個條件加在一起,就達到60分。做到90分需要什么條件?條件七,6自由度的頭部位置跟蹤,你只能在一個軸上,你去做旋轉運動,但是你沒有辦法往下往下做平移,如果想實現6自由度在外部安置一個傳感器。我們來看一下3自由度的頭部運動,用戶的頭繞著一個圓點在旋轉,他沒有辦法做更多的動作。
這個是6自由度的狀況,說白了就是想怎么動就怎么動。往前往后都可以,這在虛擬區域里的交互是非常重要,這跟現實是一比一的。
條件八,6自由度的無線手柄。大家經常說VR里交互不統一,大家仔細看這個圖,你覺得是交互不統一嗎?交互相對來說是比較統一的,三大頭顯廠商同樣使用了6自由度的兩個無線手柄做VR,小的廠商,也會對標這樣的方案,因此,在***代的VR設備中,我們可以看到交互還是比較統一的,就是6自由度的兩個無線手柄方案。
條件九,房間級的定位跟蹤,這是HTC Vive獨有的功能。
這個是激光定位基站,我們把這兩個基站安裝在房間的兩個對角,頭顯連接到電腦,就可以實現在5×5米的空間內,360度無死角,想怎么動就怎么動的運動跟蹤,房間的大小是由用戶自己設定的,5×5米是***,如果你家里小,沒有關系,你可以自己設計房間大小,走著、站著、坐著都可以完成的。我們來一看房間級的是什么感覺?
針對不同的交互形式,美國的開發者做過一個統計,30%的用戶反饋,坐著的VR體驗是比較震撼的。70%的用戶反饋,站著不動覺得比較震撼。像HTC ViveVR體驗是90%的用戶覺得比較震撼。為什么自由移動式這么重要?人類的移動在VR中是非常糾結的問題,我們玩VR的時候,大部分是坐著玩的,我們遇到一個很嚴重的問題,我們在VR世界里要去探索,要去移動,這個時候,如果你在VR里是走的、跳的、跑的,你的視覺告訴這時候你在運動,由于你是坐著,他會提醒你會坐著的,這時候大腦會出現矛盾,他就會眩暈。只要是坐著玩的游戲,絕大部分是做瞬間移動,是不能慢慢走過去的,否則眩暈,速度很慢還是可以接受,稍微快一點,就會出現眩暈的問題。
只有HTC Vive房間級的VR體驗,在移動前提下,實現了現實世界和虛擬世界一比一的對應,一比一的對應可以給用戶帶來***程度的沉浸感,而且也不會導致眩暈。我用我自己的經歷,我自己是比較敏感的人,我是暈機的,我玩HTC Vive的時候,我最長時間玩了一個半小時,但是我沒有出現眩暈的問題,所以大家可以看到,這樣的一種,非常***的設備能夠給大家帶來的體驗確實是非常好。
終于到90分,真的很難。比如說像條件八,有一些創業公司做的非常好,把條件八做了,他的估值就已經上億,因此要把這么多全部做到,確實是一件比較難的事情,是一個比較適合大公司來做,而不是創業公司來做的。
這是VR紙盒的方案,唯一實現的大于80度視場角,HTC Vive這個設備目前可以實現最完整的體驗,大家也可以看到,評測上大概是這么做的。
我講一個比較重要的應用,這樣一個設備,是非常適合用在商用產品上,它也非常適合是用在家用產品上,商用是HTC Vive非常強的一點,由它的特性所決定的。我們來分析一下,現在商用VR行業的情況。
這個是很常見,大家在上場經常能看到,VR的蛋椅,大家也都吐槽它,說它眩暈,沒有回頭率等等,有一系列的問題,實際上這些問題,蛋椅這個形態是可好的,只是有的廠商在做蛋椅生意的時候,比較粗暴,不會去選擇對應蛋椅交互的內容。他坐在這兒,里面在跑、跳,這時候很多人玩就會出現眩暈的問題。椅子振動的方式跟游戲的方式不吻合,就把用戶振暈了。假設蛋椅振的方式跟里面的內容是完全吻合的,就不會出現眩暈。HTC Vive也支持蛋椅,我們用在蛋椅上是沒有問題的。
針對蛋椅的這些問題,很多人在很早之前就已經注意到,尤其他們看到了歐美一些項目之后受到了啟發,就開始使用光學動作捕捉的方案,比如說攝像頭,來做協作式的VR體驗,這樣的光學動作捕捉的方案是有挺多優點,首先,空間做的比較大。其次,在這個空間里可以做很多自定義,可以做你想要的形狀,但是它的問題比較明顯,首先它部署是比較復雜,需要專業的技術人員做布局。針對CP來說,針對這個場景,游戲開發者做定制化的開發,假設游戲開發者開發出來的游戲,在這個場景內沒有獲得成功,把它移到其他的平臺上,這個成本是比較大的,也增大了游戲開發者的風險,做這樣的設備,往往***方做內容,或者深度合作做內容,我覺得不是適合快速復制的方案,它有它非常好的優點,大家根據自己公司的業務形態做選擇。
HTC VIVE適合大規模復制特點,有非常大精度,可以實現大空間移動體驗,它即插即用,使用起來比較簡單。經過培訓以后,把它安裝起來,不會電腦的可以很容易的培訓,而且成本很低,頭顯幾千塊錢加上電腦幾千塊錢,加在一塊就是一萬多的價格。蛋椅比這個還要貴很多,蛋椅可能三五萬,這個比蛋椅還要便宜。而且是統一的交互方式,如果在這樣的線下體驗場景中,一個游戲開發團隊去做這個游戲他沒有做成功,可以把它改一下,變成2C的,把它放在內容分發平臺上,可以很快的移植到平臺上,因為交互是統一的,因此也能夠***程度的減少開發者的風險。開發者在這個年代面臨這么多風險的情況下,這樣平臺的選擇也是比較明智的,我們這個平臺上,已經聚集了非常多的開發者。這樣的模式,是非常適合做大規模復制,如果做線下體驗店,目前是很流行的一種方式。
線下體驗,大型的多人游戲,由于一些原因的影響,中國很多想要做線下大型游戲都是按照這樣的思路,把玩家放在同一個現實空間當中,用光學動捕的方案把大家捕捉到,在同一類游戲中做這個游戲。但是,這樣做,你會碰到有很多的問題。大家想,你戴上頭顯就看不到其他人,只能在虛擬世界中看到其他人,所以在現實當中是不是把大家放在一起是不重要的,只要大家在虛擬世界中是在一起的,他就是在一起的。HTC Vive做游戲的思路也非常簡單,也非常容易大規模的復制,我們每個玩家處在自己的空間中,通過網絡進行連接,讓他們在虛擬世界中同時處在一起,這個思路是HTC Vive未來的思路。下面有一個視頻,HTC Vive的游戲。
HTC針對中國市場有自己的內容分發平臺,叫做viveport,這個模式跟手機應用上的模式是一樣的,目前有幾十款的游戲在上面,會有游戲、影視等都在這個內容分發平臺上。
目前HTC Vive在線下跟第三方公司合作,去開VR有了空間,我們平臺上的內容已經在非常高速的增長。在3月15號到4月15號之間,做了VR內容開發者大會,國內有非常多的開發者給我們提交了內容。在4月26號,在北京有一個大會,我們會公布勝出游戲的名單,并且有很多的應用,一些游戲在4月26號上做一個展示。
我們的設備在4月5號已經開始發貨了,如果大家要買的話,可以在www.HTC Vive.com或者在天貓旗艦店買。
以上是51CTO.com記者從一線為您帶來的精彩現場報道。后續我們還有更加精彩的獨家報道,敬請關注。