VR 互動輸入方式 ,什麼才是最優的通用互動輸入?Bxzsy2016-02-05 09:13:22

手勢識別,簡單地說,這項技術是利用各類感測器對手部/手持工具的形態、位移等進行持續採集,每隔一段時間完成一次建模,形成一個模型資訊的序列幀,再將這些資訊序列轉換為對應的指令,用來控制實現某些操作。

近些年隨著各項技術的成熟和感測器的發展,手勢識別已經進入可用性階段,各類產品和解決方案也開始湧現,精準度與便攜程度也大大提高。從一開始的Dexmo 機械手還需要在手上穿戴額外的外骨骼裝置,到Leap Motion實現真正的解放雙手,人們越來越接近02年好萊塢電影《少數派報告》裡湯姆克魯斯飾演的精英探員所展示的酷炫的手勢操作的場景。

相比其他方式,手勢識別有這麼幾個優勢:

一、學習成本低。觸控式螢幕已經教育了一代使用者,在虛擬現實中,手勢互動可能比觸控式螢幕還要清晰直觀,非常接近我們一出生就習得的互動。其他如眼控或者操作杆,都需要學習。就拿操作杆來說,上面有多個按鍵,每個按鍵有著不同的功能,使用者與畫面中元素互動是多個按鍵的協調。作為初次體驗者,當你帶上頭顯,視野被虛擬畫面所覆蓋,看不到手中的操縱桿,只能按剛才記憶的按鍵位置、屬性來互動,可隨著時間的流逝,你可能忘了某個按鍵是幹什麼的,情急之下按錯了按鍵, game over。

二、靈活性高。手是人最靈巧的器官之一,除了觸控式螢幕上的點按和滑動,手能實現的互動還有很多,在虛擬現實中,手的大部分潛能會被釋放出來,更多的互動方式會湧現,點、抓、拍、彈、捏等等,給使用者帶來更多互動體驗。

三、實用性強。筆者在網上了解過幾家做虛擬現實手勢識別的公司,他們已經做出基本能用的產品了,並且在識別精確度上做的相當不錯。但像眼控和聲控,都還處於概念期,而操作杆這類外設路線,一向站在行業前頭的Oculus推遲了與Oculus Rift配套的觸感手柄Oculus Touch的釋出,整體綜合性能還是不如手勢識別。

當然,手勢識別也有自己的不足,比如操作時間長了手臂會累、兩手在身體兩側活動時會有識別不到的問題。但是綜合來看,手勢識別以其最接近人本能的操控習慣必將成為虛擬現實的最佳拍檔。

VR 互動輸入方式 ,什麼才是最優的通用互動輸入?alucrad2017-01-15 15:19:57

觸控板(手機)

鍵盤滑鼠

手柄

VR 互動輸入方式 ,什麼才是最優的通用互動輸入?Veni唐劍虹2017-03-11 11:46:02

選擇怎樣的VR互動方式,取決於你的VR APP是哪一型別的。

VR互動方式,簡單來說,分為用手柄,還是用手勢。

用手柄的,以Oculus,HTC Vive,PS VR,當然也包括小派,都是需要手柄的。

按手柄被作業系統直接或者間接識別到,有可以有些分類,不展開;

用手勢的,以LeapMotion,微軟 Kinect代表,優勢很明顯,但缺點是視場角小,互動簡單。

VR APP如果是遊戲類的,建議用手柄的互動;

如果是工具類應用,建議按作業系統主推的互動方式來做。微軟是PC,Google是移動。

當VR硬體普及率達到1000萬臺時,哪種方式是VR的互動方式,才能明確判斷出來。

VR 互動輸入方式 ,什麼才是最優的通用互動輸入?嘿喂啊2017-05-15 09:42:08

從目前來看,現有的這些VR中的互動方式或多或少都存在一些不足。

我們以最常見的主流的VR頭顯所使用的互動方式,即控制器說起,也就是我們通常所說的手柄。

先來說HTC Vive的兩個手柄吧。

很多人都在抱怨,HTC Vive的手柄設計簡直反人類,因為你總是無法找到真正自然的使用方式,並且在進入VR遊戲之後必然要有一個複雜的教學過程,告訴你各個按鍵都有啥作用。然而在進入遊戲之後,你會發現已經忘光了。

為了解決這一問題,有很多開發商將這一配件與其他外設融合,比如插在槍形外設上,以適配射擊遊戲。但玩其他遊戲時,還是要把手柄拿下來。好訊息是,Valve已經在研發新一代的控制器,在外觀和使用方式上有了很大的改善。

說到HTC Vive的互動方式,當然還要說一說Vive Tracker。HTC之所以推出這個跟蹤器,也是為了解決現有的外設不足的問題。但是這款產品距離“通用”還有很遠的距離,甚至可以說是越來越遠。比如有些公司將Vive Tracker安裝在汽車噴漆作業所使用的噴槍上,或者將其安裝在消防車的噴水槍上,甚至還有安裝在鞋上的。雖然這些結合了Vive Tracker的裝置能夠更逼真地模擬對應的使用場景,但這種“專用”的互動方式,離“通用”是越來越遠了。

我們期待著Valve新開發的控制器能夠儘快面世。

再來說說PSVR的互動方式。

PSVR可以搭配DualShock控制器,也就是PS4的手柄,這時與傳統遊戲的互動方式沒有什麼區別。或者搭配PS Move控制器,在使用PS Move時,相比HTC Vive的互動方式要更加死板單調,根本不符合具體場景的使用要求。

當然了,開發商們也在使用PS Move控制器開發不同的外設,比如槍、弓等等,無一例外,還是要面對上面提到的HTC Vive控制器所面臨的問題,越來越“專用”,而非“通用”。

接下來是Oculus Rift的互動方式。

在Oculus Touch控制器發售之前,玩家是需要使用XBOX的手柄來操作的,可以參考上文所說的PSVR使用DualShock手柄時的情景,各位可以腦補下。

之後在去年年底,Oculus Touch控制器終於正式發售。從現有的三款主流VR頭顯的互動方式來看,Oculus Touch控制器是比較理想的。由於半月形手柄可以環繞在手上,使用時會感覺比較自然。使用者會感覺這是自己肢體的一部分延伸。

當你以非常自然的方式握住Touch控制器時,每一個按鈕、搖桿都正好落在合適的手指下,你不需要思考就明白自己該如何操作了。以撿起一個虛擬物品為例,使用Touch控制器時,你所要動用的手指、所要使用的肌肉都跟你在現實中撿起一個虛擬物品差不多。你的大腦很自然的發出撿東西的指令,你不需要為控制器過多地修改動作。

而HTC Vive的手柄則在時刻提醒著你正在握著某個東西,你需要按下特定的開關來完成那些動作。

但Oculus Touch控制器的敗筆在於,使用了主動紅外光學定位,在跟蹤精度和穩定性等方面的效能落後於HTC Vive的控制器。Oculus也在近期頻繁釋出的軟體更新中對這一問題進行修正。而且從Oculus Touch釋出初期的售價來看,這款裝置的成本應該也是比較高的。

從現有的資料來看,更加自然的VR中互動方式,應該就是手勢識別了。比如搭載Leap Motion的手勢識別模組之後,可以對手部主要關節的動作進行跟蹤。雖然聽起來很炫酷,但要實際應用時還要面臨很多問題。

首先,要有適配的內容。在高通驍龍835移動平臺釋出時,曾經重點介紹了這款晶片對手勢識別的底層支援。但是,硬體雖然支援了,要開發運用手勢識別功能的應用,還需要VR內容開發商們從底層入手進行開發,而且與以往的VR內容相比難度要更高。

而且,並不是所有型別的VR內容都適合直接用手勢進行互動的。這裡仍以射擊遊戲為例,在朝敵人開槍時,你會更希望手上是一把真正存在的槍,還是空無一物,用手勢比出“biubiubiu”?

從現階段來看,比較現實的開發方向是,為某一型別的VR內容開發一款通用的控制器。比如說,為射擊遊戲開發一款通用的槍形控制器,然後去針對各個射擊遊戲去做適配。其他型別的內容也是如此。雖然在實際應用時還會遇到一些問題(遊戲中遇到其他形式的互動內容,需要放下槍,換上其他互動工具),但這是保證玩家體驗質量的折中方案了。

在手勢互動方面,希望廣大VR內容開發商們能夠儘快開發適配這一功能的應用,更好的互動方式還需要VR行業從業者們一起探索,讓我們拭目以待。

【VR網(

微訊號:hiavr-VR

)原創出品,轉載請註明出處】

VR 互動輸入方式 ,什麼才是最優的通用互動輸入?VRPinea2021-04-07 15:46:49

手柄、鍵盤、資料手套、腦機介面等,是目前廠商們提供的幾套VR輸入方案,但每個方案各有優劣,目前都還無法滿足玩家的輸入需求。

Daydream鍵盤:手柄結合虛擬鍵盤

這套方案最典型的案例是谷歌推出的Daydream鍵盤應用。它透過在VR環境中放置一個虛擬鍵盤讓使用者可以使用手柄進行輸入操作。其整體設計和普通QWERTY鍵盤差不多,不過將原本放置在右側的數字小鍵盤設計在了左側,而右側則是放置了大號的回退和回車鍵。

VR 互動輸入方式 ,什麼才是最優的通用互動輸入?

很多VR頭顯都自帶虛擬鍵盤,其使用方法正如普通鍵盤那般,只不過將敲打鍵盤的雙手,換成了游標鎖定。這種方式雖滿足了使用者輸入的需求,但玩家需要一個字母一個字母的點按,操作複雜且十分耗時。

Vive×羅技:VR鍵盤帶來真實觸感

因為過於繁瑣,逐字敲打式的輸入方式並沒有被市場所採納,但廠商們也從中得到靈感,2017年,知名外設廠商羅技與HTC vive合作,推出了一款VR鍵盤套件,包括:一臺羅技G系遊戲鍵盤、一個HTC vive的輔助定位器以及相關的配套軟體支援。

VR 互動輸入方式 ,什麼才是最優的通用互動輸入?

該套件透過vive的輔助定位器,可讓使用者在虛擬世界中,看到羅技G系鍵盤以及自己手部的虛擬模型。這樣使用者就能在虛擬世界中使用虛擬鍵盤,與現實環境進行同步輸入,重要的是能夠感受到真實的輸入觸感。

但是有得必有失,VR鍵盤帶來精確、高效輸入的同時,卻將使用者囚禁在實體鍵盤前,VR裝置追求的自由、動感的使用者體驗在VR鍵盤前大打折扣。

數字手套提供輸入新方案

不論真實的還是虛擬的鍵盤,人們似乎已經習慣了QWERTY的模式,在三維VR虛擬世界中,這種預設似乎是一種思維上的桎梏。如果不用鍵盤,是否能採取其他形式的輸入方式?

Tap Systems給出了他們的方案,他們推出一款泡沫指套裝置Tap,可透過藍芽與電腦、手機等裝置進行連線,把31種不同的敲打手勢變成字母和數字。玩家可以在任何物體表面進行敲打,每一種敲打方式都會發送特定的指令或者字元。

VR 互動輸入方式 ,什麼才是最優的通用互動輸入?

確實,相比於鍵盤輸入,這種敲打的輸入法更為方便,但也需要玩家花費一定的學習成本,畢竟這種敲打輸入和傳統鍵盤輸入法有著很大的不同。

最終極?腦機介面實現意念控制

上文所提及的輸入方式,都需要外設輔以支援。如何才能徹底釋放雙手,同時不束縛玩家的自由?是使用者和廠商都非常關心的問題。

VR 互動輸入方式 ,什麼才是最優的通用互動輸入?

初創公司Neurable希望透過簡單的意念控制,來幫助玩家解決VR中的輸入問題。一直以來,Neurable都在致力於為VR開發一種腦機控制系統。藉助搭載乾電極的頭顯,其能夠追蹤使用者的腦部活動,然後軟體將進行分析並判斷出使用者的意圖。

腦機結合從概念上講似乎是解決VR輸入的最佳方案,理想中的腦機介面或許能帶來真正全潛式VR,將沉浸式體驗推向極限。不過其可行性和安全性值得更耐心的等待。

手勢追蹤:大廠的情有獨鍾

近年來,在VR鍵盤不孚眾望,腦機介面未取得突破之前,諸多廠商紛紛圍繞手部追蹤技術做文章。

VR 互動輸入方式 ,什麼才是最優的通用互動輸入?

手勢識別為何受到諸多青睞?其一是學習成本低。手勢是自我們出生便習得的互動,可以想象如果你在VR世界中想抓住杯子,可真實做出的反應卻是按動手柄按鈕,那麼VR所謂的沉浸式體驗就會大打折扣。

VR 互動輸入方式 ,什麼才是最優的通用互動輸入?

其次,手勢的靈活性高。手是人最靈巧的器官之一,點、抓、拍、彈、捏等動作,無論是B端的實操培訓還是C端的3A遊戲,若是能實現與真實手部動作同步,那無疑是最佳的沉浸式體驗。

HoloLens最新的專利表明,其正在研究全息環境中使用虛擬手部,敲打虛擬鍵盤。透過精確的手部追蹤和深度感知,系統可以模擬使用者的動作,使用者將可以在空中或在隨意平面上鍵入文字,這就像在真正的鍵盤上打字一樣。

VR 互動輸入方式 ,什麼才是最優的通用互動輸入?

Oculus在其V12版本的更新中推出了手部追蹤功能,使用者可以透過雙手導航Home環境和特定的Oculus應用程式。

VR 互動輸入方式 ,什麼才是最優的通用互動輸入?

Facebook的研究人員開發出一種名為“pinchtype”的文字鍵入方式,這種模式主要採用了手部追蹤技術,介面類似於智慧九宮格,無疑加快了使用者在VR/AR中的文字輸入速度……

VR 互動輸入方式 ,什麼才是最優的通用互動輸入?

縱觀人機互動的發展歷程,我們可以發現其進化方向是向更加簡單、更加自然的互動方式轉變。從最初的“指”上談兵,到“談”笑風聲、甚至到後來的意念操控,輸入方式的演變趨於人性化,正朝著“人機合一”的目標奔去。

對於廠商來說,“以使用者為中心”是打造一切輸入裝置的核心。他們需要做到的是如何降低使用者的學習成本,改善使用者體驗。市場會證明,繁瑣複雜的外接或感測器都將被淘汰,而融合了AI、大資料的新一代輸入方式,將變得更聰明、更加善解人意。