在位于加利福尼亞州圣何塞的O??culus Connect 6期間，馬克·扎克伯格(Mark Zuckerberg)宣布，Oculus Quest無(wú)需任何手動(dòng)控制器即可進(jìn)行手和手指跟蹤，當(dāng)然，我迫不及待地想嘗試一下。我很高興看到這將如何改變當(dāng)前和未來(lái)的沉浸式體驗(yàn)，并可能使VR更加接近大眾采用。

最后，我并沒(méi)有失望。無(wú)需任何類(lèi)型的附加硬件即可在Quest上進(jìn)行手動(dòng)跟蹤顯示了Quest和VR整體未來(lái)的廣闊前景。這并不完美，但這絕對(duì)是朝正確方向邁出的一步。

手部追蹤最初是作為Facebook Reality Labs的一項(xiàng)實(shí)驗(yàn)研究項(xiàng)目開(kāi)始的。他們的計(jì)算機(jī)視覺(jué)團(tuán)隊(duì)提出了一種新的方法，即僅使用Quest配備的單色攝像頭，即可使用深度學(xué)習(xí)來(lái)了解手指的位置，而無(wú)需使用主動(dòng)式深度感應(yīng)攝像頭，附加傳感器或附加處理器。該技術(shù)可以逼近您的手的形狀，并創(chuàng)建一組3D點(diǎn)以準(zhǔn)確表示您在VR中的手和手指運(yùn)動(dòng)。

基本上，Quest會(huì)使用其內(nèi)置的深度傳感器和攝像頭來(lái)跟蹤每個(gè)指關(guān)節(jié)和手的表面，然后使用這些數(shù)據(jù)來(lái)反映VR環(huán)境中的這些運(yùn)動(dòng)。

為了演示該技術(shù)的工作原理，F(xiàn)acebook 在Oculus Connect 6演示區(qū)為與會(huì)者提供了一個(gè)動(dòng)手演示，供他們使用VR游戲Elixir進(jìn)行試用。

優(yōu)點(diǎn)

戴上Quest頭戴式耳機(jī)的那一刻，您的手即刻就在您面前。Quest能夠快速校準(zhǔn)我的手指并使它們?cè)谔摂M環(huán)境中栩栩如生，給我留下了深刻的印象。您自然的反應(yīng)就是開(kāi)始向各個(gè)方向移動(dòng)您的手，在您面前揮舞它們，握緊拳頭，然后張開(kāi)手指，以便真正看到準(zhǔn)確的跟蹤。

深度傳感器在讀取您的手和臉之間的距離時(shí)效果很好。這實(shí)際上就是您在Elixir中的互動(dòng)方式。游戲?qū)⒛鷰胍粋€(gè)充滿超現(xiàn)實(shí)世界的實(shí)驗(yàn)室，里面散布著綠色的液體，可怕的聲音效果和奇怪的木制機(jī)器。類(lèi)似于您在《哈利·波特》電影中看到的美學(xué)。語(yǔ)音會(huì)引導(dǎo)您并鼓勵(lì)您與分散在整個(gè)實(shí)驗(yàn)室中的各種對(duì)象進(jìn)行交互。與會(huì)者可以戳戳和刺戳從怪異的大鍋中浮出的氣泡，在燃燒著的蠟燭上搖動(dòng)他們的雙手，甚至將手指浸入一種奇怪的粘液中，并觀察他們的手的顏色改變顏色。

當(dāng)然，我要做的第一件事是戳動(dòng)浮動(dòng)的眼球。當(dāng)您這樣做時(shí)，我不會(huì)破壞會(huì)發(fā)生的事情，但是我們只能說(shuō)這是您不應(yīng)激起的一件事情。

我注意到的另一個(gè)令人印象深刻的元素是跟蹤在既定視野之外的準(zhǔn)確性。當(dāng)我將手伸出耳機(jī)的視野之外并帶回外圍視野時(shí)，我的虛擬手又將FOV準(zhǔn)確地重新進(jìn)入了他們離開(kāi)的位置。沒(méi)有突然出現(xiàn)或滯后;而是無(wú)縫過(guò)渡，無(wú)論您身在何處，都能讓您沉浸在體驗(yàn)中。

缺點(diǎn)

話雖如此，我確實(shí)發(fā)現(xiàn)真正快速的移動(dòng)導(dǎo)致耳機(jī)很容易失去手部追蹤功能。手指和手可能會(huì)出現(xiàn)一些延遲問(wèn)題，或者耳機(jī)將完全失去跟蹤，從而導(dǎo)致VR指針在嘗試重新校準(zhǔn)時(shí)向后翻轉(zhuǎn)或向后旋轉(zhuǎn)。

盡管只花了幾秒鐘即可重新校準(zhǔn)，但足以讓我沉浸其中，但我發(fā)現(xiàn)它有些令人沮喪。

因此，對(duì)于Beat Saber或備受期待的Pistol Whip等快節(jié)奏游戲而言，手動(dòng)跟蹤可能不是最好的方法，但這可能是與社交VR體驗(yàn)進(jìn)行交互的好方法，例如即將推出的Facebook Horizo??n，AltSpaceVR，或不需要快速移動(dòng)的其他各種VR體驗(yàn)，例如Richie的Plank Experience或PokerStars VR。

至于諸如拉動(dòng)菜單或在虛擬環(huán)境中傳送等動(dòng)作，諸如Microsoft HoloLens或Leap Motion所使用的手勢(shì)之類(lèi)的手勢(shì)可能會(huì)解決。現(xiàn)有的幾種VR體驗(yàn)都具有自己獨(dú)特的手勢(shì)激活系統(tǒng)，例如流行的迷你游戲社交平臺(tái)Rec Room，該平臺(tái)允許用戶通過(guò)舉起雙手并查看虛擬的內(nèi)容來(lái)彈出各種菜單和設(shè)置頁(yè)面?？础?/p>

當(dāng)然，F(xiàn)acebook團(tuán)隊(duì)可能已經(jīng)對(duì)此做出了解釋。如果您曾經(jīng)使用過(guò)Facebook即將淘汰的Facebook Spaces平臺(tái)，那么您就會(huì)知道，用戶可以通過(guò)將手翻過(guò)來(lái)并觸摸手腕來(lái)拉出一個(gè)小菜單。這種被動(dòng)的觸覺(jué)體驗(yàn)可以輕松地出現(xiàn)在Quest中-順便說(shuō)一句，可以假設(shè)您的手臂通過(guò)輕敲來(lái)引入其他控制器選項(xiàng)。

整體

我對(duì)Quest上的手部追蹤及其打開(kāi)的所有可能性感到非常興奮。但是最后，我實(shí)際上感到有點(diǎn)不舒服，因?yàn)槭种袥](méi)有控制器來(lái)操縱虛擬環(huán)境中的對(duì)象，而且我發(fā)現(xiàn)自己在觸摸對(duì)象時(shí)會(huì)丟失觸覺(jué)反饋。

像其他任何東西一樣，這也是您也需要使用的功能。觸摸或抓住東西時(shí)沒(méi)有任何感覺(jué)是一種奇怪的感覺(jué)，一些專(zhuān)用的Leap Motion和HoloLens用戶也已經(jīng)使用過(guò)。

不要誤會(huì)我的意思，我一直認(rèn)為VR體驗(yàn)應(yīng)該需要更少的硬件，但是現(xiàn)在我們就在這里，我想也許我們確實(shí)需要控制器。不是所有的經(jīng)驗(yàn)，但絕對(duì)是某些。

我確實(shí)認(rèn)識(shí)到手部追蹤的潛力，并且我可以看到它在我們處理工作培訓(xùn)，教育，，社交等各個(gè)方面的過(guò)程中起著非常重要的作用。

Berg繼續(xù)說(shuō)，參加Oculus Connect 6的社交VR影響者Navah Berg告訴VRScout：“手部追蹤就像是把訓(xùn)練輪移開(kāi)了，” Berg繼續(xù)說(shuō)道，“移除控制器使體驗(yàn)變得更加真實(shí)，因?yàn)闊o(wú)需移動(dòng)設(shè)備即可自由移動(dòng)您的雙手帶給您自由和終極現(xiàn)實(shí)的感覺(jué)。”

僅僅戴上頭戴耳機(jī)就是一種更輕松，更便捷的體驗(yàn)，并且隨著硬件的發(fā)展，F(xiàn)acebook已將自己定位為完全落后于VR和AR的公司。Oculus Quest無(wú)疑將自己定位為面向大眾的頭戴式耳機(jī)，這最終將導(dǎo)致VR技術(shù)在全球的采用。

自O(shè)culus的消費(fèi)產(chǎn)品以來(lái)，我們已經(jīng)走了很長(zhǎng)一段路。當(dāng)Oculus Rift首次出貨時(shí)，它們并沒(méi)有配備運(yùn)動(dòng)控件—只是一個(gè)Xbox One游戲控制器。僅僅幾個(gè)月后，Rift所有者便可以通過(guò)Oculus Touch將他們的手帶入他們的VR體驗(yàn)中。

就在六個(gè)月前，享受VR體驗(yàn)意味著要獲得頭戴式耳機(jī)，傳感器，手動(dòng)控制器和一臺(tái)昂貴的游戲級(jí)PC?，F(xiàn)在，您只需要一個(gè)耳機(jī)和足夠的空間就不會(huì)踢您的寵物。對(duì)于VR來(lái)說(shuō)，這是一個(gè)很大的飛躍，而手部追蹤則將我們推向了更遠(yuǎn)。但是，在當(dāng)前狀態(tài)下，需要進(jìn)行更多調(diào)整。但是我們到了那里。哦，我們到了那里。