除了手勢(shì)控制弊端之外，對(duì)于虛擬現(xiàn)實(shí)最尷尬的事情之一莫過(guò)于你看不見(jiàn)自己的手。當(dāng)你戴上虛擬現(xiàn)實(shí)設(shè)備之后，你置身于一個(gè)看似無(wú)比真實(shí)的世界，讓你感到身臨其境，但當(dāng)你伸手試圖抓取眼前某物或是想夠到某物的時(shí)候，那里確實(shí)什么都不存在，這就瞬間將營(yíng)造的氣氛給打破了。

　　一支微軟研發(fā)小組希望通過(guò)名為Handpose的手勢(shì)追蹤技術(shù)，能夠幫助人類與虛擬環(huán)境的交互更加自然，且不僅限于VR或者AR領(lǐng)域，甚至是人與計(jì)算機(jī)或者其他連接設(shè)備之間的交互。

　　在位于英國(guó)劍橋的微軟研究院，設(shè)計(jì)技術(shù)員David Sweeney告訴記者：“現(xiàn)實(shí)始于我們與物理世界的交互，而交互的主要途徑是我們的雙手。這是我們習(xí)以為常的認(rèn)知，我們甚至不去思考這個(gè)動(dòng)作，一切都是出于人的直覺(jué)。”

　　Handpose項(xiàng)目開(kāi)始于2014年，這一項(xiàng)目的計(jì)算機(jī)視覺(jué)進(jìn)展于今年早些時(shí)候被揭開(kāi)面紗，由于該項(xiàng)目還在研究階段，因此微軟邀請(qǐng)記者到現(xiàn)場(chǎng)體驗(yàn)。

　　記者在現(xiàn)實(shí)世界中移動(dòng)雙手的時(shí)候能看到眼前屏幕上被同步復(fù)制的雙手，能夠通過(guò)現(xiàn)實(shí)的抓取來(lái)拿到Unity引擎所創(chuàng)造的虛擬物件。Sweeney總結(jié)道：“這一項(xiàng)目通過(guò)獲取現(xiàn)實(shí)中的深度信息進(jìn)而映射出雙手。”這跟Leap Motion有相似的設(shè)計(jì)思路。

　　Kinect傳感器捕獲深度信息，Handpose軟件將信息轉(zhuǎn)換成數(shù)據(jù)點(diǎn)陣，從而還原出手的網(wǎng)狀模型（有多種不同的模型用于適應(yīng)不同大小的手）。本質(zhì)上來(lái)說(shuō)，每一個(gè)數(shù)據(jù)點(diǎn)被定位到手形模型表面，因此它能夠模擬出與你現(xiàn)實(shí)中手如出一轍的動(dòng)作。它還通過(guò)機(jī)器學(xué)習(xí)來(lái)使得模擬運(yùn)動(dòng)轉(zhuǎn)換成實(shí)際的動(dòng)作。

　　當(dāng)記者使用該技術(shù)的時(shí)候，遇到了一些相當(dāng)嚴(yán)重的錯(cuò)誤，比如當(dāng)傳感器前有不止一個(gè)人的時(shí)候或是記者試圖讓雙手靠近的時(shí)候。但正常使用過(guò)程中，手的每一個(gè)細(xì)節(jié)都被很完美地捕捉并映射在屏幕上了。在這里有一個(gè)手勢(shì)追蹤的主要難題：我們的雙手由很多可移動(dòng)部分組成，每一個(gè)細(xì)小的移動(dòng)都該被視為一個(gè)自然的動(dòng)作。

　　這項(xiàng)技術(shù)使VR更加擬真。視頻中記者使用Oculus Rift頭戴設(shè)備配合Handpose技術(shù)，可以看到自己的雙手戳拽一只兔子，使其像萬(wàn)用黏土一樣塌陷了，這類似于一系列虛擬控制器模擬按鍵所產(chǎn)生的交互信息。

　　相比于觸覺(jué)設(shè)備如Oculus Touch或是HTC Vive控制器，使用自己雙手的優(yōu)勢(shì)在于一切移動(dòng)都是憑借直覺(jué)，哪怕從未接觸過(guò)虛擬現(xiàn)實(shí)的人也能輕松上手。

　　Sweeney說(shuō)到：“人類的雙手是通過(guò)上百萬(wàn)年進(jìn)化而來(lái)的，它們是如此精妙，假如讓裝電池的設(shè)備取代人類的雙手，這該是多愚蠢的事情啊。”

　　有趣的是，Sweeney認(rèn)為在你與虛擬現(xiàn)實(shí)交互的時(shí)候觸覺(jué)反饋（能夠感知你所觸摸到的物體）是不需要的，哪怕游戲中有虛擬物理對(duì)象，就像上面視頻中的兔子演示，只存在虛擬現(xiàn)實(shí)中的反饋。Sweeney說(shuō)：“在心理上，我能通過(guò)虛擬交互來(lái)‘感受到’物理層面的互動(dòng)。”雖然聽(tīng)起來(lái)有些荒誕，但這一點(diǎn)在記者的實(shí)際體驗(yàn)中得到了驗(yàn)證。

　　Handpose團(tuán)隊(duì)對(duì)該項(xiàng)目的進(jìn)展、速度以及效率感到自豪。該軟件被設(shè)計(jì)成調(diào)用最小化的計(jì)算資源，并且僅運(yùn)行于CPU之上，因此你無(wú)需擔(dān)心顯卡無(wú)法駕馭創(chuàng)造出來(lái)的豐富的虛擬世界。

　　Sweeney還沒(méi)辦法明確說(shuō)明該項(xiàng)目何時(shí)對(duì)公眾開(kāi)放。但是他暗示到軟件將不僅僅運(yùn)行于VR或AR設(shè)備，而是讓你的雙手可以作為“低功耗控制器”與任意物聯(lián)網(wǎng)設(shè)備交互。想象一下，控制燈的開(kāi)與關(guān)只需要用手輕輕一指，大概還需要與聲音識(shí)別一塊兒使用。
來(lái)源：Victoria Turk

更多原創(chuàng)設(shè)計(jì)盡在高品聚