神經(jīng)技術(shù)公司MindMaze近日公布了一個可使用腦電波進(jìn)行操控的虛擬現(xiàn)實游戲系統(tǒng)——MindLeap。它原先的專屬系統(tǒng)是為了在醫(yī)學(xué)領(lǐng)域的運用而開發(fā)的，MindLeap可以感應(yīng)到人類大腦與肌肉的活動，在虛擬現(xiàn)實與擴(kuò)增實境中使用腦波控制與動態(tài)捕捉鏡頭進(jìn)行游戲。

這家來自瑞士的公司趁國外軟件的Oculus所掀起的虛擬現(xiàn)實熱潮推出自己的產(chǎn)品，并在公布這款新產(chǎn)品的同時附帶宣布自己獲得了850萬美元的天使投資，而MindMaze公司將會把這筆資金用于醫(yī)學(xué)領(lǐng)域產(chǎn)品的開發(fā)，它的技術(shù)將可以幫助有神經(jīng)功能缺陷的患者更快地恢復(fù)健康。這回也是該公司首次將這款腦波控制虛擬現(xiàn)實裝置MindLeap應(yīng)用在游戲領(lǐng)域。

MindMaze方面表示，這個系統(tǒng)讓玩家們在玩一些早已熟悉的游戲時得到了一種新的體驗。裝有“神經(jīng)護(hù)目鏡”和3D動作攝像頭的頭戴式顯示器在幾個月后就可以使用。這款使用腦波操控解放雙手的虛擬現(xiàn)實設(shè)備可以在多個游戲平臺上使用，包括有Xbox與PlayStation(不過開發(fā)商沒有明確透露MindLeap究竟是應(yīng)用于PS4與Xbox One平臺還是更老一些的系統(tǒng))，iOS與安卓平臺也可適用。

MindLeap所使用的開發(fā)引擎將會在數(shù)個月后推出的軟件開發(fā)工具包中提供給游戲開發(fā)者們，而這個系統(tǒng)自身也將在今年推出。

我們在2015年的游戲開發(fā)者大會上與MindMaze公司進(jìn)行了一次會面，探討了神經(jīng)學(xué)技術(shù)如何能應(yīng)用到虛擬現(xiàn)實之中。

MindLeap頭戴式顯示器讓玩家可以進(jìn)行無手柄控制的虛擬現(xiàn)實游戲

從醫(yī)學(xué)設(shè)備到游戲設(shè)備

MindMaze的創(chuàng)始人兼首席執(zhí)行官泰杰·塔迪博士(Dr. Tej Tadi)表示，任何給定的動作都會讓大腦做出反應(yīng)。比如移動一下手臂，在這個動作進(jìn)行之前的毫秒之間，大腦就可以進(jìn)行這個指令的傳輸。能夠追蹤大腦與肌肉的運動，讓這間公司的設(shè)備可以收集到大腦傳輸給手臂讓它進(jìn)行移動的信號。據(jù)這位神經(jīng)生物學(xué)家介紹，人類的動作、運動以及看到和觸摸到的所有東西，全部都會整合到大腦的同一個地方，而MindMaze的設(shè)備就是從這個起源處開始追蹤信號的。

因此，把握信號從大腦的這個地方傳出的時機(jī)就是MindMaze公司技術(shù)的關(guān)鍵。塔迪博士介紹說，我們知道觸感傳遞到大腦的時間為20毫秒，而視覺傳遞到大腦的時間則為70毫秒。知道了這些固定的時間之后，“就能夠讓用戶的體驗變得完美”。

而MindLeap設(shè)備背后的創(chuàng)意則在于，它可以將腦波追蹤元素與現(xiàn)在的虛擬現(xiàn)實和擴(kuò)增實境技術(shù)結(jié)合起來，為游戲平臺的游戲操控創(chuàng)造出新的維度。

“現(xiàn)在，我們可以在它里面加入心理健康的元素。”塔迪博士說道，“你在訓(xùn)練大腦的同時也在監(jiān)視著大腦的活動。這讓我們可以在游戲黃總增加近一些全新的元素。內(nèi)容創(chuàng)造者們?nèi)缃窬陀辛撕芏嗫梢园l(fā)揮的空間，這些空間多到令人難以置信。”

MindLeap的動作感知攝像頭

MindLeap平臺

MindMaze公司利用了多個系統(tǒng)來建造這個游戲平臺——動作捕捉系統(tǒng)、大腦閱讀系統(tǒng)、集成平臺以及其他的一些高科技系統(tǒng)。與所有虛擬現(xiàn)實平臺一樣，頭戴式顯示器則是其中的核心部分。這個顯示器的正面裝備了動作捕捉攝像頭與深度傳感器，可以將虛擬現(xiàn)實與擴(kuò)增實境混合在一起。這個設(shè)備的原型看起來就像是安裝了眾多傳感器的無檐便帽，不過塔迪博士表示，最終版的設(shè)備將會更像是帶了護(hù)目鏡的頭巾。

這個平臺同時還裝備有一個可以傳輸3D動作捕捉數(shù)據(jù)的無線平臺，用以補(bǔ)充頭戴式顯示器的追蹤功能。它可以進(jìn)行頭部運動追蹤、全3D點云的身體動作追蹤以及骨架識別式的身體運動追蹤。塔迪博士稱這與微軟公司的Kinect體感系統(tǒng)有一些相似，不過他們針對原先的醫(yī)療應(yīng)用而做出一些調(diào)整。

“我們不得不從零開始打造它。你們已經(jīng)見識過Kinect了對不對?如果你們將Kinect放在病人的面前，離開它兩米之外就無效了，或者你坐在床鋪上，它也無法追蹤你的動作。”塔迪博士說道，“因此，我們不得不自己來設(shè)計它。”

他們最終的目標(biāo)是讓這個設(shè)備的外型更為小巧，并且可以在移動設(shè)備上發(fā)揮作用。

“這就需要有一個無線攝像頭，可以將3D動作捕捉的數(shù)據(jù)流傳輸?shù)侥愕闹悄苁謾C(jī)上。這樣你就能用給你的平板電腦設(shè)備來捕捉動作。”塔迪博士說道，“因此我們想要做到這一點，希望讓它能夠支持智能手機(jī)。這是我們前進(jìn)的方向，也是我們下一個將要實現(xiàn)的目標(biāo)。”

MindLeap的大腦追蹤技術(shù)在多用戶條件下的使用演示

該未來性技術(shù)的未來

在未來的六個月之內(nèi)，MindLeap的軟件開發(fā)工具包就將發(fā)布。它將包含有軟件、護(hù)目鏡以及各個攝像頭。不過MindMaze公司尚未公布軟件開發(fā)工具包的價格。

塔迪博士表示，MindLeap是首個將虛擬現(xiàn)實、擴(kuò)增實境、3D動作捕捉以及神經(jīng)學(xué)技術(shù)同時應(yīng)用于游戲領(lǐng)域的設(shè)備。

“你們現(xiàn)在已經(jīng)看到了這個設(shè)備所具有的能力。我們的下一步就是與內(nèi)容創(chuàng)造者和游戲開發(fā)商合作。我們將會向他們提供開發(fā)組件，這樣他們就可以為這個設(shè)備創(chuàng)造一些東西。”他解釋到，“我們想要做的是讓它成為一種開源設(shè)備。我們還想讓它成為一種跨平臺的無線設(shè)備。這樣人們就能以一種更為精準(zhǔn)的新方式來體驗游戲。”