0
| 本文作者： AI研習(xí)社-譯站 | 2020-08-28 11:46 |
字幕組雙語原文：盤點 | 電子游戲中的神經(jīng)技術(shù)與腦機接口應(yīng)用
英語原文：Neural Tech and Brain Computer Interfaces (BCI) in Video Games: An Overview
翻譯：雷鋒字幕組（聽風(fēng)1996、小哲）
最近，我參加了由 NeurotechX 舉辦的關(guān)于神經(jīng)技術(shù)和BCI（Brain Computer Interfaces或BMI，腦機接口）在游戲中的應(yīng)用的虛擬會議。
我已經(jīng)時不時地關(guān)注這個領(lǐng)域有一段時間了，因為BCI在我通向仿真點的路途中扮演了重要的角色，我在我的書《 The Simulation Hypothesis》中描述過。在這個理論點上，我們將能夠?qū)⒛M直接傳送到大腦中，并得到大腦的反應(yīng)，就像電影《黑客帝國》中一樣。
這次討論讓我想起了我第一次真正認(rèn)真地思考BCI的時候。那是在看80年代的電影 《Firefox》 時，克林特-伊斯特伍德（Clint Eastwood）飾演的間諜/飛行員的任務(wù)是從蘇聯(lián)偷取一架超級機密的飛機。這架噴氣機的特別之處在于，它可以對飛行員的心理指令做出反應(yīng)；它的想法在于，如果你能切斷哪怕是一秒（或許是幾毫秒）的反應(yīng)時間，那么這架戰(zhàn)斗機就會比北約的戰(zhàn)斗機更有優(yōu)勢，因為北約的戰(zhàn)斗機仍然使用手持控制。當(dāng)伊斯特伍德最終偷走噴氣式飛機時，有一個問題是，它不會對他的命令做出反應(yīng)--除非他用以俄羅斯人的方式思考!
雖然我們還沒有達到黑客帝國或火狐級別的BCI，但一些有趣的公司的介紹有助于闡明該行業(yè)的現(xiàn)狀和方法。
我注意到的第一件事是，所有這些公司都在研究無創(chuàng)性的神經(jīng)接口。這與埃隆-馬斯克（Elon Musk）資助的Neuralink公司形成鮮明對比，該公司正在創(chuàng)造一種芯片，可以通過在頭骨上鉆一個小孔植入大腦。這款備受推崇的芯片承諾具有神奇的特色功能--包括刺激大腦的興奮愉悅中心，并通過人工智能提高人類的智力。不過首批版本將針對那些有腦部疾病的人。對我個人而言，我不知道有哪個玩家現(xiàn)在準(zhǔn)備在自己的腦袋上鉆洞，但這種情況可能會在不久的將來發(fā)生改變!
圖1：在黑客帝國中，人類可以通過一個連接端口和線路進去虛擬(世界)
更為重要的是，與《黑客帝國》中與大腦完全雙向連接不同，這些公司大多專注于通過大腦（或生物反饋或肌肉）接口獲得玩家的輸入，不過其中一家公司也有意讓用戶接收到身體的信號，以獲得更沉浸式的體驗。
在虛擬會議的其中兩個研討會上,神經(jīng)游戲技術(shù)領(lǐng)域的六個公司展出了非常有趣的東西:
維爾福(Valve) — 第一個展示是由麥克.阿賓得( Mike Abinder)展出, 麥克阿賓得是一個華盛頓大學(xué)的實驗心理學(xué)家, 他在維爾福集團致力于研究與腦機接口和游戲相關(guān)的一些神秘的東西.關(guān)于腦機接口技術(shù)如何題提升游戲體驗,他給出了一個基本的概述,雖然阿賓德對維爾福公司在這個領(lǐng)域中做的研究含糊其辭，但他確實提出了一些很好的論點，即可以收集玩家在玩游戲時的經(jīng)驗和情緒的實時數(shù)據(jù)，這可能會引發(fā)一個全新的適應(yīng)性游戲體驗.關(guān)于"我們可以測量的東西"他給出了一個概述 — 主要是不同排列的腦電信號(EEG),他的專業(yè)技術(shù)術(shù)語就是我們可以檢測對于警戒,學(xué)習(xí),記憶等不同任務(wù)的腦電信號,我從中得到的基本想法是，當(dāng)玩家在做不同的事情時，測量大腦發(fā)出的腦電圖信號，比如競爭游戲、策略游戲等等，測量諸如“期望、喚醒和支配”之類的東西。
圖2: Brainattach的新型腦電(EEG)設(shè)備,這款設(shè)備被吹噓為生物生物游戲軟件
Brainattach---第二個名為"在游戲中引入生存本能"的討論來自于Brainattach的Maciej Rudzinski. 現(xiàn)在主要考慮硬件,Brainattach已經(jīng)研制了一種專為游戲玩家設(shè)計的個人腦電信號設(shè)備,這種設(shè)備被稱為"生物游戲軟件", 基本上, 這是一種生物反饋裝置，可以通過“同步”你的情緒和心理狀態(tài)來提高你的游戲表現(xiàn)。生物反饋已經(jīng)以多種形式存在了一段時間了 — 考慮一下，如果你在呼吸時測量你的心率，看看它是如何變化的，那么你基本上就是這樣做的。生物反饋。BrainAttach利用其臨床級設(shè)備的腦電圖信號來實現(xiàn)這一點。類似于Valve他的演講沒有很多關(guān)于他的設(shè)備的內(nèi)容，而是關(guān)于游戲玩家和游戲開發(fā)者使用腦電圖信號和其他生物反饋來維持“流動狀態(tài)”的方式，這種狀態(tài)介于“挫敗感”和“無聊”之間，使游戲變得有趣。他們的游戲設(shè)備還沒有開放, 但是你可以注冊:www.brainattach.com.
圖3：完全沉浸式的觸覺Teslasuit提供了完全的沉浸感受
Teslasuit—?第一天最有趣的演講來自Teslasuit公司的Dmitri Mikhalchuk，這家公司從技術(shù)上講根本不是一個BCI—除非你把 "大腦 "這個詞換成 "身體"。 對于一個BBI來說。Teslasuit是一款完全沉浸式的觸覺服飾，與VR頭顯結(jié)合后，不僅會讓你沉浸在一個世界里，還要通過刺激身體的不同部位讓你感受游戲的樂趣。Teslasuit在2018年和2019年的CES上首次亮相并引起了轟動，它看起來更像是直接從《Ready Player One》中的出現(xiàn)的東西。它以這樣的方式進行工作，它向你身體的不同部位發(fā)出電脈沖，并使用和先進的動作捕捉系統(tǒng)和生物識別技術(shù)來查看你正在做什么作為輸入。據(jù)我所知，它并沒有嚴(yán)格使用腦電圖或大腦接口，但這個地方似乎與生物識別反饋融合在一起。
除了全套衣服，他們還推出了高保真觸覺手套，讓你在虛擬現(xiàn)實中感受你所看到的物體，結(jié)合Luminas XR眼鏡，讓你獲得完全沉浸式的體驗。例如，該公司做的賽車演示，你不僅可以看到你移動時的道路，還可以感受到身體不同部位的g-forces。2019年，為了展示他們的潛質(zhì)能力，他們演示了 "非接觸式擒抱 "或 "觸覺擒抱 "的演示，他們讓一名橄欖球運動員用動作捕捉在模擬擒抱另一名球員。雖然動作捕捉一般都是用來讓動畫更逼真，但他們真的很想知道在擒抱過程中，身體的哪些部位會與對手接觸?，F(xiàn)在，任何穿上Teslasuit的人都可以體驗到被職業(yè)橄欖球運動員擒抱的感覺! 雖然具有創(chuàng)新性，但我想我還是算了，因為那些橄欖球運動員看起來很強壯! 但你可以看到可以打造的游戲應(yīng)用。這套衣服最初是在Kickstarter上眾籌，價格是幾千美元--在這里閱讀更多關(guān)于它的信息。
在第二場會議中，又有三家公司發(fā)表了演講，也更清楚地說明了行業(yè)現(xiàn)狀以及在更廣泛使用BCI方面所面臨的一些挑戰(zhàn)。
圖4：今天的游戲輸入（控制器）vs 未來的游戲輸入，大腦和生物統(tǒng)計，來自Flying Mollusk of Erin Reynolds。
Flying Mollusk--Flying mollusk的創(chuàng)始人兼CEO Erin Reynolds進行了演講，從游戲開發(fā)者的角度介紹了公司的歷史以及BCI和生物反饋的現(xiàn)狀。她打造了一個基于生物反饋版本的游戲作為她的一個學(xué)術(shù)項目，畢業(yè)后創(chuàng)辦了Flying Mollusk公司，并打造了Nevermind，在幾年后發(fā)布在steam上。最初是測量心率和其他生物反饋，并利用這些反饋來增加或減少玩家體驗到的 "壓力 "速度--這正是Valve公司的Mike Abinder所說的 "動態(tài)適應(yīng)性"。之后，她還加入了情感情緒SDK，它可以幫助游戲開發(fā)者利用AI技術(shù)檢測玩家的情緒。原來有一整個行業(yè)的公司都在使用面部識別技術(shù)來觀察用戶的臉部，并檢測他們是高興還是悲傷或憤怒，這被稱為情感API或情感計算。她并不清楚在她的游戲中使用了多少實際的Brain界面，但她肯定提到腦電圖和大腦輸入是未來發(fā)展的一個領(lǐng)域。Erin還指出了BCI在游戲中的一些障礙--即沒有足夠的傳感器，以及需要更好的游戲開發(fā)者工具。點擊這里了解更多關(guān)于Flying Mollusk和他們的游戲Nevermind的信息。
圖5：BCI的硬件演進，來自Neurable的Adam Molnar
Neurable—下一個鏡頭是來自Neurable公司的Adam Molnar，這家公司曾有過令人印象深刻的演示，僅通過思想就能在VR中移動物體。Neurable是從密歇根大學(xué)的研究中發(fā)展起來的，是一家位于波士頓的公司，他們將神經(jīng)界面帶入VR世界，改裝后的VR頭盔可以檢測腦電信號。但這并不是他們使用的全部，他們還使用眼球追蹤信息和其他信息，不過重點是不同的腦電信號處理。Adam概述了BCI用于游戲的歷史，以及剩下的道路。這包括像 Mattel公司的星球大戰(zhàn)原力訓(xùn)練器這樣的設(shè)備，它讓你感覺自己真的在使用原力。
圖6：Adam Molnar講述了BCI在游戲中的歷史，包括《星球大戰(zhàn)》原力訓(xùn)練器!
Adam和其他許多小組成員一樣，認(rèn)為心智界面是游戲界面的下一個可行的邏輯步驟，游戲界面從打字命令到操縱桿/鼠標(biāo)，再到手勢和觸摸控制。Adam還概述了他們的歷史發(fā)展，從實驗室里的濕式傳感器，到可以連接到VR的干式傳感器，再到未來將包括集成傳感器。Adam指出BCI作為一個行業(yè)的危險之一是設(shè)定過高的期望值。當(dāng)人們看到幾年前的Neurable演示時，很容易就認(rèn)為BCI真的來了—當(dāng)時還有很多工作要做。這種 "崇高的期望 "實際上可能是一個問題，因為現(xiàn)實情況很少與這些演示的炒作相匹配。換句話說，我們很容易認(rèn)為我們已經(jīng)達到了像火狐那樣的讀心術(shù)，但我們確實還沒有達到，整個BCI領(lǐng)域可以被貼上 "失去潛質(zhì)能力 "和/或 "啞巴 "的標(biāo)簽。Neurable的目標(biāo)是 "永遠的BCI"--請看這里。
圖7：Brink仿生學(xué)手套能感知動作，給游戲玩家?guī)韮?yōu)勢!
Brink Bionics--最后的演示就像把火狐做成了一個具體的用例和使它應(yīng)用到非常具體的游戲中，由Brink Bionics的Erik Lloyd做的。他們宣稱，在需要快速反應(yīng)和手眼協(xié)調(diào)的游戲中，比如第一人稱射擊游戲和類似的動作游戲，信號從大腦到手再到鼠標(biāo)/鍵盤/操縱桿/輸入設(shè)備所需的幾毫秒時間，就能起到?jīng)Q定性作用。他們的技術(shù)可以裝在無指手套中，可以檢測到神經(jīng)中的小電脈沖，導(dǎo)致肌肉抽搐，從而表明用戶決定在游戲中執(zhí)行什么命令。不過，他們的產(chǎn)品不需要使用鼠標(biāo)，而是可以將肌肉輸入直接轉(zhuǎn)化為現(xiàn)有游戲中的命令！這也許是最實用的產(chǎn)品。這也許是此次展出的產(chǎn)品中最實用的一種--雖然有新的硬件，但你不必對現(xiàn)有的游戲進行重新編程，因為他們將肌肉信號轉(zhuǎn)換為鼠標(biāo)或其他控制器的現(xiàn)有命令。在這里了解更多信息。
圖8：Erik Lloyd談BCI今天與未來的狀態(tài)
Erik還談到了神經(jīng)技術(shù)在游戲中的發(fā)展，并指出今天我們現(xiàn)在正處于第一階段--游戲向用戶提供刺激，然后我們測量結(jié)果（或用戶的反應(yīng)），然后將其映射到一些已知的反應(yīng)。他稱之為 "依賴性 "BCI，而最終將出現(xiàn) "獨立性 "BCI，它不需要向用戶呈現(xiàn)一個場景（就像VR一樣），但將允許機器直接接收我們的任何想法，我們可以使用這些想法來控制機器。
Erik對 "依賴型 "和 "獨立型 "的BCI的區(qū)分，或許是結(jié)束當(dāng)今行業(yè)現(xiàn)狀討論的好地方。你會注意到，我并不是在VR或AR中或通過BCI觀看會議，而只是在Youtube上觀看。
今天的BCI使用了生物反饋（心率、皮膚/壓力反應(yīng)）、情感計算（基于面部識別的情感）、腦電信號檢測（而且有很多關(guān)于解釋這些信號的不同方法的研究）、眼球跟蹤（用于VR內(nèi)部的意圖）、動作捕捉（用于teslasuit）和電脈沖模擬觸摸的組合。雖然行業(yè)現(xiàn)狀已經(jīng)不再只是研究實驗室，但要想從你的頭腦中直接控制任何游戲，還有很長的路要走。也許用不了多久，這些技術(shù)的影響就會超越游戲--誰知道可能會有一個像火狐一樣的戰(zhàn)斗機在路上呢!
Rizwan Virk畢業(yè)于麻省理工學(xué)院和斯坦福大學(xué)，是一位未來學(xué)家、企業(yè)家、風(fēng)險投資家、視頻游戲先驅(qū)、獨立電影制作人和暢銷書作家。他的著作包括《模擬假說》：一個麻省理工學(xué)院的計算機科學(xué)家展示了為什么人工智能、量子物理學(xué)和東方神秘主義者一致認(rèn)為我們在電子游戲中，以及《你在商學(xué)院學(xué)不到的創(chuàng)業(yè)神話和模型》。他是Play Labs @ MIT的創(chuàng)始人，也是包括Griffin Gaming Partners在內(nèi)的多家風(fēng)險投資公司的風(fēng)險合伙人。訪問他的網(wǎng)站：www.zenentrepreneur.com
雷鋒字幕組是一個由 AI 愛好者組成的翻譯團隊，匯聚五百多位志愿者的力量，分享最新的海外AI資訊，交流關(guān)于人工智能技術(shù)領(lǐng)域的行業(yè)變革與技術(shù)創(chuàng)新的見解。
團隊成員有大數(shù)據(jù)專家、算法工程師、圖像處理工程師、產(chǎn)品經(jīng)理、產(chǎn)品運營、IT咨詢?nèi)?、在校師生；志愿者們來自IBM、AVL、Adobe、阿里、百度等知名企業(yè)，北大、清華、港大、中科院、南卡羅萊納大學(xué)、早稻田大學(xué)等海內(nèi)外高校研究所。
如果，你也是位熱愛分享的AI愛好者。歡迎與雷鋒字幕組一起，學(xué)習(xí)新知，分享成長。
雷鋒網(wǎng)雷鋒網(wǎng)
雷峰網(wǎng)版權(quán)文章，未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。
