399美元的腦機接口面世,我們距離《刀劍神域》還有多遠(yuǎn)?
今日,中國從事腦機接口(BCI)10余年的研發(fā)商博??敌纪瓿蛇^億元B輪融資,紅杉中國獨家領(lǐng)投。
?
腦機接口現(xiàn)已成為當(dāng)今最熱門的話題,造火箭的馬斯克、Facebook的小扎都是其狂熱粉絲。
?
腦機接口不只是深得巨頭看好,越來越多的初創(chuàng)公司也開始從事相關(guān)研究,來自法國的神經(jīng)技術(shù)初創(chuàng)公司NextMind便是其中之一。

圖源:NextMind
?
NextMind創(chuàng)始人Sid Kouider此前是認(rèn)知神經(jīng)科學(xué)教授,積累了大量有關(guān)無創(chuàng)解碼神經(jīng)信號的專業(yè)知識,希望開發(fā)出能通過視覺皮層視野解碼視覺意識,進行腦機交互的產(chǎn)品,于是成立了NextMind。
?
NextMind曾在CES上展出腦機接口設(shè)備,引發(fā)大量關(guān)注。今天,陀螺君想要帶大家體驗的便是NextMind這款腦機接口設(shè)備,借這款產(chǎn)品帶大家開啟腦機接口的大門。

?
?
售價399美元,不足巴掌大小的腦機接口設(shè)備NextMind有何特別之處?
?
?
腦機接口設(shè)備NextMind裝置非常簡單,小巧簡潔,易安裝,易操作,僅包含三個部分:傳感器、頭帶以及USB電纜,其核心是傳感器,也就是進行腦機連接的接口。
?

圖源:NextMind
?
NextMind傳感器外形設(shè)計與蜘蛛類似,通體黑色,由一個包含傳感器電路的圓形主體與包含九個EEG(腦電波)傳感器的弧形支架組成。
?

圖源:NextMind
?
從傳感器的凹面看,可以清楚的看到九個類似小腳的EEG傳感器,交流數(shù)據(jù)由這些傳感器直接向主體傳達。
?

圖源:NextMind
?
圓形主體的側(cè)面,一側(cè)設(shè)有USB-C端口用于充電,另一側(cè)設(shè)有按鈕和指示燈,該按鈕用于打開/關(guān)閉NextMind,以及進行藍(lán)牙配對。
?

圖源:NextMind
?
NextMind續(xù)航時間較長,充滿電需2個小時,可持續(xù)使用時間約為8小時。據(jù)介紹,傳感器對電池的管理方式較為智能,閑置幾秒后便會處于待機狀態(tài),因此在佩戴前最好提前檢查是否處于開機狀態(tài)。
?
NextMind規(guī)格如下:

圖源:VR陀螺
?
NextMind傳感器可與PC、Mac兼容。與NextMind兼容并不需要很高配置,但如需與VR頭顯一起使用,則需使用支持VR的PC。
?

圖源:VR陀螺
?
需要注意的是,NextMind僅與PC、Mac兼容,目前尚未支持Android系統(tǒng)。這意味NextMind與Oculus共同使用時,需使用Link進行PC連接,不可直接與Quest獨立使用。
?
有猜測認(rèn)為,未來可能會通過藍(lán)牙連接的方式增加對獨立VR頭顯的支持,運行時可能會將其移植至Android系統(tǒng),并對移動系統(tǒng)進行優(yōu)化。
?
NextMind現(xiàn)可在全球多個地區(qū)購買,售價399美元起。
?
?
易安裝,可與VR頭顯配合使用的NextMind如何工作?
?
?
NextMind的安裝很簡單,無需任何技巧,核心只需做到讓傳感器緊貼后腦勺,別讓頭發(fā)擋住,以及綁緊點,別讓它滑動即可。
?
使用頭帶時,只需將傳感器與頭帶連接,戴上頭帶后確保傳感器保持在頸背,佩戴好頭帶后,輕輕地進行上下調(diào)整,使EEG傳感器觸角與頭骨部分的皮膚相連接(而不是頭發(fā)),讓從大腦讀取的數(shù)據(jù)更為可靠。
?
如果與頭顯一起使用,不使用頭帶,而是將傳感器直接連接到設(shè)備后部,戴上頭顯后,確保其保持在頸背位置。
?

圖源:NextMind
?
傳感器之所以佩戴在后腦勺部位,是為了靠近視覺皮層以讀取其發(fā)出的腦電波。當(dāng)我們注意力集中在某個物體時,眼睛會將所看到的信息發(fā)送給大腦,大腦的各個區(qū)域會針對這些信息進行處理。
?
“視覺皮層”就是其中的一個重要區(qū)域。“視覺皮層”在面對不同信息時會產(chǎn)生可識別的反應(yīng),也就是不同頻率的腦電波。NextMind傳感器通過讀取這些腦電波信號來“理解”我們的想法。

圖源:網(wǎng)絡(luò)
?
雖然顏值高,佩戴方便,但NextMind佩戴舒適度有待提高,NextMind官方提供的頭帶配有魔術(shù)貼,用戶可自行調(diào)節(jié)松緊。想要獲得更好的大腦讀數(shù),傳感器需與頭部保持緊密貼合,且避免移動,否則校準(zhǔn)無效。
?
因此頭帶繃緊比松弛狀態(tài)更好。然而傳感器的觸角部分塑料邊緣非常鋒利,如果頭帶束緊,會引起疼痛。

圖源:NextMind
?
在與頭顯配合使用時,同樣會出現(xiàn)類似情況。在頭顯背部位置安裝傳感器后,頭顯與頭部貼合度會被改變。為使傳感器與頸背相貼合,頭顯佩戴時,頭顯后部要比通常位置低,因此,頭顯眼鏡部分會向上翹起,導(dǎo)致和鼻梁間的空隙變大。
?
此外,傳感器在與頭顯進行連接時,不一定能保持穩(wěn)定,因此需要注意不能使傳感器滑落。
?
軟件方面,用戶可在NextMind網(wǎng)站下載可配置所有內(nèi)容的安裝程序,該安裝程序會安裝帶有內(nèi)置演示的集線器,以及一個指導(dǎo)安裝的實用程序。軟件安裝僅需通過藍(lán)牙將NextMind傳感器連接到計算機,這是設(shè)備唯一的通信渠道。
?
?
NextMind通過藍(lán)牙與頭顯進行連接(圖源:NextMind)
?
安裝好需進行校準(zhǔn),首先需要啟動應(yīng)用程序驗證該傳感器正在從大腦讀取可靠數(shù)據(jù),如果沒有,可能是傳感器未與皮膚直接接觸,而是接觸到頭發(fā),需要進行調(diào)整。此時,可看到一個脈動圓圈持續(xù)40秒的時間,以便運行時可根據(jù)用戶特定大腦反應(yīng)校準(zhǔn)其檢測算法。
?

NextMind校準(zhǔn)(圖源:NextMind)
?
校準(zhǔn)完成后,用戶會獲得1至5的分?jǐn)?shù),分?jǐn)?shù)越高,表示運行時的數(shù)據(jù)感測效果越好。如果分?jǐn)?shù)高于3,則表示校準(zhǔn)結(jié)果可接受,用戶可以進行正常使用。
?
NextMind的等待時間有些長。時間之所以長,原因可能在于系統(tǒng)希望在執(zhí)行操作進行數(shù)據(jù)傳輸前,確保用戶確實在查看系統(tǒng)所理解的內(nèi)容。
?
這意味著,從用戶開始查看對象,到對象被激活,最佳情況下需等待1~3秒。與NextMind互動緩慢,意味著它不能在以速度為基礎(chǔ)的場景下使用,比如動作游戲。換言之,想要準(zhǔn)確性,則需以失去速度為代價。
?
當(dāng)校準(zhǔn)結(jié)束后啟動應(yīng)用程序時,系統(tǒng)會不斷讀取用戶的腦電波,當(dāng)檢測到與校準(zhǔn)過程中識別的信號相似時,會理解為用戶正在查看該信號。
?
目前NextMind支持的功能只能對特定對象信息進行識別,并不能真正理解用戶正在查看的內(nèi)容。它無法知道用戶面前具體看的是周杰倫還是劉德華的臉。它只知道用戶正在查看某些特定模式。
?

圖源:網(wǎng)絡(luò)
?
雖然NextMind識別范圍限定性很強,但同時可靠性得到了保證,能夠較為精準(zhǔn)、穩(wěn)定地識別經(jīng)過校準(zhǔn)測試后的對象。
?
所以從某種程度上來看,可將其理解為一個眼動追蹤裝置,只是該裝置追蹤的不是人眼,而是腦電波。
?
此外,針對開發(fā)者,目前NextMind提供了相應(yīng)的Unity SDK,其帶有許多現(xiàn)成的預(yù)制件和示例場景,適用于VR和2D,并且具備很多功能,其中一項功能為模擬器:在進行應(yīng)用程序調(diào)適時,無需使用真實的傳感器,只需使用鼠標(biāo)并單擊鼠標(biāo)即可模擬凝視(按住鼠標(biāo)左鍵的次數(shù)越多,在該對象上的虛擬觀察越多)。
?
在Unity應(yīng)用程序中實現(xiàn)思維控制僅需向場景中添加NeuroManager預(yù)制,然后向需跟蹤的每個對象添加Neuro Tag腳本。Neuro Tag會確保對象閃爍,以便被識別。對Neuro Tag事件進行定位,比如觸發(fā)對象后,便可實現(xiàn)所需的所有邏輯。編寫應(yīng)用程序非常容易,只需只分鐘便可開發(fā)出Unity Cube,如果注視Unity Cube,它會變大,當(dāng)注視移開時,會再次恢復(fù)到原始大小。
?
?
Unity Cube(圖源:NextMind)
?
?
NextMind初體驗
沒有讀心術(shù),但在VR中用神眼殺死了敵人
?
?
NextMind提供有許多2D演示,包括游戲、鍵盤、音樂創(chuàng)作等,這些都由大腦進行交互。
?
從演示體驗來看,軟件穩(wěn)定性好,偶爾會有延遲,這一點在游戲時體現(xiàn)的最為明顯。以演示游戲《Might Arkanoid》為例,想要準(zhǔn)確地接住球,需要提前三秒預(yù)測其軌跡。體驗平臺游戲時,用眼神殺死敵人會很痛苦。使用UI界面,比如創(chuàng)建音樂時情況會更好。
?

《Might Arkanoid》演示
?
在測試中還注意到另一個問題,在進行體驗時,如果精神上稍作停頓,眼睛開始游離,設(shè)備會繼續(xù)會保持追蹤,將目光視為輸入,這個過程中可能會隨機激活其他操作。在進行凝視驅(qū)動的UX設(shè)計時應(yīng)將這種情況考慮進去。
?
眼神的游離是一個較為常見的狀態(tài),不應(yīng)該用于觸發(fā)重要事件,可以調(diào)制為通過硬觸發(fā)(比如鼠標(biāo)單擊)進行確認(rèn)。
?
演示的應(yīng)用程序當(dāng)中,有一款最令人滿足,用戶可在該程序中找到NextMind的3D模型以及一些“動作點”,當(dāng)用戶將鼠標(biāo)懸在動作點保持不動時,會有更多相關(guān)信息出現(xiàn)。這是一種較為理想的方案,就像在日常生活中一樣,使用凝視獲取更多上下文信息。
?
最后一款演示應(yīng)用程序是一款VR動作游戲《Mindvasion》,用戶通過觀察外星人搏動的大腦來射擊外星人。
?

VR動作游戲《Mindvasion》
?
《Mindvasion》游戲玩法簡單,敵人移動速度非常慢,會停留在某個位置,以便玩家更好地瞄準(zhǔn)他們頭部進行射擊,并在傳感器所需求的時間內(nèi)殺死敵人。游戲不錯,但它再次證實目前并不是游戲理想的傳感器。
?
?
總結(jié)
?
?
整個體驗下來,NextMind確實實現(xiàn)了用“意念”操作,但腦機接口技術(shù)目前仍處于早期階段,無法實現(xiàn)《刀劍神域》中的功能。
?
基于目前的腦機接口技術(shù),NextMind算得上其中一款非常好的設(shè)備。該公司在策略上選擇只提供一項功能,用眼睛選擇對象并將這一項功能做到很好,設(shè)備的準(zhǔn)確性高,可用性也很高,安裝簡單,學(xué)習(xí)起來很快,并向開發(fā)人員開放SDK。
?
唯一的問題在于檢測速度較慢,因此建議不要在對反應(yīng)時間要求高的應(yīng)用程序中使用它。
?
如果想開始嘗試使用高質(zhì)量且易于使用的大腦計算機設(shè)備,如果預(yù)算允許,NextMind比較適合。需要注意,NextMind仍然是一款實驗性設(shè)備,如果需要在專業(yè)環(huán)境中追蹤用戶視線,更建議購買眼動追蹤配件。
?
隨著大廠相繼曝出要加快推進腦機接口設(shè)備商業(yè)化腳步,資本熱潮開始逐漸往這塊新興市場涌入,至于最終誰會成為最大受益者,現(xiàn)在還不得而知,但腦機接口與VR/AR的結(jié)合一定是眾多企業(yè)翹首布局的重要陣地。
?
NextMind是目前為數(shù)不多得以量產(chǎn)的腦機接口設(shè)備,盡管功能尚簡單,但從近期Facebook這些廠商放出的消息來看,更高階的腦機接口設(shè)備已經(jīng)具備了商業(yè)化落地和量產(chǎn)的資本,我們拭目以待。