神經(jīng)技術(shù)可能是下一個前沿領(lǐng)域，OpenBCI的Galea頭顯設(shè)備以及輔助控制方面的進步，將會為我們的生活打開新的大門。 

前段時間，蘋果為我們展示了如今最高質(zhì)量的混合現(xiàn)實設(shè)備——Vision Pro。它采用手指和眼睛控制界面，給人留下了深刻的印象。

然而，在它宣布發(fā)布幾個月前，我遇到了一件更讓人震驚的事情。我只需要把夾子夾在耳朵上，然后頭上戴著一圈帶有橡膠尖端傳感器的裝置，同時佩戴一個面罩就能夠通過虛擬現(xiàn)實看到自己的腦電波，并且只需微小地運動面部肌肉，就可以在虛擬環(huán)境中移動物體。這是我試用OpenBCI的Galea設(shè)備的體驗。

虛擬現(xiàn)實和增強現(xiàn)實的未來正在穩(wěn)步發(fā)展，但我們投入的時間與精力還不夠。 目前，該領(lǐng)域正在從使用物理控制器轉(zhuǎn)向手部和眼部追蹤技術(shù) 。然而，更深層次、與神經(jīng)技術(shù)相關(guān)的可能性也在等著我們?nèi)ヌ剿鳌?nbsp;

我甚至不知道如何描述我嘗試Galea頭顯的經(jīng)歷，因為它是一個探索未來發(fā)展的平臺。而且，就我在神經(jīng)技術(shù)方面的經(jīng)驗來說，還只是處于初級階段。

OpenBCI是一家位于布魯克林的公司，專注于研發(fā)非侵入性腦-計算機接口技術(shù)的研究工具。他們將自己的感知系統(tǒng)應(yīng)用于一款名為Galea的混合現(xiàn)實頭戴式耳機，并計劃在今年晚些時候推出。

在OpenBCI位于布魯克林的辦公室，我有機會嘗試了Galea的原型版本。我對于腦機接口在虛擬現(xiàn)實和增強現(xiàn)實中的應(yīng)用方式非常好奇，同時也思考著與計算機交互的未來可能會帶來怎樣的變革。

01.適用于VR和AR的全新傳感器平臺

我曾經(jīng)嘗試過一些簡化版的腦電圖（EEG）傳感器組合，用于特定的視覺任務(wù)。比如，NextMind讓我能夠通過集中注意力在特定區(qū)域觸發(fā)動作（NextMind去年被Snap收購）。這種體驗幾乎就像是用思維來進行鼠標點擊一樣。然而， OpenBCI的Galea則是一個完整混合了各種類型傳感器的設(shè)備：包括EEG、EMG、EDA、PPG和眼球追蹤，真可謂縮略詞大集合 。 

腦電圖（EEG）用于測量大腦信號的電活動。OpenBCI使用帶有橡膠頭的傳感器連接頭皮，類似于我在2021年試用過的NextMind硬件。這些電極在干燥的情況下工作良好，但需要避免太多的頭發(fā)以確保良好的信號接收。

肌電圖（EMG） 用于測量神經(jīng)和肌肉的電活動。 在Galea頭戴式耳機上，這些傳感器圍繞在面罩上，覆蓋額頭、眼睛和臉頰部位。當我微微活動面部肌肉時，傳感器會進行讀數(shù) 。但與Quest Pro等虛擬現(xiàn)實頭顯上的面部攝像機通過檢測特定的物理動作不同，這里的讀數(shù)完全基于電信號 。 

理論上，你甚至可以做出非常微小的運動，更像是簡單的神經(jīng)沖動。Meta公司也正在開發(fā)適用于未來頭戴式設(shè)備的肌電圖技術(shù)手環(huán)，但該手環(huán)僅通過手腕測量手指和手的運動，而OpenBCI的傳感器則專注于面部區(qū)域。

皮膚電活動（EDA） ，即皮膚汗液的電測量，通常用于檢測出汗情況。例如，F(xiàn)itbit將自己的EDA傳感器集成到Fitbit Sense智能手表中，用于測 量壓力水平。OpenBCI的EDA傳感器位于頭戴式耳機的前額部分。 

光電容積描記法（PPG）是一種光學心率感應(yīng)技術(shù)，類似于大多數(shù)智能手表上已有的功能。在最終的Galea頭戴式耳機上，PPG也是在額頭上進行測量。但在我的演示中，我佩戴了耳夾以進行PPG測量。

這個傳感器陣列與現(xiàn)有的虛擬現(xiàn)實和增強現(xiàn)實頭戴式設(shè)備Varjo XR-3（或更低成本的Varjo Aero）結(jié)合，并通過連接到計算機來運行軟件和分析數(shù)據(jù)。

Varjo的高分辨率顯示和透視視頻混合現(xiàn)實功能為OpenBCI的傳感器在虛擬現(xiàn)實和增強現(xiàn)實場景中提供了許多軟件可能性。但OpenBCI的傳感器陣列可以獨立于虛擬現(xiàn)實頭顯工作，也可以與其他設(shè)備連接使用。

蘋果的Vision Pro也可能成為OpenBCI的理想平臺，因為它具備強大的處理能力和獨立功能。根據(jù)OpenBCI的首席執(zhí)行官兼聯(lián)合創(chuàng)始人Conor Russomanno的觀點，開發(fā)類似于Vision Pro或未來的增強現(xiàn)實和虛擬現(xiàn)實平臺是完全可行的。他將蘋果最近的動態(tài)視為對計算機領(lǐng)域混合現(xiàn)實的重要關(guān)注，這與OpenBCI對于這一機遇的看法不謀而合。

02.感知陣列可輔助多個功能

OpenBCI的感知陣列可以同時追求多個目標。它不僅僅關(guān)注于一個特定目標，而是通過系統(tǒng)的傳感器促進研究，并為與計算機的交互打開新的可能性。

最近，OpenBCI與患有脊髓性肌萎縮癥的黑客Christian Beyerlein合作，他利用OpenBCI的感知陣列通過面部肌肉脈沖控制了一架無人機。這次在TED演講中的演示展示了腦機接口如何為輔助功能和對虛擬現(xiàn)實技術(shù)的控制打開新的途徑。

我的演示包括一個基于肌電圖（EMG）控制的游戲，名為《貓咪奔跑者》（Cat Runner）。 我通過微小的面部肌肉運動將卡通角色左右移動，這些運動被Galea面罩中的EMG傳感器所識別。 

這款游戲與Meta一直在使用的神經(jīng)輸入手環(huán)技術(shù)演示相似，我去年秋季在Meta的雷德蒙德現(xiàn)實實驗室總部見到過。然而，Meta關(guān)注手腕上的運動感知，而OpenBCI的Russomanno認為將傳感器放在頭部會有更好的機會，因為這樣不會干擾現(xiàn)有基于攝像頭的手部跟蹤工作。

肌電圖（EMG）技術(shù)旨在感知微弱的電信號，以至于幾乎沒有肌肉運動。然而，傳感器、算法和人體輸入之間的這種關(guān)系需要一些時間來精細調(diào)試。OpenBCI的多種類型傳感器可以提供大量數(shù)據(jù)，這些數(shù)據(jù)可以指示未來的研究方向或新的接口。

它們還可以提供有關(guān)使用虛擬現(xiàn)實（VR）和增強現(xiàn)實（AR）對大腦或注意力的影響的反饋。此前已經(jīng)進行過使用VR頭顯上的傳感器研究認知過程的嘗試，其中包括具有心率傳感器的HP Omnicept，或者支持眼動追蹤的頭顯。

另一個基于腦電圖（EEG）傳感器的演示是創(chuàng)建了一個冥想的“共感房間”，在這個房間中，我的不同腦波狀態(tài)轉(zhuǎn)化為周圍環(huán)境燈光的不同顏色。我的腦波似乎改變了我所看到的顏色。于是我開始嘗試通過特定的注意方式來呈現(xiàn)出不同的顏色。

這似乎是有效的嗎？OpenBCI許多傳感器的關(guān)鍵功能，最終它們可以被用來訓(xùn)練和改善我們通過自身的神經(jīng)脈沖來控制事物的能力。

Russomanno認為Beyerlain利用肌電圖控制無人機，通過將系統(tǒng)擴展到他自己的大腦和身體功能上， 展示了神經(jīng)反饋將如何改變我們與計算機的交互方式，就像人工智能一樣 。"這并不是說人工智能沒有用處，只是它并非唯一的解決方案，也不是能夠改變世界的唯一圣杯。" 

Russomanno表示，“實際上，我們還看重神經(jīng)反饋、極其智能的用戶界面和設(shè)計，這些優(yōu)化反饋循環(huán)的其他方向。利用技術(shù)讓計算機更好地教導(dǎo)人類是我們即將經(jīng)歷的另一個令人激動的革命?！?/p>

這讓我想起智能手表技術(shù)的發(fā)展軌跡，光學心率傳感器逐漸打開了數(shù)據(jù)流，隨后手表上出現(xiàn)了新的健康功能。Fitbit在其Sense手表上添加了多個新的傳感器，其中還包括EDA壓力傳感器。

Russomanno確信OpenBCI的Galea以及類似的努力將開啟通往未來可穿戴傳感器的全新道路，使其與我們所看、所聽和我們的雙手互動的事物建立接口連接。他認為更好的獨立虛擬現(xiàn)實（VR）和增強現(xiàn)實（AR）頭顯的到來，包括蘋果的頭顯，將打開通往新輸入和外圍設(shè)備的途徑?！爸钡竭@些頭顯問世并且人們開始構(gòu)建雙向應(yīng)用程序，我們才能真正知道?！?/p>

Russomanno在我們演示幾個月后通過視頻聊天對我說："在這些頭顯問世之前，我們還無法知道人們開始構(gòu)建雙向應(yīng)用。"Russomanno指的是即將推出的更先進的增強現(xiàn)實和混合現(xiàn)實設(shè)備?！?AR頭顯的炫酷之處在于它擁有你想了解有關(guān)本地環(huán)境的任何外部世界傳感器。而我們所做的是內(nèi)部世界 。當將這兩個數(shù)據(jù)集結(jié)合在一起時，我們?nèi)匀徊恢罆惺裁纯赡苄浴！?nbsp;

盡管Russomanno將神經(jīng)反饋與人工智能進行了比較，但我也認為二者是相互關(guān)聯(lián)的。人工智能需要數(shù)據(jù)集才能發(fā)揮其魔力；未來的感知技術(shù)系統(tǒng)也是如此。隨著神經(jīng)技術(shù)的發(fā)展，人工智能與之共同進化的可能性也在不斷增加。

03.一個可以擴展到頭顯以外的傳感器平臺

OpenBCI的Galea實際上是一款虛擬現(xiàn)實（VR）和增強現(xiàn)實（AR）頭顯，但它與Varjo硬件的接口只是其中的一部分。這個傳感器陣列也可以單獨使用。當我想到未來的可穿戴設(shè)備最終可以與我們身上的其他可穿戴設(shè)備進行交互時，這更加引起了我的興趣。

在這個世界里， 我們的日常互動有可能通過更先進的傳感器得到增強 。雖然那樣的未來還遙遠，但OpenBCI在Galea中所組裝的傳感器似乎正在為這個未來奠定基礎(chǔ)。 

目前說服人們相信虛擬現(xiàn)實、增強現(xiàn)實和可穿戴視覺技術(shù)的價值仍然具有挑戰(zhàn)性。但改進我們最終與空間計算或現(xiàn)實世界進行接口連接的方式，可能是讓虛擬現(xiàn)實/增強現(xiàn)實進化為更有意義甚至更具沖擊力形式的答案之一。個人技術(shù)正在與我們的感官和大腦建立更緊密的關(guān)系，但據(jù)我所見，我們甚至還沒有真正開始邁向那個未來。