神經(jīng)技術(shù)可能是下一個(gè)前沿領(lǐng)域,OpenBCI的Galea頭顯設(shè)備以及輔助控制方面的進(jìn)步,將會(huì)為我們的生活打開新的大門。
前段時(shí)間,蘋果為我們展示了如今最高質(zhì)量的混合現(xiàn)實(shí)設(shè)備——Vision Pro。它采用手指和眼睛控制界面,給人留下了深刻的印象。
然而,在它宣布發(fā)布幾個(gè)月前,我遇到了一件更讓人震驚的事情。我只需要把夾子夾在耳朵上,然后頭上戴著一圈帶有橡膠尖端傳感器的裝置,同時(shí)佩戴一個(gè)面罩就能夠通過(guò)虛擬現(xiàn)實(shí)看到自己的腦電波,并且只需微小地運(yùn)動(dòng)面部肌肉,就可以在虛擬環(huán)境中移動(dòng)物體。這是我試用OpenBCI的Galea設(shè)備的體驗(yàn)。
虛擬現(xiàn)實(shí)和增強(qiáng)現(xiàn)實(shí)的未來(lái)正在穩(wěn)步發(fā)展,但我們投入的時(shí)間與精力還不夠。 目前,該領(lǐng)域正在從使用物理控制器轉(zhuǎn)向手部和眼部追蹤技術(shù) 。然而,更深層次、與神經(jīng)技術(shù)相關(guān)的可能性也在等著我們?nèi)ヌ剿鳌?nbsp;
我甚至不知道如何描述我嘗試Galea頭顯的經(jīng)歷,因?yàn)樗且粋€(gè)探索未來(lái)發(fā)展的平臺(tái)。而且,就我在神經(jīng)技術(shù)方面的經(jīng)驗(yàn)來(lái)說(shuō),還只是處于初級(jí)階段。
OpenBCI是一家位于布魯克林的公司,專注于研發(fā)非侵入性腦-計(jì)算機(jī)接口技術(shù)的研究工具。他們將自己的感知系統(tǒng)應(yīng)用于一款名為Galea的混合現(xiàn)實(shí)頭戴式耳機(jī),并計(jì)劃在今年晚些時(shí)候推出。
在OpenBCI位于布魯克林的辦公室,我有機(jī)會(huì)嘗試了Galea的原型版本。我對(duì)于腦機(jī)接口在虛擬現(xiàn)實(shí)和增強(qiáng)現(xiàn)實(shí)中的應(yīng)用方式非常好奇,同時(shí)也思考著與計(jì)算機(jī)交互的未來(lái)可能會(huì)帶來(lái)怎樣的變革。
01.適用于VR和AR的全新傳感器平臺(tái)
我曾經(jīng)嘗試過(guò)一些簡(jiǎn)化版的腦電圖(EEG)傳感器組合,用于特定的視覺(jué)任務(wù)。比如,NextMind讓我能夠通過(guò)集中注意力在特定區(qū)域觸發(fā)動(dòng)作(NextMind去年被Snap收購(gòu))。這種體驗(yàn)幾乎就像是用思維來(lái)進(jìn)行鼠標(biāo)點(diǎn)擊一樣。然而, OpenBCI的Galea則是一個(gè)完整混合了各種類型傳感器的設(shè)備:包括EEG、EMG、EDA、PPG和眼球追蹤,真可謂縮略詞大集合 。
腦電圖(EEG)用于測(cè)量大腦信號(hào)的電活動(dòng)。OpenBCI使用帶有橡膠頭的傳感器連接頭皮,類似于我在2021年試用過(guò)的NextMind硬件。這些電極在干燥的情況下工作良好,但需要避免太多的頭發(fā)以確保良好的信號(hào)接收。
肌電圖(EMG) 用于測(cè)量神經(jīng)和肌肉的電活動(dòng)。 在Galea頭戴式耳機(jī)上,這些傳感器圍繞在面罩上,覆蓋額頭、眼睛和臉頰部位。當(dāng)我微微活動(dòng)面部肌肉時(shí),傳感器會(huì)進(jìn)行讀數(shù) 。但與Quest Pro等虛擬現(xiàn)實(shí)頭顯上的面部攝像機(jī)通過(guò)檢測(cè)特定的物理動(dòng)作不同,這里的讀數(shù)完全基于電信號(hào) 。
理論上,你甚至可以做出非常微小的運(yùn)動(dòng),更像是簡(jiǎn)單的神經(jīng)沖動(dòng)。Meta公司也正在開發(fā)適用于未來(lái)頭戴式設(shè)備的肌電圖技術(shù)手環(huán),但該手環(huán)僅通過(guò)手腕測(cè)量手指和手的運(yùn)動(dòng),而OpenBCI的傳感器則專注于面部區(qū)域。
皮膚電活動(dòng)(EDA) ,即皮膚汗液的電測(cè)量,通常用于檢測(cè)出汗情況。例如,F(xiàn)itbit將自己的EDA傳感器集成到Fitbit Sense智能手表中,用于測(cè) 量壓力水平。OpenBCI的EDA傳感器位于頭戴式耳機(jī)的前額部分。
光電容積描記法(PPG)是一種光學(xué)心率感應(yīng)技術(shù),類似于大多數(shù)智能手表上已有的功能。在最終的Galea頭戴式耳機(jī)上,PPG也是在額頭上進(jìn)行測(cè)量。但在我的演示中,我佩戴了耳夾以進(jìn)行PPG測(cè)量。
這個(gè)傳感器陣列與現(xiàn)有的虛擬現(xiàn)實(shí)和增強(qiáng)現(xiàn)實(shí)頭戴式設(shè)備Varjo XR-3(或更低成本的Varjo Aero)結(jié)合,并通過(guò)連接到計(jì)算機(jī)來(lái)運(yùn)行軟件和分析數(shù)據(jù)。
Varjo的高分辨率顯示和透視視頻混合現(xiàn)實(shí)功能為OpenBCI的傳感器在虛擬現(xiàn)實(shí)和增強(qiáng)現(xiàn)實(shí)場(chǎng)景中提供了許多軟件可能性。但OpenBCI的傳感器陣列可以獨(dú)立于虛擬現(xiàn)實(shí)頭顯工作,也可以與其他設(shè)備連接使用。
蘋果的Vision Pro也可能成為OpenBCI的理想平臺(tái),因?yàn)樗邆鋸?qiáng)大的處理能力和獨(dú)立功能。根據(jù)OpenBCI的首席執(zhí)行官兼聯(lián)合創(chuàng)始人Conor Russomanno的觀點(diǎn),開發(fā)類似于Vision Pro或未來(lái)的增強(qiáng)現(xiàn)實(shí)和虛擬現(xiàn)實(shí)平臺(tái)是完全可行的。他將蘋果最近的動(dòng)態(tài)視為對(duì)計(jì)算機(jī)領(lǐng)域混合現(xiàn)實(shí)的重要關(guān)注,這與OpenBCI對(duì)于這一機(jī)遇的看法不謀而合。
02.感知陣列可輔助多個(gè)功能
OpenBCI的感知陣列可以同時(shí)追求多個(gè)目標(biāo)。它不僅僅關(guān)注于一個(gè)特定目標(biāo),而是通過(guò)系統(tǒng)的傳感器促進(jìn)研究,并為與計(jì)算機(jī)的交互打開新的可能性。
最近,OpenBCI與患有脊髓性肌萎縮癥的黑客Christian Beyerlein合作,他利用OpenBCI的感知陣列通過(guò)面部肌肉脈沖控制了一架無(wú)人機(jī)。這次在TED演講中的演示展示了腦機(jī)接口如何為輔助功能和對(duì)虛擬現(xiàn)實(shí)技術(shù)的控制打開新的途徑。
我的演示包括一個(gè)基于肌電圖(EMG)控制的游戲,名為《貓咪奔跑者》(Cat Runner)。 我通過(guò)微小的面部肌肉運(yùn)動(dòng)將卡通角色左右移動(dòng),這些運(yùn)動(dòng)被Galea面罩中的EMG傳感器所識(shí)別。
這款游戲與Meta一直在使用的神經(jīng)輸入手環(huán)技術(shù)演示相似,我去年秋季在Meta的雷德蒙德現(xiàn)實(shí)實(shí)驗(yàn)室總部見(jiàn)到過(guò)。然而,Meta關(guān)注手腕上的運(yùn)動(dòng)感知,而OpenBCI的Russomanno認(rèn)為將傳感器放在頭部會(huì)有更好的機(jī)會(huì),因?yàn)檫@樣不會(huì)干擾現(xiàn)有基于攝像頭的手部跟蹤工作。
肌電圖(EMG)技術(shù)旨在感知微弱的電信號(hào),以至于幾乎沒(méi)有肌肉運(yùn)動(dòng)。然而,傳感器、算法和人體輸入之間的這種關(guān)系需要一些時(shí)間來(lái)精細(xì)調(diào)試。OpenBCI的多種類型傳感器可以提供大量數(shù)據(jù),這些數(shù)據(jù)可以指示未來(lái)的研究方向或新的接口。
它們還可以提供有關(guān)使用虛擬現(xiàn)實(shí)(VR)和增強(qiáng)現(xiàn)實(shí)(AR)對(duì)大腦或注意力的影響的反饋。此前已經(jīng)進(jìn)行過(guò)使用VR頭顯上的傳感器研究認(rèn)知過(guò)程的嘗試,其中包括具有心率傳感器的HP Omnicept,或者支持眼動(dòng)追蹤的頭顯。
另一個(gè)基于腦電圖(EEG)傳感器的演示是創(chuàng)建了一個(gè)冥想的“共感房間”,在這個(gè)房間中,我的不同腦波狀態(tài)轉(zhuǎn)化為周圍環(huán)境燈光的不同顏色。我的腦波似乎改變了我所看到的顏色。于是我開始嘗試通過(guò)特定的注意方式來(lái)呈現(xiàn)出不同的顏色。
這似乎是有效的嗎?OpenBCI許多傳感器的關(guān)鍵功能,最終它們可以被用來(lái)訓(xùn)練和改善我們通過(guò)自身的神經(jīng)脈沖來(lái)控制事物的能力。
Russomanno認(rèn)為Beyerlain利用肌電圖控制無(wú)人機(jī),通過(guò)將系統(tǒng)擴(kuò)展到他自己的大腦和身體功能上, 展示了神經(jīng)反饋將如何改變我們與計(jì)算機(jī)的交互方式,就像人工智能一樣 。"這并不是說(shuō)人工智能沒(méi)有用處,只是它并非唯一的解決方案,也不是能夠改變世界的唯一圣杯。"
Russomanno表示,“實(shí)際上,我們還看重神經(jīng)反饋、極其智能的用戶界面和設(shè)計(jì),這些優(yōu)化反饋循環(huán)的其他方向。利用技術(shù)讓計(jì)算機(jī)更好地教導(dǎo)人類是我們即將經(jīng)歷的另一個(gè)令人激動(dòng)的革命?!?/p>
這讓我想起智能手表技術(shù)的發(fā)展軌跡,光學(xué)心率傳感器逐漸打開了數(shù)據(jù)流,隨后手表上出現(xiàn)了新的健康功能。Fitbit在其Sense手表上添加了多個(gè)新的傳感器,其中還包括EDA壓力傳感器。
Russomanno確信OpenBCI的Galea以及類似的努力將開啟通往未來(lái)可穿戴傳感器的全新道路,使其與我們所看、所聽和我們的雙手互動(dòng)的事物建立接口連接。他認(rèn)為更好的獨(dú)立虛擬現(xiàn)實(shí)(VR)和增強(qiáng)現(xiàn)實(shí)(AR)頭顯的到來(lái),包括蘋果的頭顯,將打開通往新輸入和外圍設(shè)備的途徑。“直到這些頭顯問(wèn)世并且人們開始構(gòu)建雙向應(yīng)用程序,我們才能真正知道?!?/p>
Russomanno在我們演示幾個(gè)月后通過(guò)視頻聊天對(duì)我說(shuō):"在這些頭顯問(wèn)世之前,我們還無(wú)法知道人們開始構(gòu)建雙向應(yīng)用。"Russomanno指的是即將推出的更先進(jìn)的增強(qiáng)現(xiàn)實(shí)和混合現(xiàn)實(shí)設(shè)備?!?AR頭顯的炫酷之處在于它擁有你想了解有關(guān)本地環(huán)境的任何外部世界傳感器。而我們所做的是內(nèi)部世界 。當(dāng)將這兩個(gè)數(shù)據(jù)集結(jié)合在一起時(shí),我們?nèi)匀徊恢罆?huì)有什么可能性?!?nbsp;
盡管Russomanno將神經(jīng)反饋與人工智能進(jìn)行了比較,但我也認(rèn)為二者是相互關(guān)聯(lián)的。人工智能需要數(shù)據(jù)集才能發(fā)揮其魔力;未來(lái)的感知技術(shù)系統(tǒng)也是如此。隨著神經(jīng)技術(shù)的發(fā)展,人工智能與之共同進(jìn)化的可能性也在不斷增加。
03.一個(gè)可以擴(kuò)展到頭顯以外的傳感器平臺(tái)
OpenBCI的Galea實(shí)際上是一款虛擬現(xiàn)實(shí)(VR)和增強(qiáng)現(xiàn)實(shí)(AR)頭顯,但它與Varjo硬件的接口只是其中的一部分。這個(gè)傳感器陣列也可以單獨(dú)使用。當(dāng)我想到未來(lái)的可穿戴設(shè)備最終可以與我們身上的其他可穿戴設(shè)備進(jìn)行交互時(shí),這更加引起了我的興趣。
在這個(gè)世界里, 我們的日?;?dòng)有可能通過(guò)更先進(jìn)的傳感器得到增強(qiáng) 。雖然那樣的未來(lái)還遙遠(yuǎn),但OpenBCI在Galea中所組裝的傳感器似乎正在為這個(gè)未來(lái)奠定基礎(chǔ)。
目前說(shuō)服人們相信虛擬現(xiàn)實(shí)、增強(qiáng)現(xiàn)實(shí)和可穿戴視覺(jué)技術(shù)的價(jià)值仍然具有挑戰(zhàn)性。但改進(jìn)我們最終與空間計(jì)算或現(xiàn)實(shí)世界進(jìn)行接口連接的方式,可能是讓虛擬現(xiàn)實(shí)/增強(qiáng)現(xiàn)實(shí)進(jìn)化為更有意義甚至更具沖擊力形式的答案之一。個(gè)人技術(shù)正在與我們的感官和大腦建立更緊密的關(guān)系,但據(jù)我所見(jiàn),我們甚至還沒(méi)有真正開始邁向那個(gè)未來(lái)。
本文標(biāo)題: 腦機(jī)接口在虛擬現(xiàn)實(shí)中的應(yīng)用模式
本文地址: http://m.sun000666.com/brand/news-372eh2d7ce.html
內(nèi)容均來(lái)源于網(wǎng)絡(luò),錯(cuò)誤糾正或刪除請(qǐng)發(fā)郵件,收件郵箱kefu@huangye88.com
2009-2024 黃頁(yè)88版權(quán)所有 京ICP備2023012932號(hào)-1 │ 京公網(wǎng)安備 11010802023561號(hào) 京ICP證100626
內(nèi)容均來(lái)源于網(wǎng)絡(luò),錯(cuò)誤糾正或刪除請(qǐng)發(fā)郵件,收件郵箱kefu@huangye88.com