腦機(jī)接口能做什么?帶上電極帽,你可以在實(shí)驗(yàn)室中用意念控制無人機(jī)飛行;在大腦皮層中植入電極,癱瘓病人能夠用意念打字或者驅(qū)動(dòng)輪椅。無論是無創(chuàng)還是有創(chuàng)的腦機(jī)接口,都試圖在人類大腦與外部機(jī)器之間建立連接。過去幾十年中,腦機(jī)接口技術(shù)穩(wěn)步發(fā)展,一步步從科幻走向現(xiàn)實(shí),也開始從實(shí)驗(yàn)室走向生活。2019年7月,埃隆·馬斯克旗下 Neuralink 公司發(fā)布了一款縫紉機(jī)式的外科機(jī)器人,它可以在頭骨上打洞,并將3072個(gè)微電極置入大腦皮層。
最近,《國家科學(xué)評(píng)論》(National Science Review,NSR)采訪了卡耐基梅隆大學(xué)生物醫(yī)學(xué)工程系主任賀斌。賀斌是無創(chuàng)腦機(jī)接口領(lǐng)域的優(yōu)秀科學(xué)家,2013年,他的研究團(tuán)隊(duì)利用無創(chuàng)腦機(jī)接口技術(shù),實(shí)現(xiàn)了意念控制無人機(jī)飛行并跨越障礙,2019年,他的團(tuán)隊(duì)又實(shí)現(xiàn)了意念控制下機(jī)械臂對(duì)運(yùn)動(dòng)光標(biāo)的連續(xù)追蹤。在這次訪談中,賀斌談到了腦機(jī)接口技術(shù)的歷史與未來應(yīng)用方向,并著重介紹了無創(chuàng)腦機(jī)接口相關(guān)的機(jī)遇與挑戰(zhàn)。
腦機(jī)接口的歷史與現(xiàn)狀
NSR:如果要向普通人介紹腦機(jī)接口技術(shù),您會(huì)怎么介紹?
賀斌:我認(rèn)為腦機(jī)接口包含兩個(gè)方面。第一方面是現(xiàn)在大眾比較感興趣的:我們可以檢測人的大腦信號(hào),解碼其中的含義,再用這個(gè)含義去控制機(jī)器,這里所說的機(jī)器可以是機(jī)械臂、無人機(jī)、電腦等等。但是從廣義上講,腦機(jī)接口還包括另一個(gè)方面:我們可以不只是被動(dòng)地接收大腦信號(hào),還可以把電、磁、聲等信號(hào)傳入大腦,來刺激或者調(diào)控神經(jīng)回路的活動(dòng)。目前,這種神經(jīng)調(diào)控技術(shù)主要用于疾病治療。
NSR:腦機(jī)接口技術(shù)的發(fā)展歷史上有哪些重要事件?
賀斌:腦機(jī)接口(brain-computer interface,BCI)這個(gè)概念是Jacques Vidal 在20世紀(jì)70年代提出的。這之后的一個(gè)重大進(jìn)展是,科學(xué)家可以通過腦電信號(hào)檢測,以無創(chuàng)的方式用意念驅(qū)動(dòng)光標(biāo)在屏幕上做一維運(yùn)動(dòng)。這項(xiàng)成果的出現(xiàn),讓科學(xué)界和大眾都對(duì)腦機(jī)接口產(chǎn)生了興趣,政府和資助機(jī)構(gòu)也開始愿意資助這個(gè)研究領(lǐng)域。2004年 Jonathan Wolpaw 和同事在PNAS上發(fā)表了一篇文章,他們可以用意念驅(qū)動(dòng)光標(biāo)做上下左右的二維運(yùn)動(dòng)。這又是無創(chuàng)腦機(jī)接口領(lǐng)域的一個(gè)重大進(jìn)展。后來,包括我的團(tuán)隊(duì)在內(nèi),無創(chuàng)腦機(jī)接口領(lǐng)域的研究者開始嘗試不只是驅(qū)動(dòng)虛擬光標(biāo)做簡單的二維運(yùn)動(dòng),而是去驅(qū)動(dòng)更貼近物理實(shí)際的實(shí)體做更復(fù)雜的三維運(yùn)動(dòng),包括無人機(jī)、機(jī)械臂等。
在有創(chuàng)腦機(jī)接口領(lǐng)域,杜克大學(xué)的 Miguel Nicolelis 團(tuán)隊(duì)早期在猴子的腦中植入電極,來控制電腦光標(biāo)的運(yùn)動(dòng)。后來匹茲堡大學(xué) Andrew Schwartz 及同事也做了很多工作,在猴子和人身上做實(shí)驗(yàn),可以控制虛擬的光標(biāo),也可以控制實(shí)體的機(jī)械臂。再后來,布朗大學(xué)、斯坦福大學(xué)、伯克利大學(xué)、卡耐基梅隆大學(xué)、加州理工學(xué)院等許多高校的研究者都開始進(jìn)行有創(chuàng)腦機(jī)接口的研究,也取得了很多進(jìn)展。
現(xiàn)在,有創(chuàng)腦機(jī)接口領(lǐng)域還有一個(gè)新的方向,就是雙向腦機(jī)接口,在機(jī)械臂觸碰到物體后,可以用電信號(hào)刺激體感皮層,讓受試者感覺到自己觸碰到了物體。而不是像從前一樣,受試者只能通過視覺來了解控制的結(jié)果。
NSR:您自己是怎么進(jìn)入腦機(jī)接口領(lǐng)域的?
賀斌:我最初的研究方向是神經(jīng)成像。將近20年前,在伊利諾伊大學(xué)工作期間我開始注意到腦機(jī)接口領(lǐng)域。那時(shí)候人們對(duì)于腦機(jī)接口技術(shù)的可行性和發(fā)展前景還有很多疑問,不少人都不完全相信。作為一個(gè)科學(xué)家,我想與其這樣猜測,等著其他實(shí)驗(yàn)室來驗(yàn)證,還不如我自己去探索一下。于是我開始在自己的實(shí)驗(yàn)室做相關(guān)的工作,并且越做越覺得有意思。所以后來我從伊利諾伊大學(xué)到明尼蘇達(dá)大學(xué),兩年前又到卡耐基梅隆,一直都在做這個(gè)方向。當(dāng)然,除了受好奇心的驅(qū)使,我也希望看到腦機(jī)接口技術(shù)能夠造福更多的患者,提高他們的生活質(zhì)量。我想大部分的腦機(jī)接口研究者都有這樣的期望。
NSR:您在自己身上用過BCI嗎?
賀斌:沒有。我知道有不少科學(xué)家會(huì)在自己身上做實(shí)驗(yàn)。但是我自己有一個(gè)習(xí)慣,就是我自己從來不做被試。因?yàn)槲蚁M约翰灰驗(yàn)樽鲞^被試而產(chǎn)生主觀的偏見。我不能肯定這樣做是不是對(duì)的,但我確實(shí)沒有做過任何一個(gè)實(shí)驗(yàn)的被試。
無創(chuàng)腦機(jī)接口:不只是“粗糙的黑箱”
NSR:基于腦電的無創(chuàng)腦機(jī)接口接收和解析的是什么樣的神經(jīng)信號(hào)?
賀斌:無創(chuàng)腦機(jī)接口可以分為兩大類,一類是基于運(yùn)動(dòng)想象的,我們讓受試者想象自身肢體的運(yùn)動(dòng),接收并且解析他的腦電信號(hào),最終的效果是,當(dāng)他們?cè)陬^腦中想象機(jī)械臂或者無人機(jī)的運(yùn)動(dòng)時(shí),外接設(shè)備就會(huì)隨之運(yùn)動(dòng)。2004年Wolpaw光標(biāo)二維移動(dòng)的工作,以及我自己實(shí)驗(yàn)室的工作都屬于這一類。另一類是基于事件相關(guān)電位(Event-related potential,ERP)的,研究者測量并解析ERP,以此來驅(qū)動(dòng)機(jī)器??晒y量的ERP有很多種,比如P300、穩(wěn)態(tài)視覺誘發(fā)電位(SSVEP)、聽覺誘發(fā)電位(AEP)等等。
NSR:和有創(chuàng)測量相比,無創(chuàng)腦電測量的空間精確度還是要差一些?
賀斌:沒錯(cuò),在精確性和直接性方面,無創(chuàng)是比不上有創(chuàng)的。人類大腦中有大概上千億個(gè)神經(jīng)元,如果你想用腦電去記錄每一個(gè)神經(jīng)元的活動(dòng),這是永遠(yuǎn)做不到的。但是我想,也可以從另一個(gè)角度來理解這個(gè)問題。神經(jīng)科學(xué)研究已經(jīng)發(fā)現(xiàn),大腦的功能性活動(dòng)是神經(jīng)元網(wǎng)絡(luò)中許許多多神經(jīng)元共同參與的結(jié)果,往往涉及大量神經(jīng)元的同步活動(dòng),而這種同步活動(dòng)是能夠被腦電技術(shù)測量到的。所以,一方面,你可以說腦電無法測量單個(gè)神經(jīng)元或者少數(shù)幾個(gè)神經(jīng)元的活動(dòng),另一方面,你也可以說它把單個(gè)神經(jīng)元的活動(dòng)過濾掉了,只留下神經(jīng)元群體有意義的集體活動(dòng)。從這個(gè)意義上講,腦電測量、腦磁測量等無創(chuàng)手段有缺點(diǎn)也有優(yōu)點(diǎn),它們對(duì)于大腦功能的掌握是有獨(dú)特意義的。
而且,在實(shí)際應(yīng)用方面,有創(chuàng)的技術(shù)很難廣泛應(yīng)用在普通人群中,即便是在患者當(dāng)中應(yīng)用,也會(huì)面臨很多問題。所以無創(chuàng)在應(yīng)用方面有優(yōu)勢,包括美國國立衛(wèi)生研究院(NIH)在內(nèi)的很多機(jī)構(gòu)也越來越認(rèn)可無創(chuàng)技術(shù)。現(xiàn)在腦機(jī)接口的研究相當(dāng)熱門,做有創(chuàng)和無創(chuàng)的實(shí)驗(yàn)室都比較多。
NSR:做無創(chuàng)的實(shí)驗(yàn)室會(huì)比做有創(chuàng)的更多嗎?
賀斌:應(yīng)該是更多的,因?yàn)樽鰺o創(chuàng)的入門門檻相對(duì)較低。做實(shí)驗(yàn)的話,你需要的基本硬件只有一個(gè)電極帽,一套腦電測量裝置。如果不做實(shí)驗(yàn)只做算法,那就更加容易了。因?yàn)槟X電領(lǐng)域有一個(gè)非常好的傳統(tǒng),很多實(shí)驗(yàn)室,包括我的實(shí)驗(yàn)室都會(huì)把自己的腦電測量數(shù)據(jù)向全世界公開。這樣,全世界任何地方的研究生都可以下載這些數(shù)據(jù),利用這些數(shù)據(jù)去做分析,去開發(fā)新的更好的算法。
NSR:深度學(xué)習(xí)對(duì)于腦電信號(hào)的解析很有幫助。但是與此同時(shí),腦電解析的過程是不是也變成了一個(gè)黑箱?我們不需要理解測量到的信號(hào)是從大腦的什么位置發(fā)出的,不需要了解信號(hào)的實(shí)際意義,只要用深度學(xué)習(xí)算法去做計(jì)算就可以了?
賀斌:機(jī)器學(xué)習(xí)的發(fā)展確實(shí)對(duì)大腦數(shù)據(jù)的解析很有幫助。尤其是在我們很難把腦電信號(hào)和單一神經(jīng)元的活動(dòng)對(duì)應(yīng)起來的情況下,這樣的算法非常有價(jià)值。我認(rèn)為下一代的年輕學(xué)生應(yīng)該把機(jī)器學(xué)習(xí)作為基本技能來掌握。
但是腦電解析的過程也不僅僅是一個(gè)黑箱,我們也在努力解析其中的信息,找到大腦活動(dòng)與腦電信號(hào)之間的對(duì)應(yīng)關(guān)系?,F(xiàn)在的源定位(source localization)和源成像(source imaging)方法,可以把腦電信號(hào)定位到大腦皮層的特定位置上,分辨率最高能達(dá)到5毫米左右。5毫米的范圍內(nèi)還是包含了非常多的神經(jīng)元,但是和20年前相比,這樣的成就已經(jīng)是不可想象的,并且已經(jīng)能為臨床提供一定的支持。我們還可以把神經(jīng)刺激和神經(jīng)成像結(jié)合起來,在對(duì)大腦施加刺激之后去做成像和測量,就能夠知道大腦在刺激之下會(huì)做出什么反應(yīng),發(fā)出哪些信號(hào)。
NSR:在硬件方面,無創(chuàng)腦機(jī)接口的信號(hào)獲取方式有大的進(jìn)展嗎?
賀斌:過去一些年中,頭皮電極沒有太大的發(fā)展。實(shí)驗(yàn)室中,我們使用不是很美觀的電極帽?,F(xiàn)在有些創(chuàng)新公司開發(fā)出了看上去非常漂亮的頭環(huán)產(chǎn)品,但是其中也沒有什么新的技術(shù),只是做了一些設(shè)計(jì)上的改進(jìn),讓消費(fèi)者更容易接受。和軟件、計(jì)算方法上的進(jìn)步相比,硬件上確實(shí)沒有根本性的變化。
雙向腦機(jī)接口:調(diào)控大腦
NSR:您剛剛有講到雙向腦機(jī)接口,可以向大腦反饋觸覺信息,再來指導(dǎo)輸出,形成一個(gè)閉環(huán)。這方面的研究情況如何?
賀斌:在有創(chuàng)腦機(jī)接口領(lǐng)域,這是最近的一個(gè)研究重點(diǎn),許多實(shí)驗(yàn)室都有相關(guān)的嘗試。有創(chuàng)腦機(jī)接口直接作用于大腦皮層,所以可以比較方便地向大腦反饋信號(hào)。無創(chuàng)腦機(jī)接口的研究者也想做類似的事情,但是相對(duì)來講并不容易,因?yàn)樵谛碌臒o創(chuàng)神經(jīng)刺激技術(shù)誕生之前,我們很難用可穿戴裝備來直接刺激特定的大腦區(qū)域。
NSR:廣義上來講,現(xiàn)在已經(jīng)在醫(yī)療上有所應(yīng)用的大腦刺激方法,應(yīng)該也屬于反向的腦機(jī)接口?
賀斌:對(duì),廣義上來講腦深部電刺激(Deep Brain Stimulation,DBS)也可以算是腦機(jī)接口的一部分。談到這里的話,我想介紹我自己實(shí)驗(yàn)室正在做的一個(gè)方向。以往的大腦刺激療法大多是用電或者磁的刺激。我們?cè)趪L試用無創(chuàng)的方法,用超聲信號(hào)刺激大腦,達(dá)到調(diào)控或治療的效果。傳統(tǒng)的電磁刺激有一個(gè)局限,根據(jù)泊松方程和麥克斯韋方程組,電磁刺激會(huì)遇到容積傳導(dǎo)(volume conduction)的問題,這使得無創(chuàng)電磁刺激很難完全聚焦。但是超聲沒有這個(gè)問題,它可以非常聚焦地打在大腦中的特定位置上,并且同樣可以到達(dá)深腦。如果最終能夠研發(fā)出產(chǎn)品,雖然超聲刺激的效果可能比不上DBS,但它可以成為一種無創(chuàng)的臨床選擇。
NSR:現(xiàn)在似乎已經(jīng)有用超聲做大腦損傷的醫(yī)療儀器,你們想做的是更精確的調(diào)控,而不是直接破壞大腦?
賀斌:對(duì),是這樣?,F(xiàn)在不只是我的實(shí)驗(yàn)室,好幾個(gè)國家的不少實(shí)驗(yàn)室也在做這樣的努力。我個(gè)人認(rèn)為這是很有前景的一個(gè)方向。
腦機(jī)接口與神經(jīng)科學(xué)
NSR:腦機(jī)接口和神經(jīng)科學(xué)都以大腦為研究對(duì)象,但是在無創(chuàng)腦機(jī)接口方面,神經(jīng)科學(xué)能夠做出的貢獻(xiàn)似乎有限?
賀斌:相對(duì)來講,有創(chuàng)腦機(jī)接口和神經(jīng)科學(xué)之間的聯(lián)系會(huì)更加緊密一些,因?yàn)樗鼈兌家獙?duì)神經(jīng)元和大腦做比較細(xì)致的操作,二者之間有很多共享的實(shí)驗(yàn)技術(shù)手段。但我想對(duì)于整個(gè)腦機(jī)接口技術(shù)的長期發(fā)展來說,神經(jīng)科學(xué)、計(jì)算科學(xué)、材料科學(xué)等等都是不可或缺的。
NSR:在腦機(jī)接口領(lǐng)域,非人靈長類動(dòng)物的應(yīng)用情況如何?在應(yīng)用于人類之前,是否需要在猴子上做實(shí)驗(yàn)?
賀斌:在用意識(shí)操縱機(jī)器方面,有創(chuàng)的研究者會(huì)在猴子身上做一部分實(shí)驗(yàn),因?yàn)橐谌说拇竽X中植入電極還是比較復(fù)雜的事情。但是對(duì)于無創(chuàng)來說,我們通常還是直接進(jìn)行人體實(shí)驗(yàn)的,用猴子來做行為實(shí)驗(yàn)反而難得多,效果也不好,因?yàn)楹镒雍茈y配合實(shí)驗(yàn)操作,要給它戴上電極帽,讓它理解你的實(shí)驗(yàn)?zāi)康牟⑴浜蠈?shí)驗(yàn)都不容易。我在明尼蘇達(dá)大學(xué)的時(shí)候做過類似的嘗試,確實(shí)很難。
當(dāng)然如果我們要做反向的腦機(jī)接口,用外界信號(hào)調(diào)控大腦,從動(dòng)物實(shí)驗(yàn)(包括但不限于猴子)開始是很自然的選擇。
展望:腦機(jī)接口的發(fā)展方向
NSR:腦機(jī)接口領(lǐng)域中,將會(huì)產(chǎn)生突破的重點(diǎn)研究方向是什么?
賀斌:在有創(chuàng)腦機(jī)接口領(lǐng)域,閉環(huán)的腦機(jī)接口是許多實(shí)驗(yàn)室目前的研究重點(diǎn)。作為旁觀者,我認(rèn)為這是可能在5到10年內(nèi)產(chǎn)生重要成果的方向。
在無創(chuàng)方面,腦電信號(hào)的分析方法一定還會(huì)提高。此外,我認(rèn)為我們不能只做計(jì)算,實(shí)驗(yàn)是非常重要的。我們一定要把算法用在實(shí)際的實(shí)驗(yàn)中,做出更貼近實(shí)際生活的工作和產(chǎn)品,才能真正推動(dòng)這一領(lǐng)域的進(jìn)步。
要做出真正造福人類的技術(shù)和產(chǎn)品,我們還需要更多年輕人進(jìn)入腦機(jī)接口領(lǐng)域。這是一個(gè)多學(xué)科的領(lǐng)域,無論有創(chuàng)還是無創(chuàng),我們都需要神經(jīng)科學(xué)、工程學(xué), 計(jì)算科學(xué)、材料科學(xué)等各個(gè)學(xué)科背景的人才。
NSR:中國腦機(jī)接口領(lǐng)域的研究進(jìn)展如何?
賀斌:中國在腦機(jī)接口領(lǐng)域做了很多工作,相關(guān)的研究者也很多。其中做得比較有特色的,一是清華大學(xué)的團(tuán)隊(duì),他們?cè)诨赟SVEP(穩(wěn)態(tài)視覺誘發(fā)電位)的無創(chuàng)腦機(jī)接口方面做得十分出色,是國際上做得比較早,并且實(shí)力領(lǐng)先的;二是浙江大學(xué)的團(tuán)隊(duì),他們?cè)谟袆?chuàng)腦機(jī)接口領(lǐng)域做了比較多、也非常有特色的工作。其他的中國團(tuán)隊(duì)還有很多,但這兩個(gè)應(yīng)該是其中最有特色的。
20年內(nèi),腦機(jī)接口走進(jìn)患者生活?
NSR:現(xiàn)在有很多創(chuàng)新公司和投資人都關(guān)注腦機(jī)接口領(lǐng)域,您也創(chuàng)辦了自己的公司嗎?
賀斌:我還是比較專注在實(shí)驗(yàn)室研究上的。我不敢說將來會(huì)怎樣,但是目前我還沒有開公司或者積極投身于腦機(jī)接口的商業(yè)化應(yīng)用。
NSR:您覺得埃隆·馬斯克Neuralink公司的技術(shù)有前景嗎?
賀斌:如果新聞報(bào)道準(zhǔn)確的話,我認(rèn)為 Neuralink 在技術(shù)上是一個(gè)重大的突破,和目前高校實(shí)驗(yàn)室中的技術(shù)相比,它的技術(shù)水平前進(jìn)了一大步。在未來,這種技術(shù)是可能應(yīng)用在癲癇病人等患者身上的。對(duì)于這些必須接受手術(shù)治療的患者,Neuralink 的技術(shù)可能成為比現(xiàn)有技術(shù)更優(yōu)秀的選擇。但我還是認(rèn)為,在普通大眾身上,有創(chuàng)的技術(shù)是很難推廣的,不管電極多細(xì)。無創(chuàng)的腦機(jī)接口技術(shù)會(huì)有更大應(yīng)用前景。
NSR:在腦機(jī)接口的實(shí)際應(yīng)用中,還會(huì)遇到一些倫理上的問題。
賀斌:沒錯(cuò),現(xiàn)在在美國已經(jīng)有很多關(guān)于腦機(jī)接口倫理問題的討論。一方面,如果要對(duì)人腦做神經(jīng)調(diào)控,一定會(huì)面臨隱私等問題。另一方面,所有針對(duì)大腦的有創(chuàng)技術(shù)都面臨倫理問題,如何評(píng)價(jià)它對(duì)人體造成的損害,在什么情況下才能將有創(chuàng)手段用于人體,都是需要進(jìn)一步討論的。
NSR:您覺得在20年后,腦機(jī)接口會(huì)在哪些方面實(shí)際改變?nèi)藗兊纳睿?/p>
賀斌:在腦機(jī)接口領(lǐng)域,基本上每5年就會(huì)有一個(gè)比較大的進(jìn)展。20年后,最主要的應(yīng)用應(yīng)該還是在醫(yī)學(xué)領(lǐng)域。20年后,腦控的假肢、腦控的輪椅、腦控的機(jī)械手都可能已經(jīng)走進(jìn)殘疾或癱瘓病人的生活。利用這些腦機(jī)接口設(shè)備,他們不依賴他人就可以自由行動(dòng)、自己吃東西、自己控制房間中的電器等等?,F(xiàn)在,這一類設(shè)備的原型機(jī)已經(jīng)在實(shí)驗(yàn)室中出現(xiàn),但是要把這些技術(shù)變得更加可靠、更加穩(wěn)定,能夠真正運(yùn)用到實(shí)際生活中,還需要一段時(shí)間??上驳氖牵壳霸S多科學(xué)家、政府和私人投資都很關(guān)注相關(guān)領(lǐng)域,所以我認(rèn)為在20年的時(shí)間內(nèi),腦機(jī)接口技術(shù)進(jìn)入日常生活的可能性還是很高的。
當(dāng)然,我們不可能用腦機(jī)接口去做所有的事情,正常人可以用腦控設(shè)備提高生活質(zhì)量,但是不需要用機(jī)械臂來吃飯。只有那些我們用其他方法不容易實(shí)現(xiàn),但是可以通過腦機(jī)接口用意念控制來實(shí)現(xiàn)的事情,才是最適合腦機(jī)接口產(chǎn)品發(fā)展的方向。在腦機(jī)接口產(chǎn)業(yè)發(fā)展的過程中,社會(huì)期望和實(shí)際產(chǎn)品效果之間會(huì)有一個(gè)磨合的過程,最后達(dá)到平衡。
NSR執(zhí)行主編蒲慕明參與了訪談。
-
無人機(jī)
+關(guān)注
關(guān)注
230文章
10529瀏覽量
182655 -
腦機(jī)接口
+關(guān)注
關(guān)注
9文章
381瀏覽量
21624
原文標(biāo)題:解密腦機(jī)接口:專訪CMU生物醫(yī)學(xué)工程系主任賀斌
文章出處:【微信號(hào):AItists,微信公眾號(hào):人工智能學(xué)家】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
發(fā)布評(píng)論請(qǐng)先 登錄
相關(guān)推薦
評(píng)論