-非法字符-自閉癥癥狀[大人自閉癥是什么癥狀]

腦機(jī)接口（BCI）又有新動(dòng)態(tài) ！

前次是馬斯克 Neuralink 公司完成了山公用意念操控光標(biāo)打游戲。這次，斯坦福大學(xué)、霍華德?休斯醫(yī)學(xué)研討所（HHMI）、布朗大學(xué)等團(tuán)隊(duì)用 BCI 完成了癱瘓患者將腦中的 “筆跡” 轉(zhuǎn)化成屏幕字句。

“這項(xiàng)研討代表了 BCI 和機(jī)器學(xué)習(xí)技能開(kāi)展的重要里程碑 ，相關(guān)研討正在提醒人腦怎么操控像通訊這樣雜亂的進(jìn)程，為改進(jìn)神經(jīng)損害和癱瘓者的日子供給了重要根底?！?美國(guó)國(guó)立衛(wèi)生研討院腦科學(xué)方案（NIH BRAIN Initiative）主任約翰?恩蓋（John Ngai）博士在承受媒體采訪(fǎng)時(shí)說(shuō)道。

圖丨腦機(jī)接口 “手寫(xiě)輸入” 進(jìn)程（來(lái)歷：Twitter）

研討人員開(kāi)發(fā)了一種皮質(zhì)內(nèi) BCI，初次對(duì)癱瘓患者書(shū)寫(xiě)字母相關(guān)的神經(jīng)信號(hào)進(jìn)行遞歸神經(jīng)網(wǎng)絡(luò)解碼，然后在電腦屏幕上實(shí)時(shí)顯現(xiàn)這些字母的打字版別。

圖丨Nature 封面圖（來(lái)歷：Nature）

5 月 12 日，相關(guān)研討以《經(jīng)過(guò)手寫(xiě)完成高性能認(rèn)識(shí)文本轉(zhuǎn)化》“High-performance brain-to-text communication via handwriting” 為題宣布在 Nature，并且登上 Nature 封面。該研討為 BCI 拓荒了一種新辦法，并證明了癱瘓患者在神經(jīng)麻木多年后仍可完成精準(zhǔn)解碼、快速、靈敏運(yùn)動(dòng)。

圖丨相關(guān)論文截圖（來(lái)歷：Nature）

該研討論文作者之一、HHMI 研討員克里希納?謝諾伊（Krishna Shenoy）在承受媒體采訪(fǎng)時(shí)表明，“此次研討的最大的立異是初次破譯了與手寫(xiě)筆跡有關(guān)的大腦信號(hào)，能夠讓癱瘓患者不必手也能快速打字?！?/p>

據(jù)了解，該團(tuán)隊(duì)的研討參加者是一位 65 歲的截癱患者，其手因脊髓損害而癱瘓。經(jīng)過(guò)運(yùn)用該 BCI 技能，其字母輸入在線(xiàn)原始精度為 94.1％，離線(xiàn)通用精度為 99％以上。

圖丨實(shí)時(shí)手寫(xiě)測(cè)驗(yàn)的神經(jīng)解碼 （來(lái)歷：Nature）

那么，該技能是怎么做到 “解讀” 大腦信號(hào)的呢？

該技能的效果原理是 “兩個(gè)細(xì)小的植入電極陣列將操控手和手臂的大腦區(qū)域信息傳遞給相關(guān)算法”，該算法將其轉(zhuǎn)化為出現(xiàn)在屏幕上的字母。

圖丨受試者手寫(xiě)筆跡（來(lái)歷：NPG Press）

首要，要求參加者仿制屏幕上顯現(xiàn)的字母，其間包含 26 個(gè)小寫(xiě)字母以及一些標(biāo)點(diǎn)符號(hào)：“>” 用作空格，“?” 用作句號(hào)。一起，植入的電極記錄了大約 200 個(gè)別神經(jīng)元的大腦活動(dòng)，這些神經(jīng)元在大腦 “寫(xiě)” 每個(gè)個(gè)別特征時(shí)反響不同。

經(jīng)過(guò)一系列練習(xí)后，BCI 的計(jì)算機(jī)算法學(xué)習(xí)了怎么辨認(rèn)與單個(gè)字母相對(duì)應(yīng)的神經(jīng)形式，然后使參加者能夠 “編寫(xiě)” 曾經(jīng)未打印過(guò)的新語(yǔ)句，并且計(jì)算機(jī)能夠?qū)崟r(shí)顯現(xiàn)字母。

斯坦福大學(xué) HHMI 研討科學(xué)家弗蘭克?威利特（ Frank Willett）博士在承受媒體采訪(fǎng)時(shí)說(shuō)：“這種辦法是對(duì)現(xiàn)有通訊 BCI 的顯著改進(jìn)，后者依賴(lài)于運(yùn)用大腦在屏幕上移動(dòng)光標(biāo)來(lái)‘鍵入’單詞。測(cè)驗(yàn)寫(xiě)每個(gè)字母會(huì)在大腦中發(fā)生共同的活動(dòng)形式，使計(jì)算機(jī)更簡(jiǎn)略以更高的精確性和速度來(lái)辨認(rèn)所寫(xiě)的內(nèi)容?！?/p>

圖丨測(cè)驗(yàn)手寫(xiě)的神經(jīng)表征（來(lái)歷：Nature）

其實(shí)，該技能的底層算法邏輯與 Siri 有相似之處。例如，問(wèn) Siri “今天天氣怎么”，Siri 經(jīng)屢次體系練習(xí)、辨認(rèn)、解讀，最終做出反響。

簡(jiǎn)略來(lái)講，首要提取腦電波信號(hào)，然后生成可視化圖畫(huà)處理，再對(duì)可視化的圖畫(huà)對(duì)應(yīng)進(jìn)行信號(hào)辨認(rèn)。

密西根州立大學(xué)生物醫(yī)學(xué)工程系助理教授李金星告知 DeepTech，原始的可視化圖畫(huà)并不代表便是最終辨認(rèn)的成果，研討人員經(jīng)過(guò)一系列練習(xí)，不斷對(duì)信號(hào)進(jìn)行修正和改進(jìn)。辨認(rèn)的精準(zhǔn)度從試驗(yàn)初期的 30% 進(jìn)步到了 99%。

李金星以為，該技能最大的打破是初次完成了用腦電波手寫(xiě)打字。他進(jìn)一步解說(shuō)，“完成手寫(xiě)字母的輸出是對(duì)十分靈敏的動(dòng)作的解碼，用戶(hù)在幻想字母的手寫(xiě)筆跡時(shí)，腦電波的信號(hào)比移動(dòng)光標(biāo)愈加豐厚，因而也愈加精準(zhǔn)?！?/p>

圖丨時(shí)刻改變的添加能夠使運(yùn)動(dòng)更簡(jiǎn)略解碼（來(lái)歷：Nature）

除此之外，該技能還具有輸入速度快、運(yùn)用靈敏的長(zhǎng)處。

?速度快。

華中科技大學(xué) AI 與自動(dòng)化學(xué)院腦機(jī)接口與機(jī)器學(xué)習(xí)試驗(yàn)室主任伍冬睿表明，該技能輸入速度是一大前進(jìn)，可接近正常人在智能手機(jī)的打字速度。研討中試驗(yàn)者輸入速度是 90 字符 / 分鐘，而正常人在智能手機(jī)的打字速度是 115 字符 / 分鐘。

現(xiàn)在，根據(jù)頭皮腦電（EEG）的 P300 或運(yùn)動(dòng)幻想范式的文字輸入速度約為 1-5 個(gè)字符 / 分鐘，穩(wěn)態(tài)視覺(jué)誘發(fā)電位（SSVEP）范式的速度可達(dá) 60 字符 / 分鐘。植入式腦機(jī)接口體系可操控二維光標(biāo)移動(dòng)來(lái)輸入文字，可是速度不超越 40 字符 / 分鐘。

?運(yùn)用靈敏。

穩(wěn)態(tài)視覺(jué)誘發(fā)電位輸入速度盡管也比較快，可是需求顯現(xiàn)器，并且用戶(hù)要十分專(zhuān)心地凝視顯現(xiàn)器上閃耀的字符，并且眼睛被徹底占用，也易疲憊。

一般來(lái)說(shuō)，其輸入速度（即每個(gè)字符閃耀多長(zhǎng)時(shí)刻）也是體系預(yù)先設(shè)置好的，而不是由用戶(hù)自主操控的。

“該技能能夠讓用戶(hù)自己操控輸入速度，無(wú)需其他外在設(shè)備合作，也能夠把眼睛徹底解放出來(lái)，因而更為靈敏?！?伍冬睿說(shuō)。

圖丨受試者試驗(yàn)中（來(lái)歷：NPG Press）

該技能盡管優(yōu)勢(shì)顯著，可是在運(yùn)用時(shí)還有一些困難需求戰(zhàn)勝。例如，怎樣辨認(rèn) 2 和 Z 這種十分附近的字符。

伍冬睿以為，處理該問(wèn)題的的途徑可考慮以下兩點(diǎn)：

首要，關(guān)于比較附近的字符，能夠規(guī)劃一些代替字符。比方，論文中提出了優(yōu)化的字符，讓字符間差異盡量大一點(diǎn)，以更簡(jiǎn)略區(qū)別。假如 2 被規(guī)劃成相似 “∩” 的形狀，就很簡(jiǎn)略與 Z 區(qū)別。

其次，結(jié)合上下文區(qū)別附近字符。比方，字母 Z 的前后一般是其他英文字母，而 2 的前后或許是其他數(shù)字或空格。憑借這些上下文信息，也有助于區(qū)別這兩個(gè)字符。

據(jù)媒體報(bào)道，研討團(tuán)隊(duì)下一步將測(cè)驗(yàn)新體系，將手寫(xiě)輸入文本作為新體系的一部分，該體系還包含點(diǎn)擊導(dǎo)航，相似于當(dāng)時(shí)智能手機(jī)上運(yùn)用的導(dǎo)航，包含測(cè)驗(yàn)語(yǔ)音解碼。

腦陸科技合伙人、AI 算法擔(dān)任人馬鵬程以為，BCI 意念打字可落地的方向與目標(biāo)集體可清晰分為兩類(lèi)：

第一類(lèi)是針對(duì)有運(yùn)動(dòng)障礙的集體，經(jīng)過(guò)腦機(jī)接口設(shè)備的輔佐，運(yùn)用意念打字功用完成與外界無(wú)障礙交流與交流，處理中心的通訊與操控問(wèn)題；

第二類(lèi)是正常人群的高效交互東西需求，意念打字成為與文本輸入、語(yǔ)音輸入并行的新的交互方法，或許會(huì)成為社會(huì)變革、推進(jìn)下一輪技能革命最重要的導(dǎo)火線(xiàn)。

圖丨腦機(jī)接口（來(lái)歷：Pixabay）

而該研討想要進(jìn)一步落地開(kāi)展，從技能視點(diǎn)，還需求不斷完善。

?該研討現(xiàn)在只在一位用戶(hù)上試驗(yàn)成功，能否推行到更多用戶(hù)還需求進(jìn)一步驗(yàn)證。

實(shí)踐上，該研討中的 T5 用戶(hù)是之前試驗(yàn)中 3 個(gè)用戶(hù)中效果最好的用戶(hù)，所以被用來(lái)做這個(gè)試驗(yàn)?！凹偃缙渌脩?hù)也參加本試驗(yàn)的話(huà)，或許效果會(huì)差一些?！?伍冬睿說(shuō)。

李金星表明，該技能的未來(lái)研討需求考慮個(gè)別差異性。每個(gè)人的腦電波信號(hào)或許不太相同，所以，未來(lái)需求深度學(xué)習(xí)和技能數(shù)據(jù)不斷晉級(jí)以及更多的臨床事例研討。

?字符精準(zhǔn)度需進(jìn)一步進(jìn)步。

本研討運(yùn)用了 26 個(gè)英文字符和 5 個(gè)特別字符，共 31 個(gè)字符?！皩?shí)踐中常用的字符比這些要多，比方 10 個(gè)數(shù)字就沒(méi)有被考慮進(jìn)去。更大的字符集應(yīng)該會(huì)下降精確度?！?伍冬睿說(shuō)。

?完成輸入的雜亂功用。

當(dāng)時(shí)試驗(yàn)不論成果對(duì)錯(cuò)，用戶(hù)都持續(xù)輸入。而正常的文本編輯中，用戶(hù)需求糾正過(guò)錯(cuò)。怎么完成光標(biāo)跳轉(zhuǎn)、刪去、刺進(jìn)等更雜亂的功用，是需求進(jìn)一步考慮的問(wèn)題。

?腦電信號(hào)易用性的進(jìn)步。

腦電信號(hào)并非平穩(wěn)，該體系每次運(yùn)用前需求從頭校準(zhǔn)，會(huì)花費(fèi)用戶(hù)的時(shí)刻和精力。該技能需求更好的算法以縮短乃至消除校準(zhǔn)，進(jìn)步易用性。

?進(jìn)步電極質(zhì)量，下降手術(shù)危險(xiǎn)。

該技能需求精細(xì)手術(shù)植入式電極，可是由于人體排異反響，該類(lèi)電極并非一了百了，運(yùn)用一段時(shí)刻后信號(hào)質(zhì)量會(huì)下降，需求從頭植入，添加了手術(shù)危險(xiǎn)和用戶(hù)花費(fèi)?！斑M(jìn)步電極質(zhì)量，下降排異反響，對(duì)該技能大規(guī)模運(yùn)用是十分重要的?！?伍冬睿表明。

?設(shè)備的小型化與無(wú)線(xiàn)。設(shè)備小型化和無(wú)線(xiàn)化將有利于用戶(hù)運(yùn)動(dòng)、操作的便利性。

伍冬睿以為，未來(lái)三到五年，跟著電極壽數(shù)、靈敏度和密度的進(jìn)一步進(jìn)步，以及解碼算法的進(jìn)一步開(kāi)展，該技能有望更快、更精確。

談及產(chǎn)業(yè)化落地，馬鵬程表明，以咱們?cè)诟餍袠I(yè) AI+BCI 的大規(guī)模實(shí)踐運(yùn)用經(jīng)歷視點(diǎn)來(lái)看，AI 結(jié)合腦機(jī)接口技能（侵入式及非侵入式）完成意念打字，在構(gòu)建高質(zhì)量的大規(guī)模模型練習(xí)數(shù)據(jù)集后，結(jié)合實(shí)踐的意念打字需求的運(yùn)用場(chǎng)景進(jìn)行產(chǎn)品規(guī)劃?！拔乙詾椋瑧?yīng)該能很快研宣布可實(shí)踐運(yùn)用的腦機(jī)意念打字產(chǎn)品。未來(lái)產(chǎn)業(yè)化的速度有或許超出咱們所有人的幻想?！?/p>

圖｜植入大腦的微型電極陣列（來(lái)歷：BrainGate）

假如未來(lái)腦機(jī)接口技能老練，將會(huì)怎么樣呢？

李金星表明，短期來(lái)看，腦機(jī)接口的下一個(gè)打破或許會(huì)在非侵入的輸入技能開(kāi)展，經(jīng)過(guò)腦刺激將外界信號(hào)傳遞給大腦，然后完成對(duì)神經(jīng)體系損害疾病（如帕金森、癲癇等）以及心理疾?。ㄈ缫钟舭Y、自閉癥等）的緩解效果。

他以為，從長(zhǎng)遠(yuǎn)來(lái)看，或許人類(lèi)只需求大腦而存在，或許會(huì)真實(shí)完成“人機(jī)共融”。