1枚の脳インプラントで発話と身振りを同時解読：麻痺患者の分身アバターをリアルタイム操作

私たちが誰かと会話するとき、言葉だけでコミュニケーションを取ることはほとんどありません。身振り手振りを交えたり、うなずいたりする非言語動作が加わって初めて自然な対話になります。しかし、脳卒中やALSなどで身体が麻痺した患者向けの脳コンピュータインターフェース（BCI）はこれまで、発話かカーソル操作のどちらか一方を単独で読み取ることしかできませんでした。

カリフォルニア大学サンフランシスコ校（UCSF）の研究チームは、この壁を破る成果をNature Neuroscience誌に発表しました。脳表面に配置した単一のインプラントを使い、麻痺患者が試みた発話とジェスチャーを同時に解読して、リアルタイムで全身アバターを動かすことに成功したのです。

発話と動作の混信をどう防いだか

今回の臨床研究には、脳幹梗塞や筋萎縮性側索硬化症（ALS）によって重度の麻痺を抱える3名が参加しました。研究チームは感覚運動皮質を覆うように、253個の電極を備えた高密度皮質脳波（ECoG）アレイを埋め込みました。

同時に複数の運動を解読しようとすると、脳の神経信号は非線形に変化し、互いに干渉し合ってしまいます。単独の動作データだけで学習したモデルでは、患者が話しながら手を動かそうとした瞬間に精度が急落してしまいます。

そこでUCSFチームは、発話用とジェスチャー用で並列に走る機械学習デコーダーを構築しました。さらに、単独で行った試行と同時並行で行った試行の両方を学習データに組み込むことで、信号の重複に対応できるようにしました。その結果、ある被験者はジェスチャーで85パーセント、発話で75パーセントの精度を記録し、別の被験者は3回のテストブロックにおいて中央値で100パーセントの正解率を達成しました。

なぜ重要か

患者にとって、単に文字を画面に出力するだけでなく、身振りを伴う自分自身のアバターを獲得できる意味は非常に大きいです。失われた自己表現の身体性を取り戻す一歩になります。ただ、現時点でテストされている語彙やジェスチャーの数はかなり限定的で、日常の自由な雑談にそのまま使える段階ではない点には注意が必要です。

業界全体から見ると、外科的な侵襲リスクを抑える上で極めて実用的な道筋を示しました。発話用と身体動作機構用で頭蓋骨に複数の穴を開けてセンサーを別々に埋め込むのではなく、単一のECoGアレイだけでマルチタスク処理が可能であることを実証したからです。

この研究の優れた点は、実用現場で必ず起きる「発話と身振りの同時干渉」から逃げずにモデルを設計した点にあります。一方で、日常会話レベルの数千語に語彙を拡張した際に、表面電極の空間解像度だけでノイズを抑え込めるかどうかは、今後の大きな検証課題になると考えられます。