


Brain2Qwerty v2は、Metaが開発した非侵襲型ブレイン・コンピュータ・インターフェースで、生のMEG脳信号をテキストにデコードします。エンドツーエンドの深層学習とLLMを活用し、手術を必要とせずに最大78%の単語精度を達成します。
Brain2Qwerty v2 は、Meta が開発した非侵襲型ブレイン・コンピュータ・インターフェースであり、生の MEG 脳信号をテキストにデコードします。エンドツーエンドの深層学習と大規模言語モデルを活用し、外科的インプラントを一切必要とせずに最大 78% の単語精度を達成します。本システムは、自然にタイピングする参加者から得られた脳磁図(MEG)記録を処理し、神経活動をリアルタイムで一貫性のある文章に直接変換します。
Brain2Qwerty v2 は、従来の手作業によるパイプラインを回避し、生の MEG 脳記録から直接デコードします。このアプローチにより、手動による特徴量エンジニアリングが不要になり、従来の手法では見逃されていた神経パターンを捉えることができます。
大規模言語モデルは、意味的コンテキストを活用するために神経記録でファインチューニングされ、ノイズの多い脳信号と一貫性のある言語出力との間のギャップを埋めます。これにより、不完全な入力からでも完全な文章を復元することが可能になります。
パイプラインはリアルタイムで動作し、参加者がタイピングする際に脳活動をテキストにデコードします。平均 61%、最良の参加者では最大 78% の単語精度を達成し、これまで外科的インプラントに限られていた性能レベルに迫ります。
Meta は Brain2Qwerty v1 と v2 の両方の完全なトレーニングコードを公開し、バスク認知・脳・言語センター(BCBL)は v1 データセットを公開します。このオープンなアプローチにより、分野全体の神経科学の進歩を加速することを目指しています。
「Brain2Qwerty v2 は、ノイズの多い神経入力から文章を首尾一貫して復元し、61% の単語精度を達成します。これは、他の非侵襲的手法による 8% の単語精度から大幅に改善されたものです。」
平均精度が 8% から 61% へと飛躍したことは、非侵襲型ブレイン・コンピュータ・インターフェースが達成できることの根本的な変化を表しています。システムの性能がデータ量に対して対数線形的にスケールするという特性は、データ収集のみによってさらなる向上が可能であり、外科的アプローチとのギャップを完全に埋める可能性があることを示唆しています。
神経デコード、脳病変患者のコミュニケーション機能回復、またはオープンな神経科学研究に取り組んでいる場合。Brain2Qwerty v2 は、外科的神経補綴に代わる非侵襲的で拡張可能な代替手段を必要とし、再現可能なトレーニングコードとデータセットへのアクセスを希望する場合に特に適しています。
検討すべき他のツール
Loading comments…
メーカー
modemfox
プロジェクト情報
製品キーワード