Brain2Qwerty v2

Qu'est-ce que Brain2Qwerty v2 ?

Brain2Qwerty v2 est une interface cerveau-ordinateur non invasive développée par Meta qui décode les signaux MEG bruts du cerveau en texte. Grâce à l'apprentissage profond de bout en bout et aux grands modèles de langage, elle atteint jusqu'à 78 % de précision au niveau des mots sans nécessiter d'implant chirurgical. Le système traite les enregistrements de magnétoencéphalographie (MEG) de participants qui tapent naturellement, traduisant l'activité neuronale directement en phrases cohérentes en temps réel.

À qui s'adresse-t-il

• Chercheurs en neurosciences — ceux qui étudient le décodage cérébral, le traitement du langage ou les interfaces neuronales non invasives et qui ont besoin de code et de jeux de données open source pour faire avancer leurs travaux.
• Cliniciens traitant les troubles de la communication — professionnels travaillant avec des patients présentant des lésions cérébrales qui empêchent la parole, à la recherche d'alternatives évolutives aux neuroprothèses invasives.
• Ingénieurs en IA et apprentissage automatique — développeurs intéressés par l'application de l'apprentissage profond de bout en bout et du réglage fin des LLM à des signaux biologiques bruités pour la génération de langage en temps réel.

Fonctionnalités clés

Apprentissage profond de bout en bout à partir de signaux bruts

Brain2Qwerty v2 contourne les pipelines traditionnels fabriqués à la main en décodant directement à partir des enregistrements MEG bruts du cerveau. Cette approche élimine le besoin d'ingénierie manuelle des caractéristiques et capture des schémas neuronaux que les méthodes conventionnelles manquent.

Réglage fin des LLM sur des données neuronales

Les grands modèles de langage sont affinés sur des enregistrements neuronaux pour exploiter le contexte sémantique, comblant ainsi le fossé entre les signaux cérébraux bruités et la production d'un langage cohérent. Cela permet au système de reconstituer des phrases entières même à partir d'entrées imparfaites.

Décodage de phrases en temps réel

Le pipeline fonctionne en temps réel, décodant l'activité cérébrale en texte pendant que les participants tapent. Avec une précision au niveau des mots de 61 % en moyenne et jusqu'à 78 % pour le meilleur participant, il approche les niveaux de performance auparavant réservés aux implants chirurgicaux.

Publication du code et du jeu de données open source

Meta publie le code d'entraînement complet pour Brain2Qwerty v1 et v2, tandis que le Basque Center on Cognition, Brain, and Language (BCBL) publie le jeu de données v1. Cette approche ouverte vise à accélérer les avancées en neurosciences dans tout le domaine.

Ce qui se démarque

"Brain2Qwerty v2 reconstruit des phrases de manière cohérente à partir d'entrées neuronales bruitées, atteignant un taux de précision au niveau des mots de 61 %, améliorant considérablement les 8 % de précision au niveau des mots des autres méthodes non invasives."

Ce bond de 8 % à 61 % de précision moyenne représente un changement fondamental dans ce que les interfaces cerveau-ordinateur non invasives peuvent accomplir. La capacité du système à faire évoluer ses performances de manière log-linéaire avec le volume de données suggère que des gains supplémentaires sont possibles par la seule collecte de données, comblant potentiellement complètement l'écart avec les approches chirurgicales.

À considérer si…

Vous travaillez sur le décodage neuronal, la restauration de la communication pour les patients atteints de lésions cérébrales, ou la recherche en neurosciences ouvertes. Brain2Qwerty v2 est particulièrement pertinent si vous avez besoin d'une alternative non invasive et évolutive aux neuroprothèses chirurgicales et souhaitez accéder à des codes d'entraînement et des jeux de données reproductibles.