Meta навчила ШІ читати думки з точністю 78%

Система Brain2Qwerty v2 компанії Meta

Як повідомляє НВ — Техно: Система Brain2Qwerty v2 компанії Meta має значний потенціал у перетворенні мозкової активності на зв'язні речення без потреби в інвазивному хірургічному втручанні. У найуспішнішому експерименті ця система досягла точності розпізнавання слів 78%. Навчання моделі проводилося в Баскському центрі пізнання, мозку та мови в Сан-Себастьяні, Іспанія, де брали участь дев'ять здорових добровольців у віці від 25 до 56 років. Добровольці набрали понад 2500 речень протягом десяти сеансів, а дані їхньої мозкової активності збиралися за допомогою магнітоенцефелографії (МЕГ).

Магнітоенцефелографія вимірює мікроскопічні електричні поля, що виникають внаслідок нейронної активності, і ця технологія дозволила значно покращити результати розпізнавання. У випадку з Brain2Qwerty v2, понад половина розшифрованих речень містила не більше однієї помилки в слові. Для порівняння, попередня версія, Brain2Qwerty v1, у найуспішнішому випадку досягла лише 48% точності. Система Brain2Qwerty v2 використовує технологію розпізнавання образів, аналогічну тим, що застосовуються в чат-ботах ChatGPT та Llama від Meta.

Процес декодування інформації

Процес декодування інформації з мозкової активності включає три етапи:

• перетворення мозкових хвиль на токени;
• впорядкування символів у слова;
• перетворення набору символів і слів на речення за допомогою великої мовної моделі (LLM).

Результати цього дослідження знаменують перший випадок успішного застосування методу LLM для перетворення шумової мозкової активності у структуровані речення. Інженери Meta висловлюють впевненість у тому, що це дослідження має потенціал для реального покращення життя мільйонів людей, які страждають від уражень мозку, що заважають їм спілкуватися.

Дослідники також зазначають, що якщо тривале навчання на неінвазивних даних МЕГ зможе усунути необхідність нейрохірургії в таких випадках, це може означати трансформаційний зсув у догляді за пацієнтами. Компанія Meta сподівається, що результати цієї роботи, виконаної у відкритому режимі, сприятимуть розвитку нейронауки, що призведе до швидшого виявлення, діагностики та лікування неврологічних розладів. Код Brain2Qwerty v2 та попередньої версії вже опублікований в Інтернеті, що відкриває нові можливості для досліджень у цій галузі.

Цей прорив у технології декодування мозкової активності може суттєво змінити підходи до лікування пацієнтів з неврологічними розладами та забезпечити нові можливості для спілкування людей, які раніше не мали такої можливості.

Відкритий доступ до коду системи Brain2Qwerty v2 може заохотити подальші дослідження у сфері нейронауки та сприяти розробці нових методів лікування, які базуються на невід'ємній активності мозку.

Варто зазначити, що нові технології в області нейронауки, такі як дослідження мозку під наркозом, також демонструють вражаючі результати в розпізнаванні мови та прогнозуванні слів. Ці досягнення відкривають нові горизонти для розуміння людської свідомості та покращення якості життя людей з обмеженими можливостями.