Тежко парализирана жена успя да говори чрез аватар с помощта на технология, която преобразува мозъчните ѝ сигнали в реч и изражения на лицето.
Постижението поражда надежди, че интерфейсите мозък-компютър (BCI) могат да бъдат на ръба на преобразяването на живота на хората, които са загубили способността си да говорят поради заболявания като инсулти и амиотрофична латерална склероза (ALS), съобщава "Гардиън".
Досега пациентите трябваше да разчитат на разочароващо бавни синтезатори на реч, които изписват думи с помощта на проследяване на очите или малки движения на лицето, което прави естествения разговор невъзможен.
Най-новата технология използва миниатюрни електроди, имплантирани на повърхността на мозъка, за откриване на електрическа активност в частта на мозъка, която контролира говора и движенията на лицето. Тези сигнали се преобразуват директно в речта и изражението на лицето на дигитален аватар, включително усмивка, намръщване или изненада.
"Нашата цел е да възстановим пълноценния, въплътен начин на общуване, който наистина е най-естественият начин да разговаряме с другите", казва професор Едуард Чанг, който ръководи работата в Калифорнийския университет в Сан Франциско (UCSF). "Тези постижения ни приближават много повече до превръщането на това в реално решение за пациентите."
Пациентката, 47-годишната жена Ан, е тежко парализирана, тъй като преди повече от 18 години е получила инсулт на мозъчния ствол. Тя не може да говори или да пише и обикновено общува с помощта на технология за проследяване на движенията, която ѝ позволява бавно да избира букви със скорост до 14 думи в минута. Тя се надява, че технологията на аватара ще ѝ позволи в бъдеще да работи като консултант.
Екипът имплантира тънък колкото хартия правоъгълник от 253 електрода на повърхността на мозъка на Ан в областта, която е от решаващо значение за говора. Електродите прихващат мозъчните сигнали, които, ако не беше инсултът, щяха да контролират мускулите на езика, челюстта, ларинкса и лицето ѝ, предава БГНЕС.
ОЩЕ: В Япония за първи път проведоха операция на гръбначен стълб с прилагане на iPS клетки (actualno.com)
Thanks to some awesome scientists, a #paralyzed woman just spoke in her own voice for the first time in 17 years
— Gina (@CissyBGood67) August 24, 2023
😃❤️🥲https://t.co/yz4AQDM7Q8
Хедър Рендулик използва нож и вилица с помощта на електроди, имплантирани в шията ѝ, след като е загубила функционалната употреба на лявата си ръка вследствие на инсулт през 2012 г.
След имплантирането Ан работи с екипа, за да обучи алгоритъма на системата за изкуствен интелект да открива уникалните й мозъчни сигнали за различни звуци на речта, като повтаря многократно различни фрази.
Компютърът научи 39 характерни звука, а езиковият модел в стил Chat GPT беше използван за преобразуване на сигналите в разбираеми изречения. След това той е използван за управление на аватар с персонализиран глас, който звучи като гласа на Ан преди травмата, въз основа на запис на нейния говор по време на сватбата ѝ.
Технологията не е съвършена, като в 28% от случаите при тестово изпитване, включващо повече от 500 фрази, тя декодираше думите неправилно и генерираше текст от мозъка със скорост 78 думи в минута, в сравнение с 110-150 думи, които обикновено се произнасят в естествен разговор.
Въпреки това учените твърдят, че последните постижения в областта на точността, скоростта и усъвършенстването показват, че технологията вече е на етап, в който може да бъде практически полезна за пациентите.
Професор Ник Рамзи, невролог от Университета в Утрехт, Нидерландия, който не е участвал в изследването, заяви: "Това е доста голям скок в сравнение с предишните резултати. Намираме се в критична точка."
Следващата важна стъпка е да се създаде безжична версия на BCI, която да може да се имплантира под черепа.
"Даването на възможност на хората да управляват свободно собствените си компютри и телефони с тази технология би имало дълбоко въздействие върху тяхната независимост и социални взаимодействия", посочва д-р Дейвид Моузес, доцент по неврологична хирургия в UCSF и съавтор на изследването.
ОЩЕ: Нова технология помага за по-добро диагностициране при парализа след инсулт
