Meta создала «мозговой декодер», который с помощью ИИ-модели расшифровывает мозговую активность и преобразует в речь. Инструмент можно использовать для мысленного общения между пользователями, которые произносят слова и фразы у себя в голове. Об исследовании компания рассказала в корпоративном блоге.
Технология Meta отличается от аналогичных разработок тем, что основывается на неинвазивных методах записи мозговой активности. Компания использовала электроэнцефалографию (ЭЭГ) и магнитоэнцефалографию (МЭГ), в которых применяются только наружные датчики. Данные от ЭЭГ и МЭГ менее точны, чем информация с датчиков, вживлённых в мозг, поэтому для большей эффективности пришлось обработать гораздо больший объём исходных данных.
ИИ фиксировал, как мозг участников реагирует на аудиокниги и отдельные фразы, а затем вычленял из текста нужные слова и составлял «словарь», по которому реализовали обратный процесс — преобразование мыслей в речь. Исследователи достигли точности в 73% при использовании набора из 793 наиболее часто используемых в повседневной жизни слов.
В будущем ИИ, по задумке исследователей, сможет точнее определять слова и фразы, используя более широкий исходный словарь. Разработка должна помочь не только миллионам людей, которые не имеют возможности говорить или писать, но и в изучении мозга человека.
* Meta признана экстремистской организацией на территории РФ