Учёные придумали технологию «mind captioning», которая по активности мозга может описывать, что человек видит или представляет в голове. И делает это с пугающей точностью.
Десять лет учёные могли угадывать, что мы видим или слышим, но расшифровать сложный контент вроде коротких видео и абстрактных форм было почти невозможно.
Раньше ИИ выявлял лишь ключевые слова, типа «человек», «прыжок», без деталей. Другие модели сами сочиняли предложения, но непонятно, что реально отражало мозг, а что выдумала нейросеть.
Новый метод работает иначе. В ходе эксперимента участник смотрел видео, где человек прыгает с вершины водопада. ИИ сначала выдавал «весенний поток», потом «над быстрым падающим водопадом», а к сотой попытке — «человек прыгает с высокого водопада на горном склоне».
То же работает и с воспоминаниями: мозг использует одинаковые паттерны для видения и памяти, а модель умеет их считывать. Метод использует неинвазивное функциональное МРТ, что делает его безопасным для участников. В будущем такой метод может улучшить интерфейсы «мозг–компьютер» и облегчить жизнь людям с речевыми нарушениями.
Но есть и темная сторона. Ментальная приватность под угрозой и в теории мысли можно использовать для наблюдения или манипуляций. Пока модели безопасны, так как нужно согласие участников, а приватные мысли ИИ не видит.