ИИ научился подглядывать в мозг. Пока только если вы лежите в аппарате МРТ
Исследователи из Института Вейцмана (Израиль) показали систему Brain-IT, которая по активности мозга может восстановить изображение, на которое смотрит человек. И это уже не условное:
Нейросеть пытается сохранить цвета, композицию и положение объектов — то есть воссоздать саму сцену.
🧠 Работает это примерно так
Человек лежит в функциональном МРТ и смотрит картинки. Сканер фиксирует изменения кровотока в участках мозга, связанных со зрением.
Дальше ИИ получает этот набор сигналов и решает две задачи отдельно:
А затем генеративная модель собирает из этих подсказок картинку.
Получается местами довольно жутковато. Исходная фотография и реконструкция могут быть очень похожи по общей сцене — хотя модель всё ещё ошибается. Например, торт она однажды превратила в стопку бутербродов, а собаку в ванной — в козу в ванной.
Самое интересное достижение даже не качество картинки. Раньше подобные системы приходилось долго обучать под конкретного человека — иногда требовались десятки часов его МРТ-записей.
Новая система использует данные сразу нескольких людей и способна адаптироваться к новому человеку примерно за час сканирования.
Команда обучала её на данных восьми добровольцев, каждый из которых видел тысячи изображений. Но сразу важная граница:
мысли онапока не читает. Человек должен лежать в огромном МРТ-сканере и действительно смотреть на изображение. Тайно выяснить по дороге в метро, о чём вы думаете, никто пока не может. Кроме, пожалуй, победителей «Битвы экстрасенсов»
И сны тоже ещё не расшифровывают. Это следующая цель исследователей: попробовать восстанавливать воображаемые образы, воспоминания и когда-нибудь — содержимое снов. Возможно и более практичное применение — помочь людям с тяжёлыми нарушениями движения и речи сообщать, что они видят или представляют.
Приватность мышления становится вполне решаемым техническим вопросом, но пока до настоящего чтения мыслей далеко. Правда, сам факт уже немного странный: то, что ещё недавно существовало только у вас в голове, теперь можно увидеть снаружи. Для этого пока нужен огромный МРТ-сканер, куча дорогого оборудования и лаборатория.
Но первый шаг от «мозг — закрытая коробка» к «мы можем кое-что оттуда достать» уже сделан.
max.ru/channel_v_seti
Исследователи из Института Вейцмана (Израиль) показали систему Brain-IT, которая по активности мозга может восстановить изображение, на которое смотрит человек. И это уже не условное:
«Кажется, там была собака»
Нейросеть пытается сохранить цвета, композицию и положение объектов — то есть воссоздать саму сцену.
🧠 Работает это примерно так
Человек лежит в функциональном МРТ и смотрит картинки. Сканер фиксирует изменения кровотока в участках мозга, связанных со зрением.
Дальше ИИ получает этот набор сигналов и решает две задачи отдельно:
— что человек видит;
— где именно это находится в кадре и какого оно цвета.
А затем генеративная модель собирает из этих подсказок картинку.
Получается местами довольно жутковато. Исходная фотография и реконструкция могут быть очень похожи по общей сцене — хотя модель всё ещё ошибается. Например, торт она однажды превратила в стопку бутербродов, а собаку в ванной — в козу в ванной.
Самое интересное достижение даже не качество картинки. Раньше подобные системы приходилось долго обучать под конкретного человека — иногда требовались десятки часов его МРТ-записей.
Новая система использует данные сразу нескольких людей и способна адаптироваться к новому человеку примерно за час сканирования.
Команда обучала её на данных восьми добровольцев, каждый из которых видел тысячи изображений. Но сразу важная граница:
мысли она
И сны тоже ещё не расшифровывают. Это следующая цель исследователей: попробовать восстанавливать воображаемые образы, воспоминания и когда-нибудь — содержимое снов. Возможно и более практичное применение — помочь людям с тяжёлыми нарушениями движения и речи сообщать, что они видят или представляют.
Приватность мышления становится вполне решаемым техническим вопросом, но пока до настоящего чтения мыслей далеко. Правда, сам факт уже немного странный: то, что ещё недавно существовало только у вас в голове, теперь можно увидеть снаружи. Для этого пока нужен огромный МРТ-сканер, куча дорогого оборудования и лаборатория.
Но первый шаг от «мозг — закрытая коробка» к «мы можем кое-что оттуда достать» уже сделан.
max.ru/channel_v_seti