Brain-IT сократила адаптацию реконструкции по fMRI с 40 часов до одного
Трансформер связывает функциональные кластеры вокселей с локальными признаками изображения.
Высокоуровневые признаки задают смысл сцены, а низкоуровневые помогают восстановить грубую композицию.
Один час записей нового человека дал результат, сравнимый с методами, обученными на 40 часах; осмысленные образы возникали уже за 15 минут.
Почему важно
Сокращение персональной калибровки делает реконструкцию зрительного опыта практичнее для исследований и будущих интерфейсов связи.