← Вернуться к списку

Hi-DREAM: Иерархическая диффузия, вдохновлённая мозгом, для реконструкции фМРТ посредством энкодера зон интереса (ROI) и визуального отображения

Краткое содержание

arXiv:2511.11437v1 Тип объявления: новое Аннотация: Карта активности человеческого мозга применительно к естественным изображениям открывает новые перспективы изучения зрения и познания, однако современные декодеры на основе диффузии сталкиваются с фундаментальной проблемой: большинство из них непосредственно используют данные фМРТ без анализа того, каким образом визуальная информация организована по всей коре головного мозга. Это игнорирует иерархический характер обработки мозгом и размывает роли ранних, средних и поздних зрительных зон. Мы предлагаем Hi-DREAM — вдохновлённый устройством мозга условный диффузионный подход, который делает кортикальную организацию явной. Адаптер региона интереса (ROI) группирует сигналы фМРТ в ранние/средние/поздние потоки и преобразует их в многослойную пирамиду коры, согласованную с глубиной сети типа U-Net (мелкомасштабные уровни сохраняют структуру и контуры; глубокие слои акцентируют внимание на объектах и семантике). Лёгкая сеть ControlNet, согласованная по глубине, вводит эти специфичные для каждого уровня подсказки во время процесса деноязации. В результате получается эффективный и интерпретируемый декодер, в котором каждый сигнал играет роль, аналогичную мозгу, позволяя...

Полный текст статьи пока не загружен.