Исходный размер 667x1001

Эмоция как нейронный код: визуализация состояния через нейротехнологии

Данный проект является учебной работой студента Школы дизайна или исследовательской работой преподавателя Школы дизайна. Данный проект не является коммерческим и служит образовательным целям
Проект принимает участие в конкурсе

Введение

Современные нейротехнологии всё активнее работают с тем, что долгое время воспринималось как принципиально не фиксируемая область человеческого опыта — эмоциями и внутренними переживаниями. Системы распознавания эмоций, EEG-интерфейсы, аффективные вычисления и художественные практики, использующие биоданные, формируют новую среду, в которой эмоциональное состояние становится доступным для регистрации, анализа и визуального воспроизведения. На фоне развития цифровых интерфейсов и генеративных систем возникает вопрос о том, каким образом технология преобразует внутреннее переживание во внешний образ и что происходит с эмоцией в процессе такого перевода.

Выбор темы связан с интересом к пересечению нейронауки, визуальной культуры и искусства новых медиа. Особое значение представляет ситуация, в которой эмоция перестаёт существовать исключительно в пространстве субъективного опыта и получает техническую форму через данные, графику, звук или интерактивную среду. Данная тема позволяет рассмотреть мозг одновременно как источник сигнала, объект интерпретации и медиум художественного высказывания. Кроме того, исследование затрагивает более широкий культурный контекст, связанный с возрастающей зависимостью человека от систем цифрового считывания и алгоритмической интерпретации поведения.

Ключевой вопрос исследования:

Может ли эмоция, будучи нейронным процессом, быть объективно визуализирована без потери её субъективного содержания?

Фокус исследования сосредоточен на художественных и технологических практиках, работающих с визуализацией эмоциональных состояний через нейроданные. В качестве основного материала рассматриваются проекты нейроарта и биоарта, EEG-визуализации, генеративные аудиовизуальные системы. Принцип отбора кейсов строится вокруг нескольких критериев. Во-первых, в исследование включаются проекты, в которых эмоциональное состояние пользователя или автора становится непосредственным источником визуального или звукового результата. Во-вторых, внимание уделяется работам, где нейротехнология выступает не вспомогательным инструментом, а центральным механизмом художественного процесса. В-третьих, кейсы подбираются таким образом, чтобы проследить различные способы интерпретации эмоций: от научной классификации и алгоритмического распознавания до художественной абстракции и сенсорного опыта.

Исследование исходит из гипотезы о том, что нейротехнологии не воспроизводят эмоцию напрямую, а создают её интерпретированную модель, основанную на биологических сигналах, алгоритмах обработки и визуальных кодах. В результате возникает новая форма медиальности, в которой внутреннее состояние человека существует одновременно как физиологический процесс, цифровые данные и художественный образ.

Структура исследования организована по принципу постепенного перехода от нейронаучной теории к художественной практике и далее — к критическому осмыслению полученных визуальных форм. При выборе текстовых источников основное внимание уделяется междисциплинарным исследованиям, объединяющим нейронауку, медиа-теорию и contemporary art. Источники анализируются не только как набор фактической информации о технологиях, но и как разные способы понимания эмоции: биологический, вычислительный, художественный и философский. Такой подход позволяет избежать исключительно технического описания нейроинтерфейсов и рассмотреть их культурные и визуальные последствия.

Оглавление:

Введение

1. Эмоция как объект нейронауки 2. От переживания к данным: нейротехнологии и аффективные вычисления 3. Визуализация эмоции: художественные практики и нейроарт 4. Проблема объективности: можно ли визуализировать переживание? 5. Мозг как медиа: эмоциональный интерфейс будущего

Заключение Библиография Источники изображений

Эмоция как объект нейронауки

Современная нейронаука рассматривает эмоции как биологически обусловленные процессы, связанные с активностью распределённых нейронных систем и регуляцией поведения. Постепенно формируется представление об эмоции как о наблюдаемом и частично измеримом нейрофизиологическом явлении, что сближает её с другими параметрами мозговой активности.

Важным теоретическим основанием выступает концепция «церебральности», описанная Фернандо Видалем, где мозг становится центральной моделью объяснения человеческого опыта. В этом контексте эмоция интерпретируется через её нейронные корреляты, а субъективное переживание оказывается включённым в более широкую систему биологических объяснений.

слева: устройство платформы Emotiv EEG справа: Устройство OpenBCI Galea с гарнитурой Varjo XR-3

Одним из неотъемлемых способов изучения нейронауки в этом контексте являются ЭЭГ-исследования эмоциональных состояний. ЭЭГ-системы позволяют регистрировать электрическую активность мозга и связывать её с предполагаемыми эмоциональными состояниями. Хотя интерпретация таких данных остаётся вероятностной, сами проекты формируют практику перевода эмоционального опыта в набор цифровых сигналов, пригодных для дальнейшей обработки и визуализации.

Показательным примером перехода нейротехнологий из научной среды в культурное и повседневное пространство становятся EEG-платформы Emotiv и OpenBCI. Эти системы используются для регистрации электрической активности мозга и визуализации мозговых волн в режиме реального времени.

слева: интерфейс BrainViz Emotiv справа: интерфейс исследований с помощью системы OpenBCI

Интерфейс Emotiv представляет собой consumer neurotechnology — нейротехнологию, ориентированную не только на исследовательские лаборатории, но и на художественные практики, игровые среды и персональное использование. Эмоциональное состояние пользователя в подобных системах преобразуется в поток данных, отображаемый через графики, динамические интерфейсы и цифровые параметры концентрации, возбуждения или расслабления. OpenBCI, в свою очередь, демонстрирует процесс демократизации нейронауки: open-source платформа позволяет художникам, разработчикам и исследователям самостоятельно работать с нейроданными и интегрировать их в интерактивные проекты.

Отдельная категория проектов в области представляет собой визуализацию именно мозговых волн, фиксируемых ЭЭГ. Таким образом происходит материализация внутреннего состояния через звук и визуальное изображение, а также эстетизация полученных научных данных.

Первым проектом с таким подходом стал Music for Solo Performer Алвина Люсье в 1965 году. Люсье подключал датчики к голове и с помощью альфа-волны заставлял вибрировать ударные инструменты.

Loading...

Другой важной технологией становится фМРТ — сканирование мозга при эмоциональных реакциях. В результате производится визуализация эмоции как превращения переживания в изображение. Это один из первых моментов, когда эмоция становится визуально наблюдаемой через технологию. Одной из самых известных работ с использованием данной технологии выступает серия Cogito Ergo Sum художницы Сюзан Алдворт.

Для этой работы автор прошла МРТ сканирование собственного мозга. Полученные сканы она использовала как основу для серии цифровых изображений. Изменяется масштаб сканов, добавляются рисунки, текстовые элементы и визуальные образы, соединяя научные данные с личными ассоциациями и переживаниями. В медицине такие изображения воспринимаются как чисто диагностический инструмент, но в художественном контексте они становятся визуальными арт-объектами, которые вызывают вопросы о природе сознания и идентичности.

слева: Cogito Ergo Sum 1, Susan Aldworth, 2002 справа: Cogito Ergo Sum 3, инсталляция из 20 архивных цифровых отпечатков, Susan Aldworth, 2006

Также в нейронауке используются системы распознавания эмоций на лице. С помощью искусственного интеллекта строится визуальная сетка распознавания и дальнейшая редукция эмоций до категорий с последующей проекцией эмоций в интерфейсе. В этом контексте раскрывается проблема объективности: система фиксирует внешние признаки, а не само переживание.

Исходный размер 1423x772

Экспериментальная технология распознавания эмоций ALTER EGO от Panasonic

В совокупности данные теоретические и эмпирические подходы формируют представление об эмоции как о многоуровневом нейробиологическом процессе, который может быть зафиксирован, интерпретирован и преобразован в информационные структуры.

При этом эмоциональное состояние оказывается встроенным одновременно в биологическую, когнитивную и культурную системы, что создаёт основу для его дальнейшей визуализации в рамках художественных и технологических практик.

От переживания к данным: нейротехнологии и аффективные вычисления

Развитие нейротехнологий привело к изменению способов понимания эмоционального опыта. Если ранее эмоция рассматривалась преимущественно как внутреннее и трудно фиксируемое переживание, то современные системы обработки данных стремятся представить её в виде измеряемого сигнала. В этом контексте эмоциональное состояние начинает восприниматься как поток информации, который может быть зарегистрирован, интерпретирован и переведён в визуальную или цифровую форму.

«…Благодаря датчикам биологической обратной связи я поняла, что нужно принимать изменения в своих чувствах, а не пытаться их контролировать». © Лиза Парк

Одним из наиболее показательных художественных проектов является работа Лизы Парк Eunoia II. Художница использует EEG-датчики для считывания собственного эмоционального состояния, после чего данные воздействуют на вибрационные механизмы, расположенные под сосудами с водой. В результате эмоциональные изменения создают колебания на поверхности воды, формируя физически наблюдаемую визуализацию внутреннего состояния. Проект важен тем, что переводит невидимый нейронный процесс в материальную и сенсорную форму.

Eunoia II, Lisa Park, 2014

Другим примером становится проект MEART — The Semi Living Artist. В этом проекте нейронные клетки используются как часть системы, управляющей роботизированным рисованием. Работа демонстрирует расширение представлений о творчестве и агентности, где биологическая нейронная активность становится основой художественного производства. Хотя проект напрямую не связан с эмоциями, он важен для понимания того, как нейронные процессы начинают функционировать как самостоятельный медиум.

Исходный размер 1141x830

MEART — The Semi Living Artist, SymbioticA, 2002

Проблема взаимодействия человека и вычислительной системы раскрывается в проектах Sougwen Chung, исследующих совместное творчество человека и искусственного интеллекта. Художница создаёт перформативные системы рисования, в которых роботизированные устройства и нейросетевые алгоритмы обучаются на её собственных жестах и движениях руки, после чего начинают участвовать в процессе рисования как автономные агенты.

В контексте нейроарта подобные проекты важны тем, что смещают внимание с прямой визуализации мозговой активности на более широкий вопрос о внешнем расширении когнитивных и эмоциональных процессов через технологии. Это показывает, что эмоция и субъективность всё чаще проявляются не через статичное изображение переживания, а через динамическое взаимодействие человека и вычислительной системы.

Исходный размер 720x404

4-е поколение «Spectrality», 2020 — н. в.

слева: 5-е поколение «Assembly», подготовка к выставке Nykyaikaa, 2022 справа: Untitled Nº 4 Biofeedback Paintings, Assembly Lines Series, 2021

Дополнительный аспект проблемы раскрывается через художественные практики сонификации ЭЭГ. В подобных проектах мозговые сигналы преобразуются в звук, позволяя воспринимать нейронную активность через акустический опыт. Здесь релевантным является проект Mariko Mori — Wave UFO. На входе в интерактивное пространство-капсулу на всех участников устанавливается набор электродов. Собранные через них данные преобразуются в звук, графику и влияют на общую атмосферу внутри капсулы. Каждая область мозга и эмоция влияют на цвета и форму на экранах, при этом постоянно смешиваясь, как и эмоции в человеческом мозге.

Экстерьер и интерьер инсталляции Wave UFO, 2003

В результате нейротехнологии формируют новую модель эмоционального опыта, где внутреннее состояние становится объектом вычисления, обработки и художественной трансформации. Эмоция в подобных системах существует на пересечении биологии, алгоритма и медиа-среды, постепенно превращаясь в интерфейс между мозгом и цифровой культурой.

Визуализация эмоции: художественные практики и нейроарт

Нейроизображения и биосигналы постепенно формируют особый визуальный режим «brainmedia», в котором данные мозга становятся самостоятельным культурным и художественным образом. В подобных практиках изображение больше не фиксирует внешний мир, а визуализирует внутренние процессы нервной системы.

Одним из ранних оснований для подобных художественных стратегий можно считать интерактивное искусство второй половины XX века. В работе Нам Джун Пайка TV Buddha зритель сталкивается с системой обратной связи, где изображение становится частью непрерывного процесса наблюдения и самонаблюдения. Хотя проект не использует нейротехнологии напрямую, он формирует важную для neuro-art идею: медиа способны не только отображать человека, но и включать его психофизиологическое присутствие в структуру произведения.

Исходный размер 1920x1440

Инсталляция TV Buddha, Нам Джун Пайк, 1974

Интерес к нейроизображениям проявляется и в работах, использующих МРТ как художественный материал. Достаточно репрезентантивными выступают проекты Сюзан Анкер (MRI Butterfly / Butterfly in the Brain) и Марджори Тейлор (Warm Glow / Fabric MRI: Bill’s Brain), где медицинские изображения мозга включаются в художественное пространство. Эти работы показывают, как нейровизуализация постепенно выходит за пределы научной диагностики и начинает функционировать как эстетический объект.

Исходный размер 850x1151

Warm Glow, Fabric MRI: Bill’s Brain, Marjorie Taylor, 2009

Исходный размер 2244x1080

«MRI Butterfly» («The Butterfly in the Brain»), Сюзан Анкер, 2002

Развитие нейроарта постепенно приводит к переходу от статичного изображения мозга к созданию иммерсивных сред, моделирующих эмоциональное и чувственное восприятие.

Показательным примером становятся интерактивные инсталляции арт-коллектива teamLab, в которых цифровые изображения, свет и генеративная графика реагируют на присутствие и движение зрителей. В их проектах пространство непрерывно изменяется в зависимости от поведения участников, создавая эффект эмоционального погружения и растворения границы между телом и медиальной средой.

Проекты teamLab не используют прямое считывание нейронной активности, они демонстрируют важную для нейроарта тенденцию: эмоция всё чаще визуализируется не через репрезентацию лица или тела, а через изменяющееся цифровое пространство, внутри которого зритель переживает собственное состояние как часть интерактивной системы.

инсталляции в здании MORI DIGITAL ART MUSEUM: teamLab Borderless, teamLab, 2018

Таким образом, художественные практики формируют новую модель визуальности, основанную на работе с внутренними процессами мозга и нервной системы. Эмоция в подобных проектах перестаёт существовать исключительно как личное переживание и становится частью медиального пространства, где нейронная активность преобразуется в изображение, звук или интерактивную среду.

Проблема объективности: можно ли визуализировать переживание?

Развитие систем аффективных вычислений ставит вопрос о границах объективности при работе с эмоциональными состояниями. Нейроданные позволяют зарегистрировать изменения активности мозга или тела, однако сами по себе они не дают прямого доступа к внутреннему опыту человека. В результате между переживанием и его визуализацией возникает разрыв, который становится одной из центральных проблем нейроискусства.

Особенно явно эта проблема проявляется в проектах, использующих brain imaging как художественный материал. В работе Trap — Self Portrait МРТ-сканы головы художницы преобразуются в прозрачную многослойную скульптуру. Проект создаёт ощущение доступа к внутренней структуре человека, однако зритель сталкивается лишь с визуальной реконструкцией данных. Несмотря на высокую степень научной достоверности изображения, работа не раскрывает субъективного опыта автора, а лишь демонстрирует его биологическую оболочку.

Trap — self portrait, Жюстин Купер, 1998

Сходная проблема возникает в проектах генеративного искусства, использующих emotion datasets и алгоритмы машинного обучения. Нейросети обучаются распознавать эмоциональные выражения по наборам изображений и поведенческих данных, после чего начинают воспроизводить «эмоциональные» визуальные формы. Однако такие системы оперируют статистическими паттернами, а не переживанием как таковым.

Показательным примером становится инсталляция Melting Memories, основанная на использовании ЭЭГ-данных и исследований памяти. Зритель взаимодействует не с самим воспоминанием или эмоцией, а с алгоритмически интерпретированной моделью данных. Работа демонстрирует, как нейротехнологии создают эстетически убедительную визуализацию внутренних процессов, одновременно скрывая дистанцию между переживанием и его цифровой репрезентацией.

Loading...

Проблема интерпретации субъективного опыта раскрывается и в интерактивных пространственных инсталляциях. В проекте Hylozoic Ground зритель оказывается внутри среды, реагирующей на движение, приближение и присутствие человека с помощью сети сенсоров и микропроцессоров. Пространство производит впечатление «живого» организма, способного чувствовать посетителя и вступать с ним во взаимодействие. Однако инсталляция реагирует лишь на внешние параметры поведения, а не на внутреннее эмоциональное состояние.

Исходный размер 1400x627

Hylozoic Ground, Philip Beesley, 2010

Взаимодействие посетителей с инсталляцией Hylozoic Ground

Похожая проблема возникает в инсталляции Your Uncertain Shadow. Работа создаёт множественные цветовые тени зрителя, нарушающие привычное восприятие собственного тела и силуэта. Зритель сталкивается с нестабильным и постоянно меняющимся отражением самого себя, которое невозможно свести к единому объективному образу. В контексте нейротехнологий подобный эффект показывает, что восприятие субъекта всегда остаётся фрагментарным и опосредованным, а любая система визуализации неизбежно конструирует собственную версию человеческого опыта.

Your Uncertain Shadow, Olafur Eliasson, 2010

Сходный принцип используется в проекте Random International Rain Room, где пространство реагирует на перемещение посетителя и создаёт иллюзию «понимающей» среды. Датчики фиксируют положение тела человека, останавливая дождь вокруг него, благодаря чему зритель воспринимает систему как чувствительную и почти эмпатическую. Однако инсталляция вновь взаимодействует лишь с физическими координатами движения, а не с внутренними состояниями человека.

Loading...

Таким образом, нейротехнологии не устраняют субъективность эмоции, а создают новые способы её интерпретации и репрезентации. Визуализированная эмоция оказывается результатом взаимодействия биологических сигналов, алгоритмов обработки и художественных решений. Это позволяет говорить не о прямом отображении внутреннего опыта, а о формировании новой технологической модели переживания, существующей на границе нейронауки, искусства и медиа.

Мозг как медиа: эмоциональный интерфейс будущего

Если в классической научной модели мозг выступал объектом изучения и биологической структурой, то в контексте цифровых медиа и нейроарта он всё чаще начинает функционировать как интерфейс — система передачи, обработки и трансляции внутренних состояний. Такой сдвиг связан с более широким изменением статуса медиа в цифровую эпоху. В концепции М. Маклюэна медиа понимаются как расширения человеческого тела и восприятия.

Одним из наиболее показательных направлений становится разработка brain-computer interfaces (BCI). Показательным примером художественного использования brain-computer interfaces становится проект solaris медиа-художника: vtol: (Дмитрий Морозов). Участник надевает ЭЭГ-гарнитуру Emotiv Epoc, после чего мозговая активность начинает управлять движением магнитной флуоресцентной жидкости внутри инсталляции. В результате мозг начинает функционировать как интерфейс взаимодействия между человеком и физическим пространством.

«solaris», Дмитрий Морозов, 2014

Loading...

Другим важным кейсом выступают разработки компании Neuralink. Проект ориентирован на создание имплантируемых нейроинтерфейсов, способных обеспечивать прямое взаимодействие мозга и вычислительных систем. В перспективе подобные интерфейсы предполагают возможность постоянного обмена данными между человеком и технологической системой, включая эмоциональные и сенсорные состояния.

Чипы Neuralink и оборудование для их имплантации

Особое значение для художественного и культурного контекста имеют проекты, связанные с коллективной синхронизацией мозговой активности. Показательным примером является проект Mutual Wave Machine Сюзанны Дикер и Тани Чеккини. Участники помещаются в общую инсталляцию, где их ЭЭГ-активность влияет на световую и звуковую среду. Чем выше уровень синхронизации мозговых волн, тем более согласованной становится визуальная атмосфера пространства. Работа демонстрирует переход от индивидуальной визуализации эмоции к созданию коллективного эмоционального интерфейса.

Исходный размер 0x0

Инсталляция «Mutual Wave Machine», Сюзанна Дикер и Таня Чеккини, 2016

Похожий принцип у работы Pulse Room Рафаэля Лосано-Хеммера. Но здесь происходит синхронизация освещения с пульсом участников, прикоснувшихся к датчикам. Каждый ритм записывается и таким образом создаётся коллективное хранилище пульса, визуализацию которого можно посмотреть сразу после записи. Это демонстрирует нам создание базы данных, что является также своего рода созданным интерфейсом «общности» и причастности участников.

Исходный размер 2000x1333

Pulse Room, Рафаэль Лосано-Хеммер, 2006

Другой важный вектор связан с интеграцией нейросетевых систем и генеративного ИИ в работу с эмоциональными данными. Если ранее эмоция воспринималась как внутреннее и непередаваемое состояние, то современные нейротехнологии создают условия для её внешней регистрации, трансляции и интеграции в цифровую среду. Однако вместе с этим меняется и сама природа переживания: эмоция начинает существовать в форме сигнала, данных и вычислительной модели.

Показательным примером подобных практик становится проект Рефика Анадола Machine Hallucinations, где искусственный интеллект использует нейроданные и большие массивы информации для создания визуализаций памяти и восприятия. В этих работах ИИ выступает не просто инструментом обработки информации, а самостоятельным медиатором между человеческим опытом и визуальной средой.

Loading...

Таким образом, мозг в современной медиакультуре всё чаще функционирует как интерфейс между человеком и технологической системой. Нейротехнологии создают новую форму медиальности, в которой внутренние состояния становятся частью цифровой коммуникации и художественного производства. Эмоция при этом превращается в динамический медиальный процесс, существующий одновременно в биологическом, вычислительном и культурном пространствах.

Заключение

В ходе исследования было рассмотрено, каким образом нейротехнологии и художественные практики работают с эмоциональными состояниями человека, переводя их в визуальные и цифровые формы. Анализ кейсов показал, что современные системы считывания и обработки нейроданных формируют новый способ репрезентации внутреннего опыта, в котором эмоция становится доступной для регистрации, интерпретации и художественной трансформации.

Была подтверждена гипотеза о том, что нейротехнологии не способны воспроизвести переживание в его полноте, однако они создают его интерпретированную модель, основанную на алгоритмах, визуальных кодах и способах обработки сигнала. В этом контексте мозг начинает функционировать как медиа-интерфейс, соединяющий внутренний опыт человека с цифровой средой и художественным пространством.

Библиография
1.

Видаль Ф. Церебральность и антропологический тип современности // Социология власти. — 2020. — № 32 (2). — С. 208–247. (дата обращения: 26.05.26)

2.

Nijholt A. (Ed.) Brain Art. Brain-Computer Interfaces for Artistic Expression. Springer. 2019. (дата обращения: 26.05.26)

3.

Маклюэн Г. М. Понимание Медиа: Внешние расширения человека / Пер. с англ. В. Николаева; Закл. ст. М. Вавилова. — М.; Жуковский: «КАНОН-пресс-Ц», «Кучково поле», 2003. — 464 с. (дата обращения: 26.05.26)

4.

Wave UFO / [Электронный ресурс] // digiart21.org: [сайт]. — URL: https://www.digiart21.org/art/wave-ufo (дата обращения: 26.05.26)

5.

Eunoia II / [Электронный ресурс] // digiart21.org: [сайт]. — URL: https://www.digiart21.org/art/eunoia-ii (дата обращения: 26.05.26)

6.

Eunoia II / [Электронный ресурс] // thelisapark.com: [сайт]. — URL: https://www.thelisapark.com/work/eunoia2 (дата обращения: 26.05.26)

7.

Melting Memories / [Электронный ресурс] // refikanadolstudio.com: [сайт]. — URL: https://refikanadol.com/works/melting-memories/ (дата обращения: 27.05.26)

8.

Machine Hallucination / [Электронный ресурс] // refikanadolstudio.com: [сайт]. — URL: https://refikanadolstudio.com/projects/machine-hallucination/ (дата обращения: 27.05.26)

9.

Rain Room / [Электронный ресурс] // random-international.com: [сайт]. — URL: https://www.random-international.com/rain-room (дата обращения: 27.05.26)

10.

Existence is beauty, your existence is beautiful — Through the vision & words of teamLab / [Электронный ресурс] // designwanted.com: [сайт]. — URL: https://designwanted.com/teamlab-immersive-installations-artworks/ (дата обращения: 27.05.26)

Источники изображений
1.2.3.4.5.6.7.8.9.10.11.12.13.14.15.16.17.18.19.20.21.22.23.24.25.26.27.28.29.30.31.32.33.
Эмоция как нейронный код: визуализация состояния через нейротехнологии
Проект создан 27.05.2026
Мы используем файлы cookies для улучшения работы сайта и большего удобства его использования. Более подробную информац...
Показать больше