Важной целью мультисенсорных исследований является моделирование процессов, лежащих в основе визуально-тактильного представления объектов. Для этого мы исследовали кортикальные сети, участвующие в процессе создания визуального образа и тактильном восприятии как знакомых, так и незнакомых объектов [79] . В результате мы можем очертить предварительную модель участия визуальных образов в тактильном восприятии формы на основании исследований, о которых шла речь ранее.

В одном эксперименте по созданию визуальных образов [80] от участников требовалось слушать пары слов и решать, какую форму имеют объекты, обозначенные этими словами, – похожую или разную (например, «змея – веревка» и «ложка – вилка» соответственно). Таким образом, в отличие от более ранних исследований, участники выполняли задания, требующие создания визуальных образов, успешность выполнения которых можно было отследить. В качестве дополнительного задания по тактильному распознаванию предметов участникам было предложено определить аналогичным образом, с помощью ощупывания правой рукой, – одинаковые или разные формы имеют незнакомые им ранее объекты. Каждая из этих задач сопровождалась соответствующей контрольной задачей [81] . Нас особенно интересовали области мозга, которые были активны как при визуальном, так и при тактильном распознавании формы, и то, была ли связь между уровнем активности в этих пересекающихся зонах при выполнении двух задач. Таких зон было всего четыре, и только одна из них показала значимую положительную корреляцию уровней активности при выполнении первой и второй задач. Таким образом, эти результаты привели нас к довольно слабым доказательствам гипотезы о доминирующей роли визуальных образов, так как, вероятно, они объясняют появление лишь кратковременных образов общей формы незнакомых объектов. Однако, в то время как задача тактильного распознавания производилась с незнакомыми объектами, задача распознавания визуальных образов, очевидно, подразумевала извлечение образов знакомых объектов (как «змея – веревка») из долговременной памяти. Мы предположили, что это несоответствие, связанное со степенью ознакомленности с предметами, могло стать причиной наших наблюдений, и решили провести второй эксперимент, в котором задачи визуального и тактильного распознавания остались точно такими же, как и раньше, за исключением того, что в задаче тактильного распознавания набор распознаваемых объектов был заменен на ранее знакомые. Следовательно, теперь в обеих задачах использовались знакомые предметы. В результате мы выделили обширную сеть пересекающихся областей коры, в которых уровень активности обеих частей латеральной затылочной коры, а также теменной и префронтальной областей, показал значимую положительную корреляцию при выполнении двух задач. Необходимо также отметить, что задача создания визуальных образов и восприятия знакомых тактильных форм, вероятно, задействовала объектные, а не пространственные визуальные образы (об их различиях шла речь ранее). Таким образом, объединив оба эксперимента, мы продемонстрировали, что хотя визуальные образы и тактильное восприятие знакомых объектов взаимосвязаны, для незнакомых объектов такая связь не наблюдается.

Обнаружив аргументы, подтверждающие гипотезу о доминирующей роли визуальных образов, мы хотели дать ей более прочную основу, исследуя взаимосвязь кортикальных сетей, участвующих в формировании визуальных образов и осязательном восприятии формы [82] . Кроме того, изучение связи между областями коры головного мозга поможет разграничить гипотезы о доминировании визуальных образов и о мультисенсорной конвергенции. Ранее мы предполагали, что зрение и осязание имеют общую репрезентацию формы объектов, доступную для восходящих и нисходящих проекций [83] . Визуальные образы активируют нисходящие пути из префронтальных и задних теменных областей в зрительную кору [84] . Поэтому, если бы активность латеральной затылочной коры находилась под влиянием визуальных образов, следовало бы ожидать обнаружение нисходящих проекций в латеральную затылочную кору во время процесса как визуального, так и тактильного восприятия. В противном случае активность латеральной затылочной коры может отражать конвергенцию визуальных и тактильных импульсов в мультисенсорной репрезентации, и в этом случае мы могли бы быть уверены в том, что проекции в латеральную затылочную кору из соматосенсорной имеют восходящий характер. Существование и тех, и других путей было предположено в ходе более ранних исследований эффективной связности головного мозга [85] , однако в них были использованы только незнакомые объекты и не была проанализирована связность при выполнении конкретных задач. Как во время визуального, так и во время тактильного восприятия знакомой формы, латеральная затылочная кора в основном управлялась префронтальными областями, то есть нисходящим образом; более того, активности этих двух сетей сильно коррелировали между собой. Однако во время тактильного восприятия незнакомой формы возник совершенно другой паттерн, в котором восходящие пути из соматосенсорной коры преобладали над импульсами латеральной затылочной коры. Вместе с этим тактильная система распознавания незнакомых форм была не связана ни с распознаванием визуальных образов, ни с распознаванием тактильно знакомых объектов.

На основе этих результатов и литературы, рассмотренной нами ранее, мы разработали концептуальную модель визуально-тактильной репрезентации объекта, которая объединяет гипотезу о роли визуальных образов и мультисенсорные подходы [86] . Данная модель предполагает, что латеральная затылочная кора содержит образ, не зависящий от модальности канала восприятия (зрительный, либо осязательный), и эта репрезентация доступна как при восходящей, так и при нисходящей проекции в зависимости от степени знакомства с объектом (или от других особенностей выполняемой задачи). Для знакомых объектов общая форма может быть определена гораздо легче благодаря отличительным чертам, которых вполне достаточно для получения целостного визуального изображения. Поэтому модель позволяет учесть роль нисходящих проекций из теменных и префронтальных областей за счет того, что тактильное восприятие знакомой формы апеллирует к визуальным образам объектного типа, полученным из этих областей. В свою очередь образ незнакомого нам объекта изначально отсутствует в нашем сознании, поэтому его общая форма может быть обработана полностью только при условии его досконального исследования. Таким образом, тактильное восприятие незнакомых форм происходит скорее восходящим путем от соматосенсорной коры к латеральной затылочной коре. Поскольку теменная кора внутри и вокруг внутритеменной борозды участвует в зрительно-тактильном восприятии формы и пространства [87] , наша модель также иллюстрирует, что для того, чтобы вычислить общую форму объектов, эти теменные области должны быть вовлечены в анализ относительного пространственного расположения частей объекта и задействовать более широкое использование пространственного мышления.

В ходе дальнейшей проверки нашей модели мы сравнили визуальные пространственные представления с тактильным восприятием знакомых и незнакомых форм [88] . Это исследование показало, что существуют теменные области, участвующие одновременно и в создании пространственных образов, и в тактильном распознавании форм. Некоторые из этих областей продемонстрировали корреляцию степени активации во время, во-первых, создания пространственных образов, а, во-вторых, тактильного восприятия формы. Мы предполагаем, что на самом деле пространственные образы, по-видимому, участвуют в тактильном восприятии формы объекта независимо от того, насколько знакомым он является, а также, возможно, насколько связаны с формированием общей репрезетации формы объекта из его составных частей [89] .

В данной статье мы рассмотрели некоторые доказательства того, что области коры головного мозга, ответственные за визуальное восприятие, участвуют также и в тактильном восприятии объектов. Сделав фокус на описании латеральной затылочной коры, области распознавания визуальных объектов, мы определили ее роль в процессе тактильного восприятия формы и описали в общих чертах модель процесса распознавания объектов. Эта модель подразумевает участие объектного и пространственного мышления, причем их роль зависит от того, насколько хорошо объект нам знаком. Анализ процессов активности и взаимодействия между структурами коры головного мозга позволяет предположить, что объектное мышление связано прежде всего со знакомыми объектами, в то время как пространственное мышление может быть связано как со знакомыми, так и незнакомыми предметами и формами. В дальнейшем еще предстоит изучить отдельные разногласия, возникающие внутри этой модели, а также то, как она соотносится с более ранними концептуальными моделями визуального восприятия.

Эти выводы говорят о необходимости расширять и развивать программы, которые позволяют посетителям прикасаться руками к объектам. Конечно, речь идет об использовании детализированных копий или моделей предметов, или же артефактов, обладающих минимальной археологической и исторической ценностью. Подобная практика не должна ограничиваться только историческими объектами – для художественных выставок можно использовать скульптурные копии или тактильную графику [90] . Это позволит лучше донести информацию до посетителей, сделать их опыт посещения музея более запоминающимся, поможет им понять содержание экспозиции. Более того, подобная практика позволяет сделать экспозицию доступной для незрячих или слабовидящих людей, которые прежде не могли взаимодействовать с объектами, кроме как с помощью текстов, напечатанных шрифтом Брайля или же с помощью специальных аудиогидов. Самое важное преимущество использования мультисенсорного подхода – это возможность более глубокого погружения посетителей в исторический контекст. Недавно были обнаружены останки Ричарда III, утерянные после его смерти в бою в 1485 году. На найденных останках видны множественные раны, нанесенные холодным оружием [91] . Представьте, какой захватывающей была бы возможность потрогать это оружие, почувствовать тяжесть средневекового меча и как никогда раньше представить себе последние мгновения жизни короля.

Исследование авторов было поддержано Национальным глазным институтом Национального института здоровья (США), Национальным научным фондом (США) и Управлением по делам ветеранов (США).