본 연구는 참가자 간 상관(Intersubject correlation: ISC)기법을 통해 정서 유발 자극에 대한 한 참가자의 반응과 그 참가자를 제외한 나머지 참가자들의 반응 간 일치성이 각 정서표상 범주(지배가, 각성가, 정서가)와 다양한 감각 양상(청각, 시각, 촉각)에서 어떠한 차이가 있는지 밝히고자 하였다. 참가자 간 상관을 계산하기 위해 사용된 데이터 는 참가자들의 청각, 시각, 촉각 자극에 대한 생리 측정치와 정서 평정치로 구성되었으며, 한 참가자의 데이터 세트 와 나머지 참가자들의 데이터 세트의 평균으로 구분한 뒤 가능한 모든 자극 쌍에 대해 상관을 구하는 방식으로 참가 자 간 상관을 계산하였다. 연구 결과, 지배가를 기준으로 재정렬한 데이터 세트에 대한 참가자들의 반응 일치성은 청각 감각양상 조건보다 시각 감각양상 조건에서 높은 ISC 값을 얻었다. 다음으로 각성가로 재정렬한 데이터 세트의 경우 시각 감각양상과 청각 감각양상에서 차이가 있음은 같았지만, 지배가 기준으로 재정렬한 데이터 세트와 결과가 상반되었다. 마지막으로, 정서가를 기준으로 재정렬된 데이터 세트는 모든 감각양상에서 부정적인 데이터 세트들이 긍정적인 데이터 세트보다 참가자들의 반응 일치성이 더 높았다. 모든 데이터 세트에서 정서표상 범주의 높고 낮음 과 상관없이 촉각 감각양상에서 높은 ISC 값을 얻었다. 본 연구의 결과는 참가자 간 상관의 다양한 감각양상과 정서 표상에 대한 반응의 일치성이 의미하는 바에 대한 해석을 제시하며, ISC 분석 방법이 참가자 반응의 차이에 대한 패턴을 측정하는 유용한 도구가 될 가능성을 제시하였다.

본 연구는 제품과 물리적 접촉이 불가능한 온라인 환경에서 다중 감각 단서가 소비자의 촉각적 심상과 제품에 대한 태도 및 구매 의사에 미치는 영향을 알아보고자 하였다. 실험 1에서는 참가자들을 음향 없이 사진만 제시한 조건, 음향 없이 영상만 제시한 조건, 일치하는 음향과 영상을 제시한 조건, 불일치하는 음향과 영상을 제시한 조건으로 나누어 제품을 탐색하게 하였고 그 후 촉각적 심상선명도, 제품 사용의 상상용이성, 제품에 대한 태도-구매 의사를 측정하였 다. 그 결과, 모든 변수에서 불일치하는 음향과 영상이 주어진 조건이 가장 낮은 평균 점수를 보였다. 실험 2는 참가자 내 디자인으로 설계되어, 참가자들에게 동일한 제품을 실험 1과 같은 네 개의 조건에서 탐색하게 하였다. 탐색 후,촉각적 심상선명도, 제품 사용의 상상용이성, 제품에 대한 태도-구매 의사, 접촉 욕구 등을 측정하였다. 접촉 욕구를 공변인으로 하는 반복측정 공분산분석 결과, 일치하는 음향과 영상을 제시한 조건은 다른 조건과 비교했을 때 유의미 하게 심상선명도, 제품에 대한 태도, 제품 구매 의사가 높았다. 이중 매개 분석 결과, 다중 감각 단서 조건은 심상선명 도와 제품 사용의 상상용이성을 순차적으로 매개하여 제품에 대한 태도-구매 의사를 유의미하게 예측했다. 결론적으 로, 음향 및 영상 단서로 유발된 선명한 촉각적 심상은 소비자가 제품을 사용하는 상황의 상상을 쉽게 만들어 태도-구 매 의사와 같은 의사 결정에 긍정적 영향을 미칠 수 있다.

본 연구에서는 시각장애인이 시각 외의 잔존감각인 촉각, 청각, 후각을 활용하여 미술 작품을 감상하고 이해할 수 있도록 도울 수 있는 다중감각 인터랙션 기술을 제안한다. 나아가, 다중감각 인터랙션의 설계 적합성을 평가하기 위해 실제 시각장애인을 대상으로 다중감각 인터랙션 기술이 적용된 시스템을 통해 미술 작품을 감상한 경험에 대한 질적 인터뷰 기반의 사용자 테스트를 수행하였다. 사용자 테스트 결과, 미술 작품에 적용한 다중감각 인터랙션 요소 들은 전반적으로 시각장애인으로 하여금 미술 작품 감상 및 이해를 도왔으며, 나아가 다중감각 인터랙션을 통해 미술 작품을 감상한 경험이 만족스러웠다는 긍정적인 평가 결과가 나타났다. 반면, 일부 다중감각 인터랙션 요소는 미술 작품을 감상하는 동안 전혀 인지하지 못하였거나 오히려 미술 작품 감상에 있어서 혼란을 야기했다는 부정적인 평가 결과도 나타났다. 본 연구는 시각장애인의 문화예술 작품 감상의 접근성을 증진할 수 있는 기술적 대안으로서 비시각 다중감각 인터랙션의 구체적인 개발 방향성 및 가이드라인을 제공하는 데 기여하였다. 나아가, 시각장애인뿐 만 아니라 아동이나 노인과 같은 비시각장애인도 유니버설 인터랙션 기술을 통해 기존의 시각 위주의 단편적 경험을 넘어선 종합적인 감각적 경험을 할 수 있는 기술 기반을 구축하는데 기여할 수 있을 것으로 기대된다.

자폐 스펙트럼 장애를 가진 대상(이하 ASD)의 정서 인식 능력에 대한 행동 연구의 결과는 혼재되어 있고, 대부분 단일 감각 양식의 정서 인식 능력에 대한 검증에 치중되어 있다. 따라서 ASD가 실제로 정서 인식 결함을 가지고 있는지에 대한 통합적 이해는 아직 이루어지지 않은 실정이다. 따라서 본 연구는 다중 감각 양식 정서 자극에 대한 따른 ASD 환자의 정서 인식 능력에 초점을 맞추고, ASD의 정서 인식 능력에 대한 혼재된 결과를 설명하기 위하여 최신 행동 연구와 인지신경과학 연구들을 개관하였다. 그 결과, 정서 인식 과제에서 행동적 결함을 보이지 않았던 ASD 일지라도, 뇌 영상 결과에서는 정서 정보 통합 기능에서 결함이 발견되었다. 따라서 본 개관 연구에서는, 최근에 제안된 ASD의 다중 감각 양식에 따른 정서 인식 능력의 결함, ASD의 정서 정보 통합 기능 결함, 그리고 실생활에서 정서 인식의 어려움에 대한 가능성과 선행 연구들의 제한점에 대해 논의하였다. 또한, ASD가 정서 정보를 통합하는 과정에서 활용하는 보상 기제를 살펴보고, ASD의 정서 기능 결함과 관련된 치료적 접근 방향과 후속 연구에 대해 제언하였다.

기존 연구들은 단순히 실물을 만지는 것만으로도 그 대상에 대해 심리적 소유감이 형성되고 그 가치를 높게 평가하게 되는 소유효과가 발생한다는 것을 발견하였다. 또한 단순히 만지는 상상을 하는 경우에도 실물을 만지는 것과 같은 효과가 나타난다는 것이 발견되었다. 기존의 촉각적 심상화 연구에서는 실물을 만지는 상상을 하라는 직접적인 지시에 따른 촉각적 심상화의 효과를 밝혔으나 본 연구에서는 실물을 만지는 상상을 하라는 직접적인 지시보다 촉각적 상상을 자연스럽게 유도할 수 있는 효과적인 방법을 탐색해보았다. 상상유도 조건을 상품에 대한 시각적, 촉각적 단서가 일치하는 다중감각 단서 일치 조건, 불일치하는 다중감각 단서 불일치 조건, 상상하라는 직접적 지시 조건, 통제조건으로 조작하여 촉각적 상상의 생생함, 물리적 통제감, 지각된 소유감, 구매의도에 미치는 효과를 비교하였다. 140명의 대학생을 대상으로 실험을 실시하여 분석한 결과, 시각적 단서와 촉각적 단서가 일치하도록 제공한 다중감각 단서는 촉각적 상상을 직접적으로 지시하였을 때보다도 효과적인 것으로 나타났으며 시각적, 촉각적 단서가 불일치한 경우는 효과적이지 않은 것으로 나타났다. 본 연구는 촉각적 심상화 연구에서 한걸음 나아간 시도이며 온라인 쇼핑과 같이 실물을 보거나 만질 수 없는 환경에서의 상품 제시 방법에 대한 함의점을 제공하는데 의의가 있다.