본 연구에서는 정서를 두 양상(청각, 시각)으로 제시할 시, 두 양상의 정서가 일치 혹은 불일치 할 경우 각성과 재인 기억, 회상 기억에 영향을 미친다는 것을 알아보고자 하였다. 본 연구의 첫 번째 가설은 교차 양상에서의 정서 불일치는 일치 할 때 보다 각성 뿐만 아니라 재인, 회상 기억 모두 높을 것이라는 것이다. 두 번째 가설은 각성이 회상 기억과 재인 기억을 modulate한다는 것이다. 가설을 증명하기 위해 시각과 청각의 정서를 긍정 정서와 부정 정서로 조작하여 일치 조건과 불일치 조건으로 조작하였다. 각 조건에서는 재인 기억과제와 회상 기 억 과제의 정확도를 종속 변인으로 측정하였으며, PAD(Pleasure-arousal-dominance) 척도를 이용하여 참가자의 각성 수준을 측정하였다. 또한 8일이 지난 후, 참가자 모두에게 실험 자극으로 쓰인 영상에 대해 재인 기억 과제를 통해 다시 검사하였다. 연구 결과, 각성의 경우 영상을 본 후의 각성 차이는 통계적으로 유의미하게 나타 났지만(p<.001), 일치와 불일치 조건 간의 각성 차이는 나타나지 않았다. 또한 정서가 일치하는 조건과 불일치하 는 조건에서 재인 기억이 통계적으로 유의미하지는 않았지만, 영상 정서의 주 효과가 통계적으로 유의미하게 나타났다. 이로 인해 두 가지 정서로 나누어 분석한 결과, 부정 정서 영상에 노출된 조건에서만 일치 조건과 불일 치 조건에서의 재인 기억이 통계적으로 유의미한 차이를 보였다(p= .044). 사후 분석 결과, 불일치 조건에서 일치 조건보다 높은 점수를 보였다. 회상 기억의 경우, 영상 정서조건과 일치, 불일치 조건 간의 상호작용이 나타났다 (p=.039). 따라서 본 연구에서는 부정 정서에서의 불일치 효과는 증명하였지만, 각성으로 인한 효과는 증명하지 못하였다.

오늘날 가상 세계에서 인간과 인간, 컴퓨터와 인간의 상호작용을 좀 더 효율적으로 도와줄 수 있는 매개체로서 에이전트에 대한 관심이 증대되고 있다. 특히 에이전트의 정서표현도 인간의 정서 표현처럼 해석할 수 있고 그에 대해 인간의 정서표현에 반응하는 것과 마찬가지의 방식으로 반응한다는 연구들이 있어왔다. 그렇다면 에이전트의 정서표현이 표정과 목소리에서 서로 불일치한다면 어떤 쪽에 더 치중해서 에이전트의 정서를 해석할지 또는 어느 한 쪽에 치중하는 것이 아니라 두 정서 모두 조합해서 받아들일지 알아보고자 했다. 또한 만약 표정과 목소리의 두 가지 정서를 조합해서 인지한다면 표정이나 목소리에서는 표현되지 않은 제 3의 정서를 느끼지는 않는 것인지 알아보았다. 실험은 표정(4) × 목소리(4)로 이루어졌다. 실험 결과 사람들은 에이전트의 한 가지 채널에 지배받아서 정서를 인지하는 것이 아니라 표정(시각)과 목소리(청각) 두 채널 모두를 조합해서 정서를 인지하는 것으로 나타났다. 또한 두 채널의 정서가 불일치할 때에는 혼란에 빠져 무슨 정서인지 모르게 되는 것이 아니라 또 다른 실망, 지루함, 지친, 반가운 등의 제 3의 정서를 느끼는 것으로 나타났다.

향수제품의 향에 적합한 색을 향수병과 포장지에 적용함으로써, 제품의 향을 소비자들에게 효과적으로 전달할 수 있다. 이에 본 연구는 두 개의 실험연구를 통해 색과 향의 교차-양상 연상관계를 조사하였다. 첫 번째 실험에서는 현재 시장에 출시되어 있는 약 200여개 향수병의 색을 분석하여 향의 종류에 따른 차별화된 색채 디자인 패턴을 발견하였다. 두 번째 실험에서는 국내 소비자들을 대상으로 향과 색의 대응관계를 조사하였다. 향수병을 볼 수 없는 상황에서 피실험자들에게 세 가지 향수제품의 향을 맡은 후 연상되는 색을 선택하게 하였다. 그 결과 세 가지 향수제품 모두 차별화된 색상(hue) 대응이 이루어졌고, 선정된 색상은 실제 향수병의 색상과 상당히 유사한 색상 영역에 분포하였다. 또한 향수제품의 세 가지 향 노트(상향, 중향, 하향)에 따라 연상되는 색의 현저한 톤(tone) 변화를 발견하였다. 위의 두 가지 실험을 통해 시중에 판매되고 있는 향수제품에 있어 향과 색 간의 뚜렷한 교차-양상 연상관계가 있음을 제안하였다.