Chinese traditional music is a representation of the intellectual accomplishments of the Chinese people and holds significant cultural and artistic attributes. To effectively showcase it to the general audience, it is necessary to implement visual design techniques that concentrate on the innovative progression of Chinese traditional music. This paper analyses the practical significance of visual design in the context of Chinese traditional music, using the unique characteristics of this music as a starting point. The paper maintains a clear structure with logical progression, ensuring a logical flow of information with causal connections between statements. Technical term abbreviations are explained when first used, and precise subject-specific vocabulary is employed where appropriate. The language used is formal and free from grammatical errors, while the text adheres to a consistent footnote style, format, and citation. Biased language is avoided, with positions on subjects made clear through hedging. Finally, conventional academic sections are included and titles are factual, unambiguous, and occasionally employ freer wording for interest. In addition, it examines the visual representation of Chinese traditional music. Building on this groundwork, the paper delves into a case study concentrating on “Four Seasons Scenery” to embark on a research journey and practical exploration of the visual design of Chinese traditional music. Through a combination of scholarly inquiry and practical application, the aspiration is that this pursuit may offer new perspectives and methodologies for the perpetuation and innovation of Chinese traditional music.

본 연구에서는 시각장애인이 시각 외의 잔존감각인 촉각, 청각, 후각을 활용하여 미술 작품을 감상하고 이해할 수 있도록 도울 수 있는 다중감각 인터랙션 기술을 제안한다. 나아가, 다중감각 인터랙션의 설계 적합성을 평가하기 위해 실제 시각장애인을 대상으로 다중감각 인터랙션 기술이 적용된 시스템을 통해 미술 작품을 감상한 경험에 대한 질적 인터뷰 기반의 사용자 테스트를 수행하였다. 사용자 테스트 결과, 미술 작품에 적용한 다중감각 인터랙션 요소 들은 전반적으로 시각장애인으로 하여금 미술 작품 감상 및 이해를 도왔으며, 나아가 다중감각 인터랙션을 통해 미술 작품을 감상한 경험이 만족스러웠다는 긍정적인 평가 결과가 나타났다. 반면, 일부 다중감각 인터랙션 요소는 미술 작품을 감상하는 동안 전혀 인지하지 못하였거나 오히려 미술 작품 감상에 있어서 혼란을 야기했다는 부정적인 평가 결과도 나타났다. 본 연구는 시각장애인의 문화예술 작품 감상의 접근성을 증진할 수 있는 기술적 대안으로서 비시각 다중감각 인터랙션의 구체적인 개발 방향성 및 가이드라인을 제공하는 데 기여하였다. 나아가, 시각장애인뿐 만 아니라 아동이나 노인과 같은 비시각장애인도 유니버설 인터랙션 기술을 통해 기존의 시각 위주의 단편적 경험을 넘어선 종합적인 감각적 경험을 할 수 있는 기술 기반을 구축하는데 기여할 수 있을 것으로 기대된다.

정보 기술의 빠른 발전에 힘입어 기존의 인터랙션 디자인은 사용자의 요구를 더 이상 충족시키지 못하고 있다. 사용자 체험에 대해 사용자들은 더 까다로운 요구를 하고 있다. 사용자 체험의 개념은 이미 디자인의 목적을 벗어나 가용성, 용이성에서 감정, 의미의 의도로 확장되고 있다. 감정 인터랙션 디자인에 대해서 연구자와 디자이너가 함께 관심을 갖게 되었으며, 사용자 체험 디자인의 새로운 경향이 되고 있다. 이런 다양한 상황에서 사용자의 정서적 욕구를 충족시켜야 하는 점이 중요시 되고 있다. 본 연구에서는 기존의 게임 사례를 근거로 게임에 존재하는 감정 인터랙션 설계를 논증적인 방법으로 분석하였다. 또한 분석 결과를 정리하여 Donald Arthur Norman 교수가 제시한 감정화 설계의 세 가지 차원을 근거로 게임에서의 감정 인터랙션 설계의 우열을 어떻게 판단하는지 검증하였다. 플레이어들이 게임을 하면서 얻는 감정의 변화를 통해 감정 인터랙션이 게임 디자인에서 뚜렷한 우열 구분이 있음을 보여준다.

오늘날, 정보 기술은 급속도로 발전하고 있으며 기존의 인터랙션 디자인은 더 이상 사용자의 요구를 충족 시키지 못하며 사용자들은 사용자 체험에 대해 더 까다로운 요구를 하고 있다. 사용자 체험의 개념은 이미 디자인의 목적으로 가용성, 용이성에서 감정, 의미의 의도로 확장하고 있다. 감정 인터랙션 디자인은 정보시대 연구자와 디자이너의 관심의 초점이 되어가고 있으며, 이용자 체험 디자인의 새로운 트렌드가 되고 있다. 이런 상황에서 사용자의 정서적 욕구를 충족시키는 것이 중요하다. 본 연구는 기존 카드게임의 사례를 들어 논증하는 방법으로 트레이딩 카드게임에 존재하는 감정 인터랙션 디자인 및 관련 디자인을 분석하였다. 또한 공통적으로 분석 결과를 정리하여 이를 바탕으로 감정 인터랙션 디자인이 트레이딩 카드게임에서 어떤 역할을 하는지 입증했다. 플레이어가 게임을 하면서 느끼는 감정적인 요소를 통해 감정 인터랙션이 게임 디자인에서 갖는 중요한 가치를 밝히고, 디자이너가 게임 디자인을 하면서 감정 인터랙션 디자인을 얼마나 중요시하는지를 보여준다.

최근 VR(Virtual Reality)에 대한 사람들의 관심이 높아짐에 따라 주변기기 또한 많은 발전이 이루어졌다. VR 환경에서 그 환경내의 사물과 인터랙션 할 수 있는 여러 인터페이스 장치와 룸 단위의 스캐닝을 통한 VR 환경 구성까지 많은 연구가 이루어지고 있다. 현재 VR의 동향을 보았을 때 가정에서의 VR 활용법은 여러 햅틱 인터페이스를 이용하여 VR 환경 내에 구성된 사물들과 인터랙션 하는 것이 많으며 룸 스캐닝을 이용한 방법으로 공간상의 제약을 어느 정도 벗어나기도 하며, 트레킹 장비를 이용하여 실제 사물들과의 인터랙션을 하기도 한다. 3D 프린터의 발전으로 상업용 3D 프린터와 가정용 3D 프린터의 보급이 활성화 되었으며, 3D 프린팅 업체 또는 가정에서 쉽게 3D 프린터를 통해 자신이 원하는 모형을 만들 수 있게 되었다. 위 두 가지를 고려하였을 때 VR 환경 에서 사람들이 쉽게 만들 수 있는 모형을 가지고 직접 인터랙션을 할 때 사람들이 느끼는 모형의 물체감과 VR 환경상에서 구성된 모형의 물체감 사이의 차이점에 대한 연구가 필요하다고 느껴진다. 따라서 이 논문에서는 3D 프린터로 제작한 사물을 VR 공간 내에 구현하고 실제로 구현된 그 사물과의 사용자 테스트를 통해 실제 사물과 인터랙션 할 때와 다른 일반 인터랙션 장비를 사용할 때의 차이에 대한 연구를 하고자 한다.

As a macroscopic research for the interaction of TV Console game platform, I have analyzed the differentiation & characteristic of interaction for each platform. “Odyssey” developed by Ralph Henry Baer in Magnavox was the first console which has the propaedeutic user interaction. Development of graphical technology and the release of the Nintendo Famicom which equipped with Yokoi Gunpei cross key & horizontal Pad had provided an opportunity for the development of user interaction methods like as sound & 2D. Also, multimedia function of Sony PlayStation and Nintendo 64 had brought the era of 3D games and multiplay. Finally, Motion technology triggered by Wii had progressed to the gesture recognition interface throughout the Playstation MOVE of SONY & Xbox 360 Kinect of Microsoft.

제품이나 서비스에서 사용자가 예상하지 못한 의외성을 제공할 때 사용자는 만족을 넘어 감동할 수 있으며, 최근 몇몇 애플리케이션이나 웹서비스는 이러한 의외성을 제공하고 있다. 그러나 의외성 자체는 오히려 사용 용이성을 떨어뜨리는 등 문제를 야기 시킬 수 있음에도, 기존 모바일 애플리케이션 관련 연구들은 주로 사용성 중심의 만족을 다루었다. 따라서 본 연구에서는 이러한 의외성으로 인한 사용자 경험의 변화를 세렌디피티(뜻밖의 발견으로부터 유발되는 예상치 못한 즐거움) 개념을 이용하여 모바일 애플리케이션의 UX 분야에서 실험적으로 확인하고, 이로부터 유발되는 요인이 사용자 만족에 미치는 영향에 대해 관찰했다. 즉, 모바일 애플리케이션의 인터랙션을 통해 유발시킨 의외성과 동시에 게임 요소를 제공한 세렌디피티, 지각된 신규성과 지각된 사용 용이성, 지각된 유용성, 그리고 만족 등의 요인들 간 관계를 살펴봤다. 그 결과 세렌디피티가 지각된 신규성에 정(+)의, 사용 용이성에 부(-)의 영향을 미치고, 지각된 신규성과 지각된 사용 용이성이 지각된 유용성에 정(+)의 영향을 미치며, 세 가지 요인 모두 사용자 만족에 정(+)의 영향을 미치는 것이 관찰됐다.

As a macroscopic research for the interaction of mobile game platform, I have analyzed the differentiation & characteristic of interaction for each platform. ‘Game & Watch’ was the first handheld game console released by Nintendo in 1980, the initial model was merely a combination of clock and game consoles to emphasize mobility. However, ‘Game&Watch:DonkeyKong’ which equipped with Yokoi Gunpei’s cross key provided an opportunity for the development of a full-fledged multi-screen gaming. ‘GameBoy’ was the beginning of a portable game machine in the modern sense. It has brought a lot of changes for the gameplay pattern using the contrast of color, smooth animation, as well as interchangeable cartridge system. Also, ‘NDS(Nintendo DS)’, which had several interaction system such as dual screen, voice input and touch input, had contributed to expanding the emergence of innovative game content and women game users. ‘PSP(Playstation Portable)’ by SONY in 2004 materialized 3D games using high performance and progressed to multimedia platform.

로봇과 인간의 상호작용에서 언어에 의한 정보 전달은 상호작용의 한계가 있으므로, 더욱 원활하고 효율적인 의사소통과 나아가 로봇의 감정 표현까지 구현하기 위해서는 비언어적 커뮤니케이션이 필요하다. 본 연구에서는 쇼핑을 지원하는 로봇을 전제로 하여 쇼핑 행태에 따른 7가지 비언어적 정보를 도출하였다. 도출된 비언어적 정보의 요소로서 표정을 선정하고, 2D 분석을 통하여 얼굴 구성요소를 코드화 하였다. 얼굴 구성요소의 코드를 조합한 3D 애니메이션을 이용하여 비언어적 정보의 표현에 대한 유의성을 분석하였 다. 분석 결과, 제안된 비언어적 정보의 표현 방법은 높은 수준의 유의성을 보여 비언어적 정보 연구의 기초자료 로서 활용 가능성이 확인되었다. 다만, '당황'의 경우 코드화된 얼굴 구성 요소의 모양 적용에 한계가 있으며 보 다 체계적 연구가 요구된다.

QR code has been widely used for Augmented Reality games as well as for many commercial applications. However, its usage was limited because it is difficult to enable tangible interactions through which users may change 3D models or animations. Markers, by blocking designated regions, may be recognized as different patterns allowing for tangible user interactions. Unlike markers, it is difficult to alter QR code patterns because QR code contains error correction patterns. In most cases, altered patterns cannot be recognized. Our goal was to enable QR code based interactions for Augmented Reality games. By performing research and experiments, we discovered a mechanism for altering QR code to change the text string that the QR code represents. In this paper, we introduced a QR code alteration prototype that is based on composition of partial QR codes by using transparent film overlays. We endowed tangible interaction capability to QR code for Augmented Reality games.

A scalable large high-resolution tiled display supports a number of users from any point and distance to view and use contents on the display. However, user interaction with the tiled display is not well supported by traditional mouse and keyboard due to the screen size and resolution. While many user interaction techniques for tiled displays have been investigated, no single user interface standard is existed yet. In this paper, we describe a design and implementation of the multiple input device user interaction system for a scalable distributed tiled display system. This interaction system presents the generalization and interaction mechanism of input information to handle various input devices to enable users to simultaneously interact with tiled display applications. This system aims at supporting more complex user interactions via several different types of input devices.

그라피티 아트는 미술 역사의 발전과 함께 비물질적이거나 재물질화 된(re-materialised) 인터랙티브 미디어아트 속에서 새로운 언어와 리얼리티를 구축하며 새롭게 발전해 나가고 있다. 본 논문에서는 그라피티 아트의 특징을 크게 사회적인 특징과 개인적인 특징으로 나누어 분석하였고, 자유로운 드로잉 즉 낙서화에 대한 개념과 특성을 고찰하였다. 또한 자유로운 드로잉(낙서)을 함에 있어서 비물질적 매체인 빛을 이용한 사례의 인터랙션을 조사하여 그 경향을 분석하였다. 빛으로 하는 낙서는 프로세싱(processing), OpenCV(Open Source Computer Vision Libraries), 키넥트(kinect) 등과 같은 소프트웨어를 이용하여 카메라를 통한 라이트 트래킹(light tracking) 방식을 통해 빛을 입력 받고, 이것을 프로그래밍화하여 빔 프로젝트(beam project)로 출력하는 형태의 기술 기반으로 가상공간을 만들어 관객에게 색다른 경험을 제공할 수 있다. 디지털 그라피티 아트는 앞으로도 테크놀로지와 미디어아트의 융합을 통하여 창의적인 디지털 미디어아트로 발전할 것으로 기대한다.

본 연구는 단순 입력 기반 유니모달 인터랙션의 한계를 극복하고 단순 입력 방식이 아닌 멀티모달 기반 사용자의 행위, 의도, 및 집중도를 활용하여 실감적이고 몰입도를 향상시키는 인터랙션 시스템을 제안하는데 그 목적이 있다. 본 연구의 선행연구에서 기존 문헌연구를 토대로 메타분석방법을 활용하여 인터랙션을 위한 3차원 동작 인식 기술의 정확도를 분석하여 최종적인 센서 기반 인터랙션 방법이 선정되었고, 직관적 제스쳐 인터랙션 요소를 추출하여 본 시스템에 반영하였다. 또한 생리반응을 이용한 집중력 판단 기술을 개발하여 사용자 의도를 판단하는 연구를 진행하였다. 본 연구에서 제안하는 시스템은 3부분으로 나눌 수 있다. 선행연구에서 선정된 인터랙션 요소들을 적용하여 가속도(Accelator) 센서와 연성(Flexible) 센서를 활용하여 손 동작을 인식하는 시스템을 구현하였고, 동공 인터랙션을 통한 안경형 시선 추적기를 구현하여 인터랙션이 가능하게 하였으며, 심혈관 반응과 피부 온열 반응을 측정하여 사용자의 의도를 반영한 시스템을 최종 구현하였다. 실감형 디지털 엔터테인먼트 플랫폼 기술 개발을 위한 기초 연구로서 활용이 가능할 것으로 판단된다.

본 연구에서는 다양한 색채환경에 대한 반응을 파악하기 위해 3차원 가상환경 인터페이스를 개발하고, 개발된 인터페이스에 대해 사용자가 어떻게 감성적으로 인터렉션하는지를 평가하였다. 3차원 가상환경은 후면 투사형 대형화면을 통해 제시되었으며, 가구를 포함한 실내 환경요소에 12가지 색채조합을 적용한 후, 피실험자들에게 색채조합에 대한 반응과 아울러 가상환경 인터페이스를 통한 감성적 인터렉션을 함께 평가하도록 하였다. 총 34명의 대학생들이 실험에 참여하였으며, 피실험자들은 대형화면 (8'×6')에 제시되는 고화질의 색채 환경 속에서 표준 입력장치를 사용하여 360도로 시선을 움직일 수 있었다. '공간적 실재감(Spatial Presence)', '주제와 연관성(Topic Involvement)', 및 '유쾌함(Enjoyment)'에 관한 자기보고형 설문지를 통해 가상환경파의 인터랙션을 통한 감성 및 인지적 반응을 파악하였다. 현 연구는 향후 디자인 연구, 특히 환경디자인 연구에 3차원 가상환경 인터페이스를 적용하고자 하는 연구자들이 사용자 인터랙션을 사전에 이해하는데 기여할 것으로 기대된다.

이 연구는 인터랙션 선택 문제에서 국가(문화), 세대, 성별, 개인주의-집단주의 등의 변수에 따라 선택에 차이가 발생하는지를 파악하고, 나아가 그 차이의 원인을 고찰하고자 한 연구이다. 본 설문에서 조사한 인터랙션 선택문제는 휴대전화 SMS보관함의 삭제버튼을 눌렀을 때의 화면디자인, 소프트웨어 설치의 위험성을 경고하는 인터넷 경고창에 대한 대응, 수프 메이커 컨트롤패널의 유형 및 정보표현방식 선택으로 구성되었다. 한국인 639명을 조사한 1차조사와 중국, 일본, 네덜란드인 총 784명을 조사한 2차조사 데이터를 토대로, 교차분석 및 카이검정을 실시하였다. 그 결과 휴대전화 SMS보관함 삭제문제에서는 일본인은 '아니오'를 네덜란드인은 '예'를 더 많이 선택해, 불확실성 회피 성향이 인터랙션 선택문제에 영향을 미침을 시사했다. 인터넷 경고창 문제에서는 나이든 세대에 비해 젊은 세대가, 여성에 비해 남성이 적극적으로 설치하는 경향을 보였다. 컨트롤패널의 유형 선택에서 네덜란드인은 디지털형보다 아날로그형을 상대적으로 더 선호했다. 컨트롤패널의 정보표현방식 선택에서는 나이든 세대일수록, 또한 개인주의일수록 문자표현을 상대적으로 더 선호했다. 여러 변인들 중 국가(문화)가 가장 큰 차이를 보여 가장 의미있는 변수임을 확인하였다.

최근 컴퓨터 기술의 급속한 발전으로 인해 게임 환경도 점차 발전되고 있다. 디스플레이 장치는 대형화 되었으며 다중의 디스플레이를 사용하는 사용자가 늘고 있다. 기존 게임 환경에서 게임용 컨트롤러를 통한 인터랙션은 사용자의 이동을 제한하였다. 이 논문에서 우리는 게임 환경에서 사용되는 다양한 방식의 컨트롤러를 인식 센서 내장형와 외장형으로 구분하여 분석해 보았으며 넓어진 사용자 환경에 적합한 포인팅 인터랙션 방식에 대해 살펴보았다. 발전되는 게임 환경에서 다중의 디스플레이 장치가 있는 환경에서는 공간에 대한 포인팅 인터랙션이 고려되어야 한다. 우리가 실험한 두 가지 pointing controller 중 LED-bar 시스템은 프로젝터 화면과 모니터 등 다중의 디스플레이 환경 또는 공간상 특정 객체를 포인팅하는 것이 가능하며 다수의 카메라 센서를 사용하여 사용자의 공간을 충분히 넓힐 수 있다.

이 연구에서 우리는 대형 디스플레이용 게임을 위한 인터랙션 시스템인 LED-bar를 제안한다. LED-bar는 LED 막대를 이용한 포인팅 시스템으로 게임 상에서 기본이 되는 포인팅, 선택, 이동 등의 인터랙션을 제공한다. 기존의 포인팅 장치들과는 달리 LED-bar는 대형화면에서 절대적인 포인팅 위치를 제공하여 사용자가 느끼는 포인팅 위치와 실제 포인팅 위치를 일치시킬 수 있다는 장점이 있다. 원격 협업 환경에서 원격지의 사용자나 현장의 사용자가 동일한 포인팅 정보를 얻을 수 있게 해준다. 제안하는 LED-bar 시스템은 적외선 필터를 씌운 두 대 이상의 카메라와 적외선 LED가 내장된 반투명 파이프를 이용하여 조명 환경의 변화에 덜 민감하도록 구성되었다. LED-bar는 대형 디스플레이에서 게임할 때, 사용자가 포인팅하는 절대 위치를 계산하여 알려주어 사용자가 직관적으로 포인팅하거나 슈팅할 수 있게 해 준다. 뿐 아니라 사용자의 위치도 계산하여 다중사용자 게임에서 서로 타 사용자의 위치가 어디인지를 파악할 수 있게 하는 장점이 있다.

이 논문은 최근 다수의 플랫폼에서 주목받고 있는 인디 게임(indie games)의 열풍을 그 게임의 인터랙션 방식의 혁신과 서사적 시도에서 찾고, 인디 게임의 게임 디자인과 스토리텔링, 그리고 그 위상에 관한 시론적인 해석을 시도하는 것을 목표로 한다. 이를 위해 인디 게임이 기존의 대규모 스튜디오 게임과 다른 면모를 인터랙션 메커니즘, 연출 스타일, 서술 방식에서 찾고 각각의 사례들을 분석하고자 했다. 아울러 한국 인디 게임이 스팀과 같은 글로벌 플랫폼에 진출한 사례를 살펴보고, 앞서 언급한 방법론들을 동일하게 적용하여 분석하였다.

게임기획자는 내러티브를 기반으로 퀘스트의 초기 설계를 한다. 이러한 게임의 정적 컨텐트 수립에 있어 게임캐릭터의 플레이경험을 사전 예측하는 것은 중요하다. 본 논문은 게임캐릭터가 고유한 스테이터스를 바탕으로 퀘스트 플레이를 수행함에 있어 캐릭터간 구별되는 정서적 인터랙션을 시각화 할 수 있는 방법에 대해 다루고 있다. 이를 위해 첫째, 기존 영상매체에서 내러티브 구조의 시각화에 대한 연구를 바탕으로 둘째, 퀘스트플레이 경험과 플레이어 인지행동을 구체화하였다. 셋째, 사례분석을 통해 캐릭터별 퀘스트플레이 과정에서의 차이를 QUG(Quest Unit Graph)로 시각화하여 직관적인 확인이 가능하도록 하였다. 기존 연구가 캐릭터별 성취(achievement)관점에서의 수치적 밸런스 대한 것에 반해, 본 논문은 내러티브 구조 관점에서 퀘스트플레이 인터랙션에 대한 시각화 모델을 제안함으로써 기획자의 퀘스트 경험설계를 사전 예측해 볼 수 있다.