현재 존재하는 인공지능 기반 음악 생성에 관한 여러 모델과 연구는 수동 텍스트(Text) 기반 음악 생성에 대해 다루고 있다. 본 논문은 사용자의 편의성을 높이고, 창의적인 음악 생성 과정 을 더욱 원활하게 할 수 있도록 텍스트(TEXT) 프롬프트(Prompt) 자동화를 통한 음악 생성시 스템 방안을 제안한다. 그 방안으로 음원 파일을 통해 수집한 음악 분석 및 데이터화와 가사 정보에서 추출한 키워드를 기반한 장르, 가수, 앨범 등의 정보가 포함된 데이터셋(Dataset)을 구축 후, 파이썬(Python)의 자연어 처리 방법인 Konlpy를 사용하여 가사 데이터를 토큰화하고, TF-IDF(Term Frequency-Inverse Document Frequency) 벡터화를 통해 중요한 단어를 추 출한다. 또한, MFCC, 템포 등의 특징 데이터셋을 통하여 모델을 통한 감정을 예측하고, CNN 모델 및 Chatgpt를 활용한 텍스트 프롬프트를 자동생성하는 방법을 구현하여, MusicGen 모델 을 사용한 자동화 생성 프롬프트 기반 음악을 생성한다. 본 텍스트 프롬프트 자동 생성 화를 통한 음악 생성 연구의 결과는 음악 데이터 분석 및 생성 분야에 기여될 것으로 기대한다.

본 연구에서는 뇌혈류 신호를 측정할 수 있는 시변자계 기반의 비접촉식 직물센서를 설계하여 뇌혈류 신호 검출 및 감성평가의 가능성을 탐색하고자 하였다. 직물센서는 40 denier의 은사를 30합사 한 후 컴퓨터 기계 자수하여 코일 형 센서로 구현하였다. 뇌혈류 측정 실험을 위해 코일형 센서를 경동맥 부위에 부착하고, ECG (Electrocardiogram) 전극과 RSP (Respiration) 측정 벨트를 부착 및 착용하도록 하였으며, 동시에 초음파 진단기기를 사용해 도플러 초음 파 검사(Doppler Ultrasonography)를 수행하여 혈류 속도를 측정하였다. 피험자에게 Meta Quest 2를 착용시키고, 실 험을 위해 조작된 영상 시각 자극을 보여주면서 혈류 신호를 측정한 후 시각 자극에 대한 감성평가 설문지를 작성하 도록 하였다. 측정 결과, 도플러 초음파 검사를 통해 측정된 혈류 속도 신호에 변화가 생길 때 직물센서로 측정한 신호도 함께 변화하는 것으로 나타났다. 이를 통해 코일형 직물센서를 이용하여 뇌혈류활동 신호를 측정할 수 있다 는 것을 검증하였다. 또한, 감성평가를 위하여 ECG 신호와 PLL 신호(직물센서 신호)에서 추출한 HRV를 계산해서 비교한 결과, 시각 자극으로 인한 교감신경계와 부교감신경계의 활성화에 따른 비율의 변화에 대해서는 직물센서로 측정한 신호와 ECG 신호를 이용해 계산한 값이 비슷한 경향을 보이는 것으로 나타났다. 결론적으로, 본 연구에서 개발된 시변자계 기반의 코일형 직물 센서를 통해 뇌혈류 변화 측정 및 감성 모니터링이 가능할 것으로 사료된다.

Recently, information technology has been developed rapidly over than everyone thinks. The computer technology with hardware and software development of artificial intelligent and machine learning would be more interested in the interactive computer technology. In this paper, we propose a new paradigm to implement the system which recognizes human’s emotion and reacts with the emotion, and this will be human interactive and applied in every information technical field. This system implements an intelligent system that analyzes human’s faces following with the recognition of emotion, which will be the intelligent system that reacts in accordance with the emotion. The proposed real-time intelligent system will develop the system that recognizes human’s emotion, with the emotion, and reacts the actions in the field of marketing of enterprises, intelligent games, and intelligent robots.

본 연구에서는 모바일 정보기기의 콘텐츠 디자인을 목적으로 한 감성검색시스템의 구축에 있어 시스템의 주요 구성요소 중의 하나인 '사용자감성모델'을 풀 컬러 화상의 색상성분추출을 통하여 자동적으로 생성하는 방법을 제안하고, 평가실험을 통하여 시스템의 타당성을 검증하였다. 시각적 감성 유발 자극으로 100장의 인테리어 이미지 화상을 이용하여 데이터베이스를 작성한 후 48명의 실험 참가자를 대상으로 감성평가실험을 실시하였다. '사용자감성모델'의 신뢰성을 검증하기 위해 먼저 시스템이 검색한 이미지 속에 정답 이미지가 출현하는 재현율(Recall ratio)을 구하였다, 다음으로 시스템이 산출한 순위와 피험자가 평가한 순위 사이의 상관분석을 실시하였으며, 마지막으로 시스템이 산출한 상/하위 순위를 이용하여 Paired Samples t-test(2-tailed)분석을 실시하였다. 분석결과 전체 감성어에 대한 평균 재현율은 62.1%로 양호하게 나타났으며, 상관분석에서도 전체 감성어들이 정적 상관을 보이고 있는 것으로 나타났다(p<.01). 또한 Paired Samples t-test(2-tailed) 분석결과 'Casual'를 제외한 모든 감성어들에서 상위 이미지가 더 적합하며 그 차이가 유의미한 것으로 나타났다(t(9)=5.528, p<.05). 이와 같은 연구결과로부터 색상정보만으로 구축한 '사용자감성모델'이 상업공간의 이미지와 같은 시각자극의 검색에 있어서도 사용자의 감성을 반영할 수 있는 효율적인 방법인 점을 확인하였다.

요즈음 인터넷을 통해 물건을 구매하는 경향이 증가하고 있다. 또한 물건을 구매한 소비자는 리뷰, 댓글, 비평 또는 블로그 등의 형식으로 온라인에 그들의 사용 후기를 작성한다. 또한 작성된 사용 후기부터 많은 구매자들은 물건을 구매하기 전에 자신이 구입하고자 하는 물건에 대한 정보를 얻는다. 따라서 회사나 공공기관은 대중이 다른 사람의 의견에 관심을 기울인다는 점 때문에 대중의 의견을 수집하고 분석할 필요성에 직면하였다. 그러나 온라인상에 댓글이 너무 많고, 중복적이면서 짧은 경향이 있다. 이러한 환경 속에서 텍스트 문서의 감성을 인식하는 시스템의 필요성이 대두되었다. 텍스트로부터 작성자의 의견이나 주관적인 생각을 추출할 수 있게 영어에서는 단어에 속성이 주어진 GI와 LKB가 있으나 한글은 아직 속성이 주어진 사전이 존재하지 않는다. 이 논문에서는 한글 품사 중 4개의 품사(명사, 동사, 형용사, 부사)에 속성을 주었다. 그리고 학습 군을 만들어서 감성 단어의 패턴을 구성하고, 문장에서 단어 사이의 공기관계를 구성하여 학습 시켰다. 이 학습을 바탕으로, SO-PMI을 이용하여 문서를 긍정과 부정 2가지 극성을 분류하고, 4개의 품사(명사, 동사, 형용사, 부사)를 각각 조합하여 최상의 조건을 구하였다. 마지막으로 사용자 인터페이스를 통해 새로운 감성 표현, 구성형식, 단어 연관성을 반자동적으로 삽입하고 교정할 수 있는 시스템을 설계하였다.

Human emotion is a point to communicate each other. we applied human emotion to make computer interface. In this paper, we have researched the next generation interface technology "Bio Feedback system" which enabled us to estimate an emotional state of human being and so we applied it to embody ‘NPC’ using "Reinforcement Learning Algorithm" which is able to respond appropriately to human being’s emotions.

감성기반 공간디자인 기술은 사용자가 감성에 영향을 미치는 요소들을 변화시킬 수 있고 사용자가 원하는 공간을 디자인 할 수 있다. 실제 공간을 구성하는데 있어서 제작 기간의 단축을 제공하고 제작된 콘텐츠의 품질도 보장할 수 있다. 감성기반의 디지털 공간디자인 시스템은 기본적으로 구축된 감성모형을 활용하여 사용자가 감성 공간을 디자인하는데 도움을 받거나 디자인 하고자 하는 콘텐츠의 품질을 평가하는데 활용 할 수 있다. 시스템에서 제공하는 평가시스템에 의한 실시간 평가가 가능하며 평가에 의해 축적되는 데이터를 효율적으로 관리할 수 있다. 평가 데이터를 인터넷의 중앙서버에 데이터베이스화하고 실시간 업데이트 데이터를 통해 객관적이고 정밀한 결과를 도출해 낼 수 있다. 감성기반 리얼타임 디지털 공간디자인시스템은 일반인도 쉽게 사용할 수 있는 인터페이스를 제공하여 가상현실, 게임, 애니메이션 등의 여러 분야의 공간디자인 개발에 효과적인 방법을 제공하고자 한다.

소비 시장이 감성 소비 환경으로 바뀌면서 브랜드의 역할이 더욱 중요해졌고, 이를 위한 브랜드 이미지 전략으로서 디자인의 역할이 확장되고 있다. 브랜드와 소비자가 소통하는 지점인 소비자 접점은 체험을 통한 브랜드 이미지가 형성되는 경로이므로, 기업이 지향하는 이미지로 각인시키기 위해서는 소비자 접점에 대한 총체적인 기획 및 관리가 필요하게 되었다. 위와 같은 배경에서, 이 연구의 목적은 변화된 시장 환경에서 성공적인 브랜드 이미지를 구축하기 위한 통합 디자인의 구성 방법을 정의하는 것이다. 이를 위해 브랜드 이미지의 특성, 소비자 체험의 조건, 감성의 역할을 이해하고, 이미지와 감성 처리 모형과의 상관성을 해석하여, 이미지의 3가지 특성을 도출하였다. 이미지의 특성은 1) 경험적 판단에 근거하며, 2) 감성적 내용을 표현 전달하고, 3)관념적 공감에 의한 심리적 가치를 만드는 것이다. 이러한 이미지를 창출하는 디자인의 조건을 성공적인 브랜드의 사례연구를 통해 분석하여, 강력한 이미지를 구축하기 위한 브랜드 아이콘의 역할과 이를 위한 통합 디자인의 필요성을 밝혔다. 이 통합 디자인을 구성하는 방법은 1) 브랜드 이미지 포지셔닝에 의한 이미지 집중화, 2) 브랜드 이미지 플롯에 의한 시각적 주제 활용, 3) 이미지 통합 관리를 위한 Total Identity Program, 4) 브랜드 이미지각인을 위한 Brand Icon 개발 등이다.

노인의 일상생활을 편안하고 즐겁게 지낼 수 있도록 도와주는 동반자 로봇의 기능 중 부정적인 감정/정서상태 개선을 위한 Infotainment Service를 소개한다. 노인의 일상생활 중에서 부정적인 감정/정서상태를 정의하고, 이들의 정서상태를 개선할 수 있는 방법들을 모색한다. 인지행동치료에서의 배경지식을 기반으로 노인의 부정적인 정서상태를 개선할 수 있는 애니메이션 클립들을 제작, 편집하여 검증해 보기로 한다. 또한, 검증된 애니메이션 클립들을 이용하여 바람직한 감정상태로의 전이를 위한 감성 컨텐츠를 제공하는 기능을 도출한다. 구체적으로 일련의 실험적 접근방법을 토대로 제작, 편집한 애니메이션 클립을 이용하여 영화의 감정요소를 분석할 수 있는 도구를 설계하고, 기존의 선호도를 고려한 영화추천 시스템을 확장한 감정요소를 고려한 영화 추천시스템을 제안한다.

인간 감성변화의 기본인 피부온도 및 피복내 온습도 측정을 위한 시스템과 감성공학적 해석을 위한 보다 정밀하고 안정성이 있는 센서의 응답성 및 회로의 선형화에 대한 연구를 수행하고, 의복내 환경평가 및 실내 온습도 측정등의 다양한 감성공학적 해석을 위한 소프트웨어의 개발이 본 연구의 목적이다. 본 연구에는 손쉬운 온습도 변환장치와 풍부한 저장능력 등 다양한 분야에서 활용이 가능한 온습도 측정기와 이에 필요한 센서를 개발하고 측정기의 선형화특성을 평가하였다.

본 논문은 음악의 감성을 시각화하는 새로운 방법을 제안하는 논문으로 시각화를 위하여 감성 LED조명 제어 시스템을 고안하였으며 이 시스템은 청중들의 음악 경험을 더욱 풍요롭게 하기 위함에 목적이 있다. 이 시스템은 기존 연구의 음악 감성 분석 알고리즘을 이용하였는데 하나의 음악에서 하나의 감성을 추출하는 기존 연구의 한계를 보완하고자 음악의 1초당 세그먼트에서 감 성을 추출 하여 감성 변화를 감지하는 방법을 연구하였다. 또한 LED조명의 감성 컬러는 IRI컬러 모델과 Thayer의 감성 모델을 기초로 새로운 감성 컬러 36가지를 정의 하여 각 감성에 맞는 색 으로 연출 할 수 있도록 구성하고 애니메이션과 더불어 감성 LED 조명으로 표현 할 수 있도록 하였다. 이 시스템의 검증을 위한 실험 결과, 듣는이의 감성과 감성 LED 조명 시스템의 감성 일 치율이 60% 이상으로 향후 음악 감성 기반 서비스의 중요한 밑거름이 될 것으로 보인다.

In this paper, we propose and examine the feasibility of the robot-assisted behavioral intervention system so as to strengthen positive response of the children with autism spectrum disorder (ASD) for learning social skills. Based on well-known behavioral treatment protocols, the robot offers therapeutic training elements of eye contact and emotion reading respectively in child-robot interaction, and it subsequently accomplishes pre-allocated meaningful acts by estimating the level of children’s reactivity from reliable recognition modules, as a coping strategy. Furthermore, for the purpose of labor saving and attracting children’s interest, we implemented the robotic stimulation configuration with semi-autonomous actions capable of inducing intimacy and tension to children in instructional trials. From these configurations, by evaluating the ability of recognizing human activity as well as by showing improved reactivity for social training, we verified that the proposed system has some positive effects on social development, targeted for preschoolers who have a high functioning level.

본 논문은 RPG게임의 퀘스트 수행에 대한 플레이어의 감정패턴 분석을 그 목적으로 하고 있다. 인간의 다양한 인지행동 범주에 대한 선행연구를 바탕으로 게임플레이어의 행동범주를 5가지로 설정하고 범주에 해당하는 게임플레이 행동(Action)과 내용(Content)을 재정립하였다. 이를 바탕으로 스토리중심의 전개로 다양한 퀘스트 구성을 보여주는 마비노기(Mabinogi)게임의 초기단계(Tutorial Mode)를 퀘스트구조 및 인지행동별로 분류하여 초보 피험자 10명을 대상으로 감정데이터를 도출하고 게임플레이의 인지행동패턴과 도출감정사이의 상관관계를 모형화하였다. 이러한 연구결과는 게임 플레이어의 자극적 수준을 감정패턴으로 확인하여 특정단계의 퀘스트 설계 및 레벨 디자인의 구체화를 모색해 볼 수 있다. 또한 게임플레이 과정에서 플레이어의 감정변화는 재미요소의 표출형태이며 전체적으로 게임의 상위목표수행에 대한 호기심과 도전의식을 유발 시킬 수 있는 장치로 활용가능 하리라 본다.

This paper presents the sound-based emotion estimation method and the growing HRI (human-robot interaction) system for a Mon-E robot. The method of emotion estimation uses the musical element based on the law of harmony and counterpoint. The emotion is estimated from sound using the information of musical elements which include chord, tempo, volume, harmonic and compass. In this paper, the estimated emotions display the standard 12 emotions including Eckman’s 6 emotions (anger, disgust, fear, happiness, sadness, surprise) and the opposite 6 emotions (calmness, love, confidence, unhappiness, gladness, comfortableness) of those. The growing HRI system analyzes sensing information, estimated emotion and service log in an edutainment robot. So, it commands the behavior of the robot. The growing HRI system consists of the emotion client and the emotion server. The emotion client estimates the emotion from sound. This client not only transmits the estimated emotion and sensing information to the emotion server but also delivers response coming from the emotion server to the main program of the robot. The emotion server not only updates the rule table of HRI using information transmitted from the emotion client and but also transmits the response of the HRI to the emotion client. The proposed system was applied to a Mon-E robot and can supply friendly HRI service to users.