본 연구에서는 사용자로부터 입력받은 이미지를 분석하여 그에 맞는 음악을 생성, 재생하는 방법을 고안 하였다. 단순히 이미지를 청각화 하는 기술적인 의미 뿐 아니라 사용자의 이미지에 담긴 정서와 의도 또한 담아내는 것을 목표로 하였다. 사용자는 본 연구에서 제안된 어플리케이션에 원하는 물체를 그린다. 인공지능을 통해 이미지가 어떤 물체인지 판별 후, 그 물체와 이어질 수 있는 감정을 대응해 해당 멜로디의 감정과 분위기를 맞출 수 있도록 하였다. 정서에 알맞는 음정(key)를 설정한 뒤, 사용자가 이미지를 그릴 때 입력한 획순을 분석해 이를 기준으로 음계를 추출하여 선율을 생성하였다. 향후 이미지의 청각적 표현을 구현하는 것뿐만 아니라 그림에 대한 예술적인 이해와 의미 있는 음악을 만들어내기 위한 화성법 등의 작곡이론을 연구하여 이미지에 담긴 예술성과 의도를 음악에 담아낼 수 있는 한 가지 방향을 제시할 것이다. 또한 그림을 인식하고 판별하기 위한 인공지능 기술과 그림 분석, 음악 생성 등의 예술 분야를 결합해 공학과 예술의 융합이라는 방향으로서 의미 있는 시도가 될 것이다.

본 논문은 골프 스윙 자세 학습자를 위하여 골프 스윙의 참조 모델인 3D 모델과 학습자의 골프 스윙을 촬영한 동영상을 대상으로 스윙 동작 시 각각의 위치 및 시간에서 각 동작을 정밀하게 비교 분석하기 위해 3D 모델의 골프 스윙 동작과 학습자의 스윙 동작을 동기화 시키는 방법을 제안하고 구현한 결과를 제시한다. 3D 모델과 학습자의 스윙 동영상을 동기화시켜 재생하기 위해서 먼저 학습자의 골프 스윙 동영상을 촬영하고, 촬영한 동영상으로부터 어드레스 자세부터 피니쉬 자세까지 골프 클럽의 위치에 따라 상대적 시간 정보를 추출한다. 고품질 모션 캡쳐 장비를 통해 초당 120프 레임으로 캡처된 골프 전문가의 움직임 정보를 3D 모델에 리깅한 3D 참조 모델에 학습자 스윙 동영상으로부터 추출한 골프 클럽의 위치별 시간 정보를 적용하여 3D 참조 모델과 학습자의 스윙 동 영상을 동기화시켜 재생함으로 학습자는 골프 스윙의 각 위치에서 참조 모델과 자신의 자세를 정밀 하게 비교함으로 자세를 교정하거나 학습할 수 있다. 동기화된 재생을 통하여 기존의 수동적으로 위치를 조정하며 참조 모델과 학습자의 스윙을 비교 분석하는 시스템의 기능을 편리하게 사용할 수 있도록 개선할 수 있으며, 골프 자세의 각 위치를 검출하는 영상 처리 기술을 적용한 부분을 제외 하고, 동기화시키기 위해 동영상에서 자동적으로 각 위치의 시간 정보를 추출하여 동기화시켜 재생 하는 방법은 일반적인 생활 스포츠 분야로 확대하여 활용할 수 있을 것으로 기대한다.

본 연구는 영상의 시간적 요소를 제어하였을 때 어떠한 감성적 효과가 나타나는가를 탐구하였고, 연구 결과를 기반으 로 영상 감성 평가 도구를 개발하였다. 연구는 두 단계로 나누어 진행되었다. 첫 번째 연구에서는 원본 영상 대비 영상의 재생 스타일 적용이 야기할 수 있는 감성적 가치를 수집하고자 하였다. 영상의 배속, 방향성, 연속성 등 세 가지 시간적 요소를 제어해 총 11 가지의 재생 스타일을 설정하였다. 그리고 재생 스타일 각각에 대하여 원본 영상과 견주어 어떠한 감성적 효과가 부가되는가를 어휘 형태로 수집하였다. 원본 영상으로는 중성적인 감성과 네 개의 감성 영상 ― 기쁨, 여유로움, 화남, 슬픔 ― 을 활용하였다. 실험을 통해 (N=30) 총 3,800 개의 단어들이 수집되었으며, 위 단어들은 899 종의 감성 어휘로 정리되었다. 그리고 감성 어휘들은 유의어 관계에 의해 총 52 가지의 감성 어휘 군집으로 최종 분류되었다. 두 번째 연구에서는 재생 스타일이 적용된 영상의 감성을 평가하는 도구를 개발하고자 하였다. 연구의 자극물로 재생 스타일이 적용된 11 가지 상업적 영상물을 수집하고, 각 영상을 재생 스타일이 적용되지 않은 원본 영상으로 변환하였다. 그리고 첫 번째 실험과 같이 재생 스타일이 적용된 영상과 원본 영상을 동시에 제시해, 재생 스타일에 의한 효과를 평가하였다. 평가자들은 (N=30) 감성 어휘 899 종 가운데 선별된 대표적인 영상 감성 어휘 38개에 대해 5 점 척도로 응답하였다. 요인 분석법을 통해 응답을 분석한 결과 총 4개의 감성 요인 ― 기쁨, 슬픔, 회상적, 이상함 ― 이 추출되었다. 이 4개 요인은 보편적인 정서 이론가 비교하여 기쁨과 슬픔이 공존한다는 차이점을 나타내었다. 추가적으로, 연구 결과를 토대로 애니메이션 기반의 감성 평가 도구를 개발한 후 이에 대한 활용 가치 및 응용 방안에 대하여 논의하였다.

The green peach aphid, Myzus persicae (Sulzer), is one of the most important insect pests in the world. We have explored the possibility of using sounds as a stressor to control this species. Five sine wave frequencies (100, 500, 1000, 5000, 10000 Hz) with combination of three intensity (66, 78, 90 dB) were used as acoustic stimuli in the playback experiments. For behavioral bioassay, we examined frequencies of honeydew production (HDP) and wagging behavior, and duration of moving behavior. The HDP occurs regularly during each stage of nymphal or mature period, and rate of the HDP indicates a degree of food consumption. Aphids conduct wagging to determine a host plant or to find a feeding site. The moving behavior may be regarded as dispersal. As results, all acoustic stimuli significantly reduced rate of the HDP and increased rate of the moving behavior. There was a significant effect to induce the moving behavior in the test of 5000 Hz. In addition, the acoustic stimuli using 5000 Hz were the most effective to disturb feeding behavior of M. persicae at an individual level.

The green peach aphid, Myzus persicae (Sulzer), is one of the most important insect pests in the world. We have explored the possibility of using sounds as a control agent in this species. Sine waves with four different frequencies (100, 500, 1000, 5000 Hz) were used as acoustic stimuli in the playback experiments. As a behavioral bioassay, we recorded honey dew production (HDP), wagging, and walking. HDP occurs regularly at each stage of nymphal and adult periods, and the rate of HDP may indicate a degree of food consumption. Aphids conduct wagging to determine a host plant or to find a feeding site. Walking may be regarded as dispersal. All acoustic stimuli significantly reduced the rates of HDP and increased the rates of wagging. There were no significant effect of acoustic stimuli on walking. Based on the bioassay, the acoustic stimulus with 5000 Hz seemed to be the most effective on inhibiting feeding behavior of this aphid species at an individual level.

In this paper, we introduce the performance evaluation and development of Raw VLBI Data Buffer(RVDB) system for the synchronized playback processing of observed data in Korea-Japan Joint VLBI Correlator(KJJVC). The high-speed correlation processing system is under development so that the radio data obtained with 8192 channels and 8 Gbps speed from 16 stations will be able to be processed. When the recorded data of each station are played to correlator, the time synchronization of each station is very important because the correlator should process the data obtained with same time and condition. There are many types of recorder systems in the East Asia VLBI Network (EAVN). Therefore it is required to prepare the special time synchronized playback processing system to synchronize the time tag of observed data. The developed RVDB system consists of Data Input Output(DIO), 10GbE switch, and Disk Data Buffer(DDB). It can record the data with maximum 2 Gbps speed, and can play back the data to correlator with nominal 2 Gbps speed. To enable to play back the data of different playback system to the correlator, we developed the high-speed time synchronized playback processing system. We carried out the experiments of playing back and correlation for gigabit correlator and VCS trial product so as to confirm the performance of developed time synchronized playback processing system. In case of online and offline playing back experiment for gigabit correlator, we confirmed that the online and offline correlation results were the same. In case of playing back experiment for VCS trial product, we verified that the wide band and narrow band correlation results were also the same. Through the playing back experiments of RVDB system, the effectiveness of developed RVDB system was verified. In this paper, the system design, construction and experimental results are shown briefly.