디지털 정보 기술의 급속한 발전에 따라 사람들은 점점 더 자연스럽고 편리한 방식으로 인간과 컴퓨터의 상호작용을 실현하는 경향이 있습니다. 본고에서는 Leap Motion 센서를 하드웨어 플랫폼으로 하고 Unity3D 와 Leap Motion 플러그인을 소프트웨어 플랫폼으로 하여 가상 거문고의 상호작용 설계를 개발합니다. 또한 Leap Motion 장치의 개발과 연구를 통해 Leap Motion 센서에서 수집된 제스처 정보의 처리와 인식을 알고리 즘으로 구현하고, 제스처 인식 알고리즘을 이용하여 서로 다른 제스처를 분리하여 서로 다른 응답을 가능하 게 합니다.