본 논문에서는 사용자의 손을 인식하여 가상현실 게임 환경에서 가상의 손을 제어할 수 있는 방법을 제안한다. 카메라를 통해 획득한 영상을 통하여 사용자의 손 이동과 가리키는 방향에 대한 정보를 획득하고 이를 이용하여 가상의 손을 게임 화면에 나타낸다. 사용자의 손의 움직임은 가상의 손이 물건을 선택하고 옮기도록 하는 입력 인터페이스로 활용할 수 있다. 제안하는 방법은 비전 기반 손 인식 기법으로 먼저 RGB 컬러영역에서 HSV 컬러영역으로 입력영상을 변환하고 H, S 값에 대한 이중 임계값과 연결 요소 분석을 이용하여 손 영역을 분할한다. 다음으로 분할된 영역에 대하여 0, 1차 모멘트를 적용하고 이를 이용하여 손 영역에 대한 무게 중심점을 구한다. 구해진 무게중심점은 손의 중심에 위치하게 되며, 분할된 손 영역의 픽셀 집합 중 무게중심점으로부터 멀리 떨어진 픽셀들을 손가락의 끝점으로 인식한다. 마지막으로 무게중심점과 손 끝점에 대한 벡터를 통하여 손의 축을 구한다. 인식 안정성과 성능을 높이기 위하여 누적 버퍼를 이용한 떨림 보정과 경계상자를 이용한 처리 영역을 설정하였다. 본 논문의 방법은 기존의 비전 기술을 통한 손 인식 방법들에 비하여 별도의 착용 마커를 두지 않고 실시간으로 처리가 가능하다. 다양한 입력 영상들에 대한 실험 결과는 제안 기법으로 정확하게 손을 분할하고, 안정된 인식 결과를 고속으로 처리할 수 있음을 보여주었다.

최근 정보통신 기술과 복지수준이 발전함에 따라 장애인들을 위한 여러 인터페이스 장비나 훈련 시스템들이 연구되고 있으나 발달 장애인을 위한 훈련시스템은 미흡한 실정이다. 본 논문 에서는 발달 장애인의 상황 대처 능력 향상과 사회 적응훈련을 목적으로 '음식점 서빙' 이라는 주제에 따른 증강 현실기반 상황 훈련 시스템을 제안한다. 본 시스템은 실제 훈련환경에 마커를 두고 실제 공간에서는 사용하기 어려운 물체들을 가상 물체로 대체한 증강 현실 공간을 구성하여 안전하고 주변 환경의 제약없이 반복훈련이 가능하도록 한다. 훈련자는 HMD를 착용하고 훈련 공간 주위를 볼 수 있으며, 음성 멘트에 따라 행동을 함으로써 시나리오에 따른 훈련이 가능하게 된다.