가상현실은 컴퓨터 시스템을 통해 사용자에게 가상의 세계를 경험 할 수 있도록 사용자의 인지시각 및 감성을 자극하는 것이다. 가상현실의 몰입을 위해 HMD를 비롯한 다양한 디바이스를 이용한 사용자의 행동 및 감각정보 획득과 자극이 필요하다. 가상현실에서 동작하는 물체가 실제 오브젝트와 연동하여 동작한다면 가상현실에 대한 몰입감은 증가될 것이다. 본 논문은 가상현실에서 스마트 로봇을 이용하여 현실의 전장과 동기화시킨 실제 환경을 조성하고 이를 기반으로 한 로봇 컨트롤 시뮬레이션 게임을 제작하였다. 로봇의 위치확인 및 보정을 위해 광학식별장치(OID: Optical Identification Device)를 이용한 광학 코드를 사용한다. OID기반의 매트 위의 이동에 대한 감지는 템플릿 기반의 광학 코드 인식기법과 칼만 필터를 이용한 위치 측정 보정을 통하여 이루어진다. 게임을 개발을 통해 가상현실상의 사용자 컨트롤을 기반으로 현실의 오프젝트의 동작 제어에 관한 유효성을 확인한다.