본 연구의 목적은 특정 게임성 향상을 목표로 제작된 모바일 퍼즐게임을 기존 상용 게임들과 비교해 해당 게임성이 어느 정도의 경쟁력을 가지고 있는지에 대한 평가를 시도하는 것이다. 상용화에 앞서 모바일게임이 목표로 하고 있는 게임성에 대한 평가가 이루어진다면 이후에 진 행되는 마케팅, 서비스와 같은 사업절차들이 보다 효율적으로 시행될 수 있을 것이다.
평가 대상 게임은 match 3 방식의 모바일 퍼즐게임이며 캔디크러쉬사가와 포코팡을 비교대 상 게임으로 설정하여 비교분석하였다. 평가를 위해 선정한 게임성 평가지표는 몰입감, 도전감, 지속적사용의도이며 각 평가지표에 대한 중요도를 AHP를 통해 산출하였다. 이후 세 가지 게임 을 쌍대비교방식으로 평가하고 평가지표의 중요도를 적용하는 방식으로 종합적 게임성에 대한 비교평가를 시도하였다.
본 논문은 게임성 평가 모델 설계를 기반으로 온라인 게임성 평가 시스템 설계 및 구현을 중점적으로 연구하였다. 온라인 게임성 평가 시스템이란 평가 요소를 정의한 모델 설계를 통하여 온라인상에서 게임을 실시간으로 평가하는 시스템을 의미한다. 게임성 평가 시스템은 사용성 평가(Heuristic Evaluation) 기법을 활용하여 기술적 요소, 관리적 요소, 사회적 요소, 경쟁력 요소의 4부분으로 평가를 실시하였다. 게임성 평가의 객관성과 타당성 검증을 위하여 초급자, 중급자, 전문가 세 분류를 통하여 평가를 실시하여 신뢰도를 높였으며, 게임성 평가 포럼을 개최하여 다양한 계층의 의견을 수렴하였다.