해양사고의 감소를 위하여 국제해사기구(IMO) 체약국 정부에서 IMO 협약 및 규정에 대한 이행은 필수적이다. IMO 협약이행코 드(III Code)에서는 각 주관청에게 협약이행을 주기적으로 점검 및 평가하여 개선하는 체계를 갖추도록 요구하고 있으며 성과지표를 평가방 법에 포함하도록 요구하고 있음에 따라 회원국은 자국의 협약이행 평가를 위한 성과지표를 개발할 필요가 있다. 이에, 본 논문의 목적은 주관청의 협약이행 수준을 계량화하여 평가할 수 있도록 대표적인 평가측정 기법인 균형성과표(BSC) 및 핵심성과지표(KPI)를 활용한 평가 모델을 개발하여 제시하는 것이다. 논문의 결과로서, III Code 요건에 BSC 개념을 적용한 III-BSC 관점에서 수립된 비전의 달성을 위해 반드 시 확보해야 하는 핵심성공요인(CSF)을 도출하고, 도출된 CSF를 측정할 수 있도록 평가영역별 후보 KPI를 개발하여 4계층의 초기 연구모형 을 설계하였으며, SMART 기법을 활용한 조사설계를 통해 KPI의 타당성을 검증하여 연구모형을 완성하였다. 또한, 개발한 연구모형을 기반 으로 AHP 분석을 통해 각 계층별 요소의 가중치를 도출하여 BSC 기반 IMO 협약이행에 대한 평가모델을 개발하여 제시하였다. 개발된 평 가모델이 정량적으로 IMO 협약이행 수준을 파악하는 도구로 활용될 수 있으며, 이를 통해 IMO 회원국들의 협약이행 수준 개선에 기여할 수 있을 것으로 기대한다.

In order to reduce marine accidents, each contracting Government needs to implement the instruments enacted and amended by the International Maritime Organization (IMO). The III Code requires each administration of the government to have a system for improvement through periodic review and evaluation and to include performance indicators in its evaluation methods. Thus, each IMO Member State needs to develop its own performance indicators. The purpose of this paper is to develop and present an evaluation model using the Balanced Scorecard (BSC) and Key Performance Indicators (KPI) in order to quantify and evaluate the level of implementation of the instruments by the administrations. From the perspective of 'III-BSC', which applies the BSC concept to the III code requirements, the Critical Success Factors (CSF) that must be secured to achieve the established vision were drawn up, and candidate KPIs for each evaluation area were developed to measure the derived key success factors and an initial study model was designed composed of four levels. The validity of the KPIs was verified and the study model was finalized using the survey design using the SMART technique. Furthermore, based on the developed study model, an evaluation model for the implementation of the BSC-based IMO instruments was developed by deriving the weights of elements for each level through AHP analysis. The developed evaluation model is expected to contribute toward improving the administrations’ level of implementation of the IMO instruments as a tool for quantitatively grasping the level of performance of the implementation.

요 약
Abstract
1. 서 론
2. 연구모형 및 조사설계
3. 평가모델 개발
    3.1 일관성 분석
    3.2 가중치 도출
    3.3 평가모델 개발 및 활용
4. 결 론
References

• 최충정(한국해양교통안전공단 선임연구원) | Choong-Jung Choi (Researcher, Korea Maritime Transportation Safety Authority, Sejong-si, 30100, Korea)
• 정중식(목포해양대학교 교수) | Jung-Sik Jung (Professor, Mokpo National Maritime University, Cheonnam, 58628, Korea)
• 안광(목포해양대학교 교수) | Kwang An (Professor, Mokpo National Maritime University, Cheonnam, 58628, Korea 요) Corresponding Author