본 연구는 K연구원의 상향식 R&D과제기획 차원의 신규 연구기획과제 선정 평가를 위한 평가도구 개발에 목적을 두고 진행하였다. 이를 위해 CIPP모형과 연구기획평가를 위한 선정평가 및 평가지표에 관한 선행연구를 중심으로 R&D과제기획 선정평가 항목과 문항을 개발 한 후, 2회에 걸친 델파이 조사를 실시하였다. 개발된 평가도구는 13명의 전문가를 대상으로 설문조사를 실시하여 내용타당도, 합의도 및 수렴도를 검증하였다. 최종 선정된 R&D과제기획 선정평가 도구는 8개 항목에 총 21개 문항으로, 상황평가 5 문항, 투입평가 2문항, 과정평가 8문항, 산출평가 6문항으로 구성되었다. 개발된 평가 도구는 상향식 기획 과정상의 문제점을 해소하고 연구자들의 기획역량을 제고하는 데 기여할 것이다. 또한, 선정 평가 시 평가에 대한 일관성과 효율성 제고에 기여할 것이다.

최근 국가연구개발의 집행예산은 증가 추세에 있고, 이에 따라 국가연구개발 사업의 양적 성과 또한 증가하고 있으나, 질적 성과의 증가세는 양적 성과 대비 취약한 것으로 나타나고 있다. 특허등급 및 기술이전효율성이 낮은 기술 등 질적 성과 부진의 원인으로 ‘건 수’ 위주의 성과평가에 대한 개선 필요성이 제기되고 있으며, 이에 대한 대응으로 다양한 ‘질적 성과지표’를 이용한 성과평가가 도입되고 있다. 본 연구에서는 여러 질적 성과지표 중 주요국 (미국, 유럽, 일본) 특허청에 모두 출원하여 특허의 해외경쟁력을 측정할 수 있는 ‘삼극특허’ 창출 과제를 대상으로 연구개발사업의 질적성과 평가를 위한 성과지표로서 삼극특허에 영향을 미치는 요인을 분석하였다. 분석결과, R&D규모 요인 및 과제특성 요인 중 일부는 삼극특허 창출에 통계적으로 유의한 영향을 미치는 것으로 나타났다. 본 연구는 성과분석 측면에서 선행 연구가 상대적으로 미진한 삼극특허를 관심대상으로 확장하고, 삼극특허 창출의 영향요인을 선형회귀분석(OLS)을 통해 살펴본 초기연구라는 점에서 의의가 있다.

In this paper, quantitative and systematic procedures for establishing Key Performance Indicators (KPI’s) of R&D departments are presented. The proposed methodology is composed of 4 steps : 1) identification of critical success factors, 2) identification of potential KPI’s, 3) determination of KPI’s and 4) monitoring and execution. A Strategy Map has been presented to better align KPI’s with a company’s competitive strategies. Also, Analytical Hierarchy Planning (AHP) is used to determine weights of KPI’s and Data Envelopment Analysis (DEA) is used to analyze the effectiveness of R&D departments. To demonstrate its validity of the proposed method, it has been applied to the R&D divisions of a semiconductor company.

The primary goal of this study is to develop proper performance indicators for evaluating the results of industrial R&D program. We define R&D results include output, transfer, outcome, and impact in the performance of R&D program. Performance indicators