This research uses the Balanced Scorecard framework to create comprehensive performance indicators for foodservice programs in senior welfare centers. The study evaluates these programs in South Korean senior welfare centers from financial, customer, learning and growth, and internal business process perspectives. Thirty-five evaluation indicators were developed and validated through the Delphi study used for the survey study nationwide, and 115 were collected. Thirty elderly welfare centers participated in on-site evaluation by the expert. The results of the survey study, 81.4, indicate overall favorable performance, with social workers scoring slightly lower than dietitians and directors. On-site evaluations showed better performance, 84.4, compared to the survey study. The learning and growth perspective showed a significantly higher score on on-site evaluation, and the score was 20.9, which was 3.1 points higher than 17.8 from the survey study (p<0.001). However, there is room for improvement, including adopting nutrition management programs, defining roles for dietitians and cooks, enhancing food sanitation regulations, and providing financial support. Additional recommendations involve recruiting nutrition personnel, collaborating with local governments, and integrating centers for children’s foodservice management at the local level. This research provides valuable insights into enhancing the foodservice in elderly welfare centers to improve the nutrition and well-being of the elderly population.

본 연구는 K연구원의 상향식 R&D과제기획 차원의 신규 연구기획과제 선정 평가를 위한 평가도구 개발에 목적을 두고 진행하였다. 이를 위해 CIPP모형과 연구기획평가를 위한 선정평가 및 평가지표에 관한 선행연구를 중심으로 R&D과제기획 선정평가 항목과 문항을 개발 한 후, 2회에 걸친 델파이 조사를 실시하였다. 개발된 평가도구는 13명의 전문가를 대상으로 설문조사를 실시하여 내용타당도, 합의도 및 수렴도를 검증하였다. 최종 선정된 R&D과제기획 선정평가 도구는 8개 항목에 총 21개 문항으로, 상황평가 5 문항, 투입평가 2문항, 과정평가 8문항, 산출평가 6문항으로 구성되었다. 개발된 평가 도구는 상향식 기획 과정상의 문제점을 해소하고 연구자들의 기획역량을 제고하는 데 기여할 것이다. 또한, 선정 평가 시 평가에 대한 일관성과 효율성 제고에 기여할 것이다.

본 연구의 목적은 지방도시재생 리빙랩을 위한 종합적이고 체계적인 평가지표를 마련하는 것이다. 특히 이 연구는 지방소멸의 전형적인 사례인 전주 물왕멀을 중심으로 이루어졌다. 전주의 도시재생 리빙랩인 물왕멀공동체의 이해관계자들을 대상으로 조사를 실시한 결과, 여러 평가 지표 중 특히 민주성에서도 주민의 참여비중과 주민 누구나 참여가능한지의 여부를 매우 중요하게 인식했다. 이는 향후 사업책임자의 선정 시 중요하게 평가되고 고려되어야 할 지표를 시사해 준다. 종합하면, 지방도시재생 리빙랩의 성패는 주요 이해관계자인 주민의 참여에 달려있다. 특히 노령인구의 비율이 높은 지방 축소도시의 특성상, 고령자의 눈높이에 적합한 사업을 선정하고 집행하는 한편 높은 전문성을 가진 사업책임자를 배치하여 진입장벽을 낮추는 데 세심하게 주의를 기울임으로써 주민의 참여욕구를 충족하는 것이 중요하다.

PURPOSES : Recently, increasing number of local governments are introducing on-demand public transportation service in real time to improve the management efficiency of public transportation. In preparation for the autonomous driving era, the “autonomous public transportation mobility on-demand service in real time” is being developed in the public transportation sector to introduce on-demand public transportation. For this service to become the public transportation of the future, it must receive publicity. Therefore, in this study, indicators were selected to evaluate the publicity of the autonomous public transportation mobility on-demand service in real time, and a survey was conducted among the general public to examine the validity of the indicators. METHODS : To secure the publicity of on-demand public transportation in real time, the goal of the service was first set. Second, the keywords of the service were analyzed to define the publicity requirements of this service. Based on the analyzed keywords and definition of publicity, service indicator types were classified, and the indicators were defined by type. A user satisfaction survey was conducted on the final selected indicators to improve the degree of completion of indicator development. The user survey was conducted by presenting selected publicity indicators to respondents responding on a five-point scale to determine whether each indicator could satisfactorily evaluate publicity. RESULTS : When examining various previous research cases and the contents required for autonomous public transportation mobility on-demand service in real time, the required items of publicity indicators were found to be “safety” in terms of “autonomous driving” and “convenience” in terms of “demand response.” Publicity indicators were developed according to these three items. Thirty-one indicators were developed, and a satisfaction survey was conducted on the general public for each indicator. In the survey, most of the indicators scored 3.5 points or higher, indicating that the indicators were generally well defined. Users gave the highest score to “fairness” among the three items, and “reasonable fairness” was found to be a necessary item as a publicity indicator. CONCLUSIONS : In this study, evaluation indicators were selected to secure the publicity of autonomous public transportation mobility on-demand service in real time, and a satisfaction survey was conducted for each indicator. Most of the indicators showed a score of 3.5 or higher, indicating that they were generally well defined. However, this study has a limitation in that it surveys the general population. In future, experts should be included in the survey to increase the degree of completeness of the public indicators.

For national security, approximately 500 facilities have been designated as national security facilities. It is divided into grades A, B, and C depending on the fields such as electrics, energy and public service. In 2016, KINAC developed and suggested the installation standards and evaluation indicators for security equipment for national security facilities and they have been utilized to evaluate and manage the facilities. In order to update them by reflecting the recent security trend of the facilities and new technology, KINAC have investigated and updated the installation standards and evaluation indicators for security equipment. As a part of developing installation standards and evaluation indicators for national security facilities project, we conducted survey to identify the status and capabilities of facilities: how the security system is well designed, which type of security equipment is utilized. According to the results, the passive infrared (PIR) sensor is commonly used for interior intrusion detection (not included in 2016 project). Therefore, we investigated the passive infrared sensor and provided its installation standards and evaluation indicators. PIR sensor detects the energy generated by the objects which is different as their temperatures. PIR sensors do not emit any energy like active infrared sensor, and do not measure the energy. Rather, PIRs measure variation in thermal radiation. PIR sensor detects thermal energy by sensing the change between a heat source and the background temperature. In this paper, the characteristics and features of PIR sensor were discussed. Considering them, the standards and indicators to install/evaluated the PIR sensors were also proposed. The results would support national security facility to design and evaluate their security system.

마을숲은 농촌마을의 대표적 경관이자 녹지 환경으로서의 생태적 기능을 비롯하여 마을의 다양한 문화가 이루어지는 공간 제공의 기능을 가지고 있다. 본 연구에서는 생태계서비스의 개념적 틀을 응용하여 마을숲의 가치를 측정할 수 있는 평가 지표를 도출하고자 하였다. 먼저 생태계서비스 평가와 관련한 국제 기준의 검토를 통하여 평가지표로 공급, 조절, 지지, 문화의 4개 대분류를 설정하고 28개의 세부항목을 설정하였다. 마을숲과 관련된 21개의 문헌에서 나타난 마을숲의 기능, 역할, 효과 등을 평가 항목에 맞추어 분류하고 각 유형별 세부 내용을 고찰하였다. 과거와 현재의 마을숲 기능을 고려하여 전문가 브레인스토밍을 통해 4개 유형 24개의 평가 항목을 선정하였다. 도출된 평가 항목으로 4개 마을숲의 주민을 대상으로 중요도를 평가하여 신뢰성을 분석한 결과 24개 문항의 크론바흐 알파 계수가 0.857로, 신뢰성이 높은 수준이나, 공급의 3개 항목, 지지의 1개 항목을 제외하면 신뢰성이 더 높아진다. 또한 각 항목별로 중요도를 분석하면 공급기능은 중요도가 보통보다 낮은 수준이었으며 이는 현재 마을숲에서의 공급기능은 거의 이루어지지 않기 때문인 것으로 판단된다. 신뢰도와 중요도의 결과를 바탕으로 최근 마을숲에서 중요도가 낮은 공급 기능 3개 항목과 신뢰성이 낮았던 지지 기능 1개 항목 등 4개 항목을 제외한 20개 항목을 마을숲의 생태계서비스 평가지표로 도출하였다.

In December 26, 2017, the Ministry of Science and ICT’s Cyber Infringement Response Division, the KCC’s Internet Ethics Team, and the National Police Agency’s Cyber Investigation Division announced the “Comprehensive IP Camera Measures” to prevent damage to users by strengthening IP camera security. The background was a countermeasure against the spread of public anxiety such as leakage of privacy and threatening national security as cases of illegal filming and distribution of videos by accessing IP cameras without permission at that time occurred. At that time, the measures consisted of three major strategies: institutionalization of products with security (manufacturing and import stage), rapid action and response to hacking threats in advance, and intelligent advancement of IP cameras (industrial development) and fostering various video and safety industries. This paper deals with the development of installation standards and evaluation indicators for CCTV systems installed in the relevant national security facility. When designing a CCTV system, the resolution and sensitivity of the camera, the angle of view of the lens, and the aperture should be selected in consideration of the length and width of the monitoring area. When it is necessary to determine an alarm based on the recorded image information, the resolution of the recording device should also be considered. If there is a restriction on the surveillance area of the camera due to topographic features, visitors, etc., additional cameras should be considered. Additional surveillance cameras should be considered to effectively monitor sections where fences are bent or sections with severe slopes. When designing a CCTV system, supplementary means that can be used for intrusion monitoring should be devised even if the entire or part of the system causes a failure. KISA’s performance test and certification procedures shall apply mutatis mutandis to intelligent CCTV image analysis test procedures and certification. Intelligent CCTV image analysis evaluates the performance of the equipment by comparing files of ground truth (GT) and system alarm (SA) for verification to calculate the evaluation score.

최근 사회적으로 요구하고 있는 기업의 역할이 확대됨에 따라 기업의 비재무적인 경영활동(ESG)은 기업의 존폐를 좌우할 수 있는 주요 경영 평가지표로 등장하게 되었다. 하지만, 국내 주요 기업들이 이러 한 사회적 변화에 대응하고자 ESG 경영을 선언하고 다양한 경영전략을 수립하고 있지만 여전히 정부나 공공기관은 표준화되거나 일관된 ESG 경영 평가지표를 제시하지 못하고 있다. 이에 본 연구는 ESG 경영 활성화을 위한 인적자원관리의 역할에 주목하여 국내외 ESG 경영 평가지표를 비교분석하여 향후 인적자원관리 차원에서의 ESG 관련 연구 주제와 방향성을 제시하고자 한다. 이를 도출하기 위해 우선 인적자원관리 관점에서 ESG 경영에 대한 중요성과 ESG 경영에서의 인적자원관리의 역할, ESG 관련 연구 동향을 살펴보았다. 이후 국내외 대표적인 ESG 평가기관들의 평가지표 비교분석을 통해 함의를 찾고 최근 국내 ESG 평가지표의 변화를 토대로 인적자원관리 차원에서의 연구 주제를 확장하고자 하였다. 본 연구의 결과 첫째, ESG 경영에서 인적자원관리가 중요한 이유는 ESG 경영 평가에 있어서 인적자원관리 지표가 큰 비중을 차지하고 있고 ESG 평가상에서의 대부분의 핵심지표들이 조직문화와 연계되어 있다는 것이다. 둘째, ESG 인적자원관리 부문의 평가지표는 기업이 처한 환경에 따라 차이가 있고 시대적 상황에 맞게 변화한다는 점이다. 셋째, 인적자원관리 관점에서의 ESG 연구는 국내외 간의 평가지표 지향성의 차이를 통해 확산적 가치와 수렴적 가치를 국가간 비교 할 수 있는 연구, 국내에 있는 외국계기업의 ESG 경영전략 수립 기준 연구, 인적자원관리 관점의 ESG 평가지표와 경영성과 간의 관계 연구, 마지막으로 폭 넓은 의미에서 인간존중 경영, 안전보건(사고), 직장 내 갑질, 조직 내 MZ세대와의 갈등, 리더십, 조직문화까지 폭넓은 스펙트럼을 지표화 할 수 있는 연구 등으로 확대해야 한다는 것이다.

목적 : 본 연구는 최저임금적용제외인가 작업능력평가를 위한 역량지표를 개발하여 생산성과 함께 장애인 근로자의 직무수행능력을 평가하는 데 활용하고자 한다. 연구방법 : 선행연구를 통해 장애인근로자의 작업능력평가 관련 지표를 도출한 후, 3명의 전문가의 검증을 거쳐 델파이 조사지 초안을 제작하였다. 그 후 20명의 전문가에게 델파이 연구를 통해 장애인근로자의 최저임금적용제외인가 작업능력평가를 위한 역량지표를 도출하고자 하였다. 결과 : 총 2회의 델파이 연구 결과, 인지기능, 사회기능, 작업기능, 안전보건활동 등 4개의 역량군과 숫자 처리능력, 정보활용능력 등 20개의 역량지표가 도출되었다. 결론 : 도출된 역량군 및 역량지표는 장애인근로자의 직무수행능력을 평가하는데 활용하여 최저임금적용제 외인가 작업능력평가의 타당성을 높일 수 있을 것이다. 향후 연구에서는 각 역량군과 역량지표에 대한 척도를 개발하고, 현장에 적용하여 타당도를 검증해야 할 것이다.

With the advent of the 4.0 era of logistics due to the Fourth Industrial Revolution, infrastructures have been built to receive the same services online and offline. Logistics services affected by logistics 4.0 and IT technology are rapidly changing. Logistics services are developing using technologies such as big data, artificial intelligence, blockchain, Internet of things, and augmented reality. The convergence of logistics services and various IT new technologies is accelerating, and the development of data management solution technology has led to the emergence of electronic cargo waybill to replace paper cargo waybill. The electronic waybill was developed to supplement paper waybill that lack economical and safety. However, the electronic waybill that appeared to complement the paper waybill are also in need of complementation in terms of efficiency and reliability. New research is needed to ensure that electronic cargo waybill gain the trust of users and are actively utilized. To solve this problem, electronic cargo waybill that combine blockchain technology are being developed. This study aims to improve the reliability, operational efficiency and safety of blockchain electronic cargo waybill. The purpose of this study is to analyze the blockchain-based electronic cargo waybill system and to derive evaluation indicators for system supplementation.

This paper compares the preceding study on the development of evaluation indicator for ATOs for mechanics and vocational ability evaluation system implemented by the Ministry of Employment and Labor to support various vocational training. This paper also examines the systems for the protection and possible options of the consumer through disclosed notification and evaluation cases such as the traffic service evaluation system in the aviation sector. By extension, in order to ensure quality management and enhanced capability of flight schools, this paper aims to present a methodology for introducing an evaluation model certified by ATOs for pilots that emerges from comparing the preceding study on various vocational training applied with the CIPP evaluation model of Stufflebeam and the procedures for the designation of ATOs for pilots and follow-up management thereon in Korea, dividing it into four stages, which are the preparation stage, screening stage, designation stage and management stage, and applying the items and performance indicators to be carried out at each stage.

Companies struggle to make their best products with high quality and service at a competitive price in global markets. However, customer needs and requirements keep changing with a variety of situations. Companies that face the changes can not stay the same and make an effort to adapt themselves to new circumstances. They would probably review the overall management system that is currently implementing to improve management efficiency. Among other things, quality might be considered to be a crucial element if they are manufacturing industries to be sustained in global markets. KSA (Korean Standards Association) is a government- affiliated organization under the Ministry of Trade, Infrastructure, and Energy. It is a Korean standards provider for quality and service industry. KSA confers national commendations for organizations, quality circles, artisans, QCEC (Quality Competitive Excellent Company), and the most honorable KNQA (Korean National Quality Award) every year. KSA established KNQA on the basis of Malcom Baldrige National Quality Award, Deming Prize, and European Quality Award. Research on quality awards shows that there are many similarities in the framework. Although KSA summarizes two factors for 13 evaluation indicators in the quality competitive excellent model of QCEC, the categorization is ambiguous to explain them according to earlier studies. We performed a deep analysis of foreign quality awards and background for KNQA and QCEC. We conducted a content analysis of KNQA and QCEC and matched evaluation items that were closely related. We proposed a quality competitiveness model with three factors, Technology, System, and Tools, summarizing 13 evaluation indicators in QCEC. Based on audit data for six years from 2012 to 2017 we carried out a confirmatory factor analysis for the proposed model by examining the model validity and fitness.

The flow of the 4th Industrial Revolution calls for the innovation of the traditional business models of the manufacturers. Servitization is a corporate strategy to respond to changes in the business environment. These days, the value that the market demands can be created on the basis of the product-service integration. Thus the manufacturers must pursue the fundamental innovation of the current strategy and business models. It is necessary to create common values with customers through providing product-service integrated offerings beyond the development, production, and delivery. The purpose of this study is to develop the evaluation indicators for selecting suppliers when the manufacturer who offers the value of product-service integration needs to obtain the resources from outside. The case company in this study is the manufacture firm conducting the retail IoT business as a new business. The Delphi method is used to develop the evaluation indicators for selecting suppliers. This study suggests the academic implications providing the perspective of Servitizaiton by using Delphi method, and the practical implications applying the creating value method of Servitization by collecting the opinions from both value providers and value consumers in the process of developing the evaluation indicators.

아시아 최초의 민영교도소인 소망교도소가 경기도 여주에 개원한 지가 6년 째 이며 계약기간의 중반에 접어들었다. 2013년 민영교도소의 능률성 평가지표에 대한 탐색, 2014년 민영교도소의 공공성 탐색에 이어서 이제는 민영교도소의 평가지표에 대한 시안(試案)을 만들고자 한다. 연구목적을 구현하기 위해 민영교도소와 그 존재가치(평가기준)와 평가모형을 이론적 배경으로 설정하고, 공공성의 본질에 대한 제반논의를 바탕으로 민영교도소의 공공성(평가목적)을 구성하는 하위가치(평가목표 혹은 평가영역)를 도출하고자 했다. 그리고 선행연구를 검토하여 공공성의 하위목표를 달성하기 위한 정책과 프로그램을 도출하여 이것을 평가항목 또는 세부적 평가항목(평가대상 혹은 평가수단)으로 설정했다. 끝으로 도출된 평가목표(종속변수)와 평가수단(독립변수)을 바탕으로 민영교도소의 평가지표를 만들려고 했다. 연구결과, 민영교도소의 공공성이 지향하는 보편적 가치(하위가치 혹은 구성가치, 연계가치)는 인권, 합법성에 의한 감독통제와 책임성 확립, 부정부패방지와 영리추구 편향성 제약에 의한 공익과 시민권의 확립, 민주성과 투명성 확립을 포괄한 사회적 거버넌스이다. 둘째, 공공성과 연계된 하위가치(평가목표)를 구현하기 위한 평가영역과 평가항목, 세부평가항목을 설정했다. 평가영역은 인권보호, 계약체결과정, 서비스 공급･지도감독, 평가와 재계약, 공익, 재범률과 시민권, 지배구조, 참여, 지역협력 등 9개이다. 그리고 9개 평가영역에 따른 58개 평가항목을 설정했다. 또한 개개의 평가항목을 측정하기 위해 관련되는 평가요소인 118개 세부평가항목을 설정하였고 4단계 평가척도를 선택했다. 이러한 연구결과를 바탕으로 민영교도소의 공공성 평가지표를 <표 5>와 같이 작성하였다. 후속되어야 할 연구는 개인연구의 한계를 보완 및 해결하는 것이다. 평가목표, 평가영역, 평가항목, 세부평가항목에 대한 가감이 이루어져야 한다. 다른 하나는 구체적이고 실제적인 평가를 위해서 평가목표, 평가영역, 평가항목 등 평가기준과 평가수단(평가항목)에 따른 배점, 개별평가항목에 따른 관련요소들에 대한 가중치와 평가등급 등 결정해야 할 것으로 본다. 이것은 법무부, 민영교정법인, 협회나 전문연구기관, 사회단체 등 합의에 의해 결정되어야 할 과제라고 본다.

1. 본 논문의 목적은 미얀마의 REDD+ Readiness Roadma을 평가하여 미얀마의 REDD+ 국가 이행능력의 일면을 이해하는 것이다. 이를 위해 2012년 개발된 REDD+ 국가 전략을평가하기 위한 기준 및 지표의 적설성을 평가하고 기준 및 지표 간 가중치를 도출하였다. 2. 한국과 미얀마 전문가를 대상으로 한 설문조사를 통해 적절성을 평가한 결과 기 개발된 평가 기준 및 지표가 대체로적절하다고 판단하였다. 설문 조사의 의견을 반영하여 다소 추상적인 표현을 수정·보완하여 4개 기준과 18개의 지표를 완성하였다. 3. 양국의 전문가들은 ‘산림전용과 산림황폐화의 근본원인과직접원인을 확인’하는 지표들과 ‘이해당사자의 참여를 보장’하는 지표를 공통적으로 높게 평가하였다. 반면 미얀마 전문가들은 ‘산림전용 및 탄소축적 변화 비율 추정 수준’과 ‘모니터링 및 보고 기구 수립’과 관련한 지표들을 높게 평가하였으나한국의 전문가는 낮게 평가하였다. 또한 한국의 전문가가 게 평가한 ‘원주민 및 지역사회의 지식 및 권리 존중’과‘Land tenure 문제 해결’ 지표에 대해 미얀마 전문가는 상대적으로 낮게 평가하였다. 4. 산출된 중요도를 토대로 역서열가중치 방법을 선택하여지표 간 가중치를 산출하였다. 평가 점수는 100점 만점에61.1점으로, 아직 미얀마의 REDD+를 위한 국가 전략 및 계획 수립 역량이 낮은 것으로 나타났다. 반면 가중치를 반영한평가 점수는 75.6점으로 높아졌는데, 이는 미얀마 정부가 우선순위에 맞추어 계획을 수립했다는 의미로 해석할 수 있다. 5. 한국과 미얀마 간 REDD+ 협력 분야에 대한 정책적 제언을 하면, 한국이 미얀마에서 REDD+ 사업을 이행하려고 할때에는 중요도는 높으나 낮은 성취도를 보인 지표, 즉 이해당사자의 참여 보장, 산림전용과 산림황폐화 원인 방지를 위한적절한 조치 선정, Land tenure 문제 해결을 다루는 분야에우선 지원을 할 필요가 있다.

아시아 최초의 민영교도소인 아가페소망교도소가 경기도 여주에 개원된 지가 2년 6개월이 되었다. 민영교도소가 이슈화 된 초기 시점부터, 300여 명의 재소자를 수용하고 다양한 교화 프로그램과 교정행위가 진행되는 현재에도 소망교도소를 둘러싼 잡음들(noices)은 가라앉지 않고 있다. 논란의 소용돌이에 여전히 답보되어 휘청거리지 않고 묵묵히 황소걸음을 옮기고 있는 것은 결정과정에서 과도한 정치사회적 비용을 부담하면서 겪은 내성력 때문이기도 하지만 성공적 정착에 대한 공감대 또한 점차 커지고 있다는 반증이기도 하다. 이제 민영교도소라는 민영화 및 민간위탁 프로그램의 성공적 집행을 위해 과정평가와 성과평가에 관심이 집중되어야 할 때이다. 하지만 종교형 민영교도소라는 민영화 및 민간위탁사업의 집행과정과 집행결과 및 성과를 평가하는 분석기준과 평가지표를 내포한 종합적이고 체계화된 평가모형에 대한 연구는 거의 전문한 실정이다. 이러한 현실에서 주체와 이용고객에 대한 특성은 다소 차이가 있지만 공공서비스와 사회복지시설(특히 생활시설 혹은 보호시설)에서 교정복지서비스 능률성 평가에 근접한 이론과 연구를 분석대상으로 삼았다. 검토된 내용을 근거하여 분석기준과 분석항목의 설정하고 이에 따른 평가(분석)지표를 구성하였고 능률성 평가모형을 탐색적으로 구성해보았다. 요컨대 민영화 및 민간위탁의 능률성 분석기준은 대체로 인력관리, 재정관리, 면적과 공간, 프로그램, 그리고 지역사회와의 관계에서 자원봉사자들의 활동이다. 다섯 가지 분석기준에 따른 세분적인 내용을 기초로 하여 분석지표를 구성하였고 가능한 정량적 지표구성을 위해서 3단계 척도나 증감수치를 적용했다.

이 연구는 대학에서의 교수역량강화를 위한 전략으로 부각되고 있는 “수업컨설팅”의 효과를 측정하기 위한 객관적 평가지표를 개발하기 위한 연구이다. 이를 위하여 기존 문헌 연구를 통해 교수역량에 관련한 국내 연구들을 바탕으로 교수역량 요인들을 추출해 델파이 설문지를 만들어 전국대학 교수학습개발센터에서 수업컨설팅을 업무를 맡고 있는 실무자 20명의 응답으로 2회에 걸친 델파이 조사를 실시하였다. 1, 2차 델파이 조사를 통해 선정된 25개 문항을 놓고 3차 조사는 전문가들의 심층토의를 거쳐 최종 교수역량 평가지표 24개 문항을 선정하였고 각 문항이 속할 대영역의 명칭과 문항 분류를 결정하였다. 수업설계와 준비에 해당하는 부분은 대부분이 문항에서 제외되었고, 실제 수업활동에 속하는 문항이 다수가 포함되었다. 이를 통해 개발된 평가지표가 실천적 교육역량에 속하는 것임을 고려한다면, 수업컨설팅 현장에서 효과적으로 활용될 수 있을 것으로 보인다.

이 연구의 목적은 토마토 재배시설을 종합적으로 평가할 수 있는 지표를 개발하는데 있다. 이를 달성하기 위해 관련 문헌 및 선행 연구들을 분석하여 예비 평가항목을 추출하고, 전문가 집단을 대상으로 델파이 설문조사를 실시하여 평가 항목, 등급 및 기준으로 구성된 평가지표를 개발하였다. 토마토 재배 및 시설 관련 교수, 연구원, 농업인(현장 사용자) 등으로 구분하여 100명의 전문가 패널을 선정하였으며, 1차부터 3차까지 폐쇄형 질문 방식의 설문조사를 진행하였다. 그 결과 최종적으로 확정된 평가 항목은 4개 대분류 영역과 39개 세부 평가항목으로 이루어졌다. 대분류 영역은 시설 구조적 요소, 시설 설비적 요소, 재배적 요소, 생산 기반적 요소이며, 요소별로 각각 9개, 15개, 7개, 8개씩 세부 평가항목으로 구성되었다. 또한 전문가 의견을 수렴하여 39개 평가항목별로 가중치를 산정하고, 등급 및 기준을 설정하였다. 이 연구에서 개발된 평가지표는 새로운 시설 모델 개발, 사용 중인 시설에서 우선적으로 보완해야 될 사항을 판단하거나 정부 지원사업의 효율성을 높이는데 중요한 역할을 할 것이다.