본 연구는 정보 검색 과제별 주요 적합성 판단 기준을 실제 정보 검색 시스템으로 구현해 보고 사용자 평가를 통해 그 효과를 검증해 보고자 하였다. 이를 위해, 사용자 적합성 판단 기준들을 정보 검색 시스템에서 적합성을 결정하는 검색 랭킹 모델의 랭킹 요소들로 적용하였다. 그리고 정보 검색 과제별 차이가 있는 동적 검색 랭킹 모델과 차이가 없는 정적 검색 랭킹 모델을 시스템으로 구현하였고, 이에 대한 사용자 평가를 진행하여 비교해 보았다. 총 45명의 참가자가 실험에 참여하였고, 정보 검색 과제별 차이가 있는 동적 검색 랭킹 모델과 차이가 없는 정적 검색 랭킹 모델이 적용된 각각의 검색 시스템에서 3개의 검색 과제를 수행하였다. 3개의 정보 검색 과제로는 사실 검색 과제, 문제 해결 검색 과제, 의사 결정 검색 과제가 사용되었다. 각 참가자는 검색 결과 첫 페이지 상위 5 개의 검색 결과에 대해 적합성 정도를 7 점 척도로 평가하였다. 그 결과, 사용자는 전반적으로 모든 검색어에 동일하게 반응하는 정적 검색 랭킹 모델을 적용한 시스템보다 정보 검색 과제별로 사용자 적합성 판단기준의 변화에 따라 랭킹 요소 가중치를 달리한 동적 검색 랭킹 모델을 더 높이 평가하는 것을 확인할 수 있었다. 본 연구는 이를 통해, 정보 검색 과제를 고려한 정보 검색 시스템 디자인의 필요성과 함께, 사용자 중심 적합성 판단 모형 연구 결과를 실제 정보 검색 시스템으로 구현하여 평가함으로써 사용자 중심 적합성 연구 결과의 타당성을 검증하였다는 점, 그리고 사용자 연구 접목을 통한 시스템 개선의 중요성을 강조하였다는 점에서 의의를 가진다.

본 연구는 정보검색의 핵심 개념인 적합성을 사용자 중심 관점에서 접근한 연구이다. 적합성에 관한 기존 연구들은 적합성 판단에 영향을 주는 다양한 기준들을 정의해 왔다. 본 연구는 적합성 유형별로 사용자가 적합성을 판단하는 기준과 적합성 유형 간의 관계를 정보 검색 과제별로 연구함으로써 사용자 중심 적합성 판단 모형을 알아보았다. 본 연구는 7개의 사용자 적합성 판단 기준-주제성, 신선성, 신뢰성, 이해가능성, 특수 성, 구체성, 흥미성-과 3가지의 사용자 적합성 유형-인지 적합성, 상황 적합성, 정서 적합성-을 고려하였다. 이를 대학생 사용자들을 대상으로 검색 과제 수행 후 설문에 답하는 반 제어(semi-controlled) 설문 방법을 이용하여 자료를 수집하였고, 구조방정식 모형으로 분석하였다. 연구 결과 주제성, 신뢰성은 모든 검색 과제에 중요한 적합성 판단 기준이었고, 과제 유형별로 볼 때 사실 검색 과제에서는 주제성, 신뢰성, 신선성, 구체성, 흥미성이, 문제 해결 검색 과제에서는 주제성, 신뢰성, 이해가능성, 특수성이, 의사 결정 검색 과제에서는 주제성, 신뢰성, 신선성, 이해가능성, 구체성, 특수성, 흥미성이 적합성을 판단하는 주요 기준들이라는 것을 확인할 수 있었다. 또한 적합성 유형들 간의 관계도 실증적으로 밝힐 수 있었다. 본 연구는 적합성 판단 기준과 적합성 유형 간의 관계를 정보 검색 과제별로 확인함으로써 보다 구체적인 사용자 중심의 적합성 판단 모형을 확립하였다는 점에서 의의를 가진다.