Journal of the Korean Society for information Management (정보관리학회지)

Korean Society for Information Management (한국정보관리학회)
권호 표지

A Development of the Test Set for Estimating the Retrieval Performance of an Automatic Indexer

자동색인기 성능시험을 위한 Test Set 개발

  • 김성혁 (숙명여자대학교 문헌정보학과) ;
  • 서은경 (한성대학교 문헌정보학과) ;
  • 이원규 (한국문예진흥원 전산계발부) ;
  • 김명철 (한국문예진흥원 전산계발부) ;
  • 김영환 (한국통신 인공지능연구실) ;
  • 김재군 (한국통신 인공지능연구실)
  • Published : 1994.06.01
Download PDF
⟨ Previous Next ⟩

Abstract

Accordmg to the development of various information retneval system suitable for Korean database, many researchers have realized the need of R Test ColleAon which can be r d y used for evaluatmg a retneval system. Therefore, This study developed the TEST SET whch helps ob&vely evaluatmg the retrieval performance of an Hangul Automatic Indexer or Korean Information Retrieval System. The developed Test Set has four files such as: 1) Korean Document Set( * . all): 2) Natural Language Query Set(KTsetnq1): 3) Boolean Query Set(Ktset.bq1): 4) Query-Relevance Judgment Set ( KTsetrel) .

다양한 정보를 신속, 정확하게 제공할 수 있는 정보검색시스템은 선진국에서 일찍이 개발되어 현재 우리나라에서도 한국어 데이타베이스를 검색할 수 있는 정보검색시스템이 실험적으로 또는 상업적으로 개발되고 있다. 이에 따라 개발된 시스템의 실행 가능성 테스트 (feasibility test)가 계속 부수적으로 수행되어 왔으나 평가 테스트들의 객관성 부족으로 인하여 개발된 정보검색시스템의 성능 또한 논쟁이 되어왔다. 이에 본 연구는 한국어 정보검색시스템과 자동색인기의 객관적인 성능평가를 위하여 실험 데이타 컬렉션을 개발하였다. 실험데이타 컬렉션은 정보과학회논문지, 한국정보과학회 1993 proceedings, 정보관리학회지에 수록된 1,053개의 논문으로 구성되었다. 입력된 모든 데이타는 국문 및 영문 저자, 서명, 서지사항, 초록, 분류번호, 색인어 등 18개의 access point를 지니며, 한국어 문헌 set 구축이외에 test set과 관련된 질의문을 작성하였고 질의문에 해당하는 적합문헌을 제시해 주었다.

Keywords

References

  1. 정보관리학회지 v.9 no.1 문헌정보학 영역의 지능형 정보시스템에 관한 고찰 김성혁
  2. 정보관리학회지 v.10 no.1 퍼지정보검색시스템의 검색효율에 관한 연구 김현희;배금표
  3. 정보관리학회지 v.10 no.1 퍼지 집합모델의 검색 효율 개선을 위한 퍼지 연산자의 분석 이준호;김원용;이윤준;김명호
  4. 정보관리학회지 v.10 no.1 구문 통계적 기법을 이용한 한국어 자동색인에 관한 연구 서은경
  5. 전기통신용어사전 한국전자통신연구소
  6. 영한/일한 컴퓨터 용어 큰사전 정보과학용어사전편찬위원회
  7. 정보관리학회지 v.8 no.2 우리말 정보자료를 처리하는 지능형 정보검색시스템의 설계 정영미
  8. 정보검색론(개정판) 정영미
  9. 정보관리학회지 v.8 no.2 구문 및 의미분석을 통한 한국어 자동색인 최기선
  10. JASIS v.45 no.3 A Cognitive View of the Situational Dynamism of User-Centered Relevance Estimation Bruce,Harry,W.
  11. JASIS v.45 no.3 Relevance Reconsidered-Towards an Agenda for the 21st Century: Introduction to Special Topic Issue on Relevance Research Froehlich,Thomas J.
  12. JASIS v.45 no.3 Relevance and Retrieval Evaluation: Perspectives form Medecine Hersh,William
  13. Information Science Abstract
  14. Computer-Bases Knowledge Retrieval Kemp,D.A.
  15. Introduction to Modern Information Retrieval Salton,G.;McGill,M.J.
  16. JASIS v.26 no.6 RELEVANCE: A Review of and a Framework for the Thinking on the Nortion in Information Science Saracevic,T.
  17. JASIS v.39 no.3 A Study of Information Seeking and RetrievingⅢ: Searchers, Searches, and Overlap Saracevic,T.
  18. JASIS v.45 no.3 The Relevance of Recall and Precision in User Evaluation Su,Louise T.