Evaluation of IR Systems Efficiency. Results of Experiment Polish Task within Conference and Labs of the Evaluation Forum (CLEF) 2012 Cover Image

Ewaluacja skuteczności systemów wyszukiwania informacji. Wyniki eksperymentu Polish Task realizowanego w ramach Conference and Labs of the Evaluation Forum (CLEF) 2012
Evaluation of IR Systems Efficiency. Results of Experiment Polish Task within Conference and Labs of the Evaluation Forum (CLEF) 2012

Author(s): Piotr Malak, Adam Pawłowski
Subject(s): Library and Information Science
Published by: Wydawnictwo Naukowe Uniwersytetu Mikołaja Kopernika
Keywords: CLEF; ewaluacja systemów informacyjno wyszukiwawczych; laboratorium ewaluacyjne CLEF; wyszukiwanie informacji w języku polskim

Summary/Abstract: W niniejszym artykule prezentujemy realizację laboratorium ewaluacyjnego CLEF (Conference and Labs of the Evaluation Forum) ze specjalnym uwzględnieniem kampanii CHiC (Cultural Heritage in CLEF). Opisujemy realizację oraz wyniki zadania Polish Task in ChiC. W artykule zaprezentowano wnioski z realzacji zadania. Zostały omówione wyniki uzyskane przez uczestników zadania przy użyciu różnych strategii indeksowania oraz wyszukiwania zasobów. Porównaliśmy efektywność metod tf-idf, OKAPI, DFR oraz data fusion.The article presents the design of CLEF (Conference and Labs of the Evaluation Forum) evaluation labs with special attention paid to CHiC (Cultural Heritage in CLEF). We describe design of Polish Task in CHiClab and discuss conclusions from lab realisation. We discuss results achieved by different participants using different indexing and matching approaches. Efficiency of tf-idf, OKAPI, DFR and data fusion was compared and analysed.

  • Issue Year: 16/2016
  • Issue No: 1
  • Page Range: 193-210
  • Page Count: 18
  • Language: Polish