URN_NBN_SI_DOC-Q4BFFAN1

EV A LV A C IJA SISTEMOV ZA ISKANJE INFORM ACIJ Nekatera metodološka izhodišča na primeru evalvacije algoritma za avtomatsko krnjenje slovenskih besed dr. Mirko Popovič, Narodna in univerzitetna knjižnica, Ljubljana UDK 519.683.5 UDK 025.4.036 Povzetek Referat obravnava problem atiko evalvacije sistemov za iskanje inform acij v slo­ venskem jezikovnem okolju. Na konkretnem prim eru evalvacije algoritm a za avtomatsko krnjenje slovenskih besed so opisana nekatera osnovna metodološka izhodišča evalvacije teh sistemov. Še posebej so orisane tehnike in metode ekspe­ rimentalnega dela, ki nastaja v t.i. laboratorijskem okolju. Najpomembnejši je prikaz testne zbirke, ki vsebuje naslednje segmente: zbirka dokum entov in poiz­ vedb ter ocene o relevantnosti posameznih dokumentov. V zaključku so opisane tudi nekatere metode analize rezultatov kot npr. analiza uspešnosti (odziv in preciznost) ter analiza neuspeha. V sklepnih razm išljanjih je poudarjeno, da je taboratorijski eksperiment le p rv i korak k celovitejši evalvaciji sistemov za iskanje •nformacij, ki mora potekati v operativnem okolju ob celovitem upoštevanju uporabnika in njegovih inform acijskih zahtev. UDC 519.683.5 UDC 025.4.036 Summary this paper, evaluation o f inform ation retrieval systems in Slovene language-ba­ sed environm ent is presented. Evaluation o f the Slovene stemming algorithm for POPOVIČ, dr. M irko: Evaluation of Inform ation Retrieval Systems : M ethodolo­ gical Fram ework Based on the Evaluation o f Slovene Stemming A lgorithm . Knjižnica, Ljubljana, 35(1991)2/3,101-122