ACCUEIL

Consignes aux
auteurs et coordonnateurs
Nos règles d'éthique
Autres revues >>

Document Numérique

1279-5127
 

 ARTICLE VOL 17/2 - 2014  - pp.125-147  - doi:10.3166/dn.17.2.125-147
TITRE
Choisir la meilleure configuration d’un système de recherche d’information. Adaptation à la difficulté du besoin

TITLE
Selecting the best configuration of an retrieval system. Fitting the parameters to the difficulty of the query

RÉSUMÉ

Les campagnes telles que Text REtrieval Conference (TREC) offrent un cadre qui permet d’évaluer des systèmes de recherche d’information (RI). L’évaluation utilise des mesures qui se basent sur une moyenne des résultats obtenus pour un ensemble de besoins en information : les succès et échecs sur chacun des besoins sont masqués. Dans un premier temps, cet article propose une analyse qui prend en compte la diversité des résultats et qui a pour but de sélectionner le système de RI le plus apte à traiter les besoins selon leur difficulté. L’évaluation montre un gain maximal en robustesse de 68% et de 10% sur les performances. Dans un second temps, nous montrons qu’il est possible d’apprendre la meilleure configuration de système en s’appuyant sur un sous-ensemble de documents dont la pertinence est connue.



ABSTRACT

Evaluation campaigns such as Text REtrieval Conference (TREC) offer a framework to evaluate information retrieval (IR) systems. Generally, these evaluation results are averaged over information needs so successes and failures on specific needs are hidden. At first, this article proposes an analysis which takes into account the diversity of results and select the IR system best suited to address the information needs according to their difficulty. An experiment is driven in order to select the best systems according to the information need difficulty. Evaluation results show a maximum gain of 68% in reliability and of 10% on performances. In a second step, we show that it is possible to learn the best system configuration based on a subset of documents which relevance is known.



AUTEUR(S)
Anthony BIGOT, Sébastien DÉJEAN, Josiane MOTHE

MOTS-CLÉS
évaluation en RI, rang des systèmes, difficulté des besoins, classifications.

KEYWORDS
IR evaluation, system ranks, information need difficulty, clustering.

LANGUE DE L'ARTICLE
Français

 PRIX
• Abonné (hors accès direct) : 7.5 €
• Non abonné : 15.0 €
|
|
--> Tous les articles sont dans un format PDF protégé par tatouage 
   
ACCÉDER A L'ARTICLE COMPLET  (271 Ko)



Mot de passe oublié ?

ABONNEZ-VOUS !

CONTACTS
Comité de
rédaction
Conditions
générales de vente

 English version >> 
made by WAW Lavoisier