Evaluación de sistemas de recuperación de información web sobre dominios restringidos

Resumen

Tradicionalmente, en tareas de recuperación de información, se han utilizado los métodos de evaluación definidos en foros internacionales como el TREC o el CLEF. Dichos métodos se basan, principalmente, en la cobertura y precisión a partir de los juicios de relevancia de las primeras n respuestas de cada sistema para un conjunto de consultas iniciales. En la práctica, cuando un buscador se aplica a la Web, los usuarios no quieren una alta
cobertura sino una alta precisión para obtener páginas muy relevantes en las primeras posiciones. Es por ello que hemos adaptado los métodos de evaluación de estos foros valorando
más la precisión que la cobertura. Finalmente, se ha puesto en práctica este nuevo método de evaluación comparando dos buscadores web sobre un dominio restringido: oportunidades
de negocio y exportación de productos.