Ferramental para Ensino e Aprendizado de Análise de Eficácia de Sistemas de Recuperação da Informação

Wanderson Bezerra Silva

Resumo


Dadas as necessidades dos usuários e a grande quantidade de informação disponível,
muitos métodos têm sido propostos com o objetivo de gerar resultados cada vez
melhores em diversas atividades, tais como recuperação, classificação e recomendação
de informação. Neste contexto, um fator de grande importância são as métricas de
avaliação dos métodos e o modo como são comparadas suas eficácias. (Ferri et. al.
2009; Yilmaz & Robertson, 2010). Assim, a correta avaliação dos resultados e a
comparação da qualidade de diferentes sistemas têm sido áreas que atraem a atenção da
comunidade científica. Em recuperação da informação (RI), este processo normalmente
baseia-se em: (i) construção de bases de dados; (ii) definição de tarefas a serem
realizadas sobre esta base; (ii) execução de tarefas seguindo diferentes métodos; (iii)
avaliação dos resultados usando as métricas escolhidas; e por fim, (iv) o comparativo
dos métodos.
Muitas vezes um valor numérico obtido através de uma análise utilizando uma métrica
de avaliação não é o suficiente para um usuário entender o comportamento dos
resultado de um sistema de RI. Por isso, é importante utilizar métodos de análise de
falhas, permitindo ao usuário ter um melhor entendimento dos resultados obtidos pelo
sistema de RI avaliado. Estes modelos dão ao usuário a possibilidade de analisar a
distribuição e comportamento dos itens ao longo da lista de resultados.
Para uma boa avaliação dos resultados, é necessário conhecer as medidas de avaliação,
o objetivo de cada uma e as diferenças entre elas. Este trabalho foi realizado com o
intuito de dar suporte aos usuários, para que os mesmos adquiram os conhecimentos
necessários para fazer a análise, compreensão e comparação dos resultados de um
sistema de RI. O trabalho desenvolvido deu continuidade a projetos anteriores que tem
como base a AnalyzIR, uma ferramenta que vem sendo desenvolvida na UEFS e tem
como objetivo automatizar os processos de análise dos resultados de um sistema de RI.


Texto completo:

PDF


DOI: http://dx.doi.org/10.13102/semic.v0i21.2279

Apontamentos

  • Não há apontamentos.