Rendimiento de los sistemas de recuperación de información en la web: evaluación de servicios de búsqueda (search engines)

Olvera-Lobo, María-Dolores Rendimiento de los sistemas de recuperación de información en la web: evaluación de servicios de búsqueda (search engines). Revista Española de Documentación Científica, 2000, vol. 23, n. 3, pp. 302-316. [Journal article (Paginated)]

[img]
Preview
 PDF
2000-REDOC-2.pdf
Download (11MB) | Preview

English abstract

Ten search engines, Altavista, Excite, Hotbot, Infoseek, Lycos, Magellan, OpenText, WebCrawler. WWWWorm, Yahoo, were evaluated, by means of a questionnaire with 20 items (adding up to a total of 200 questions). The 20 first results for each question were analysed in terms of relevance and values of precision and recall were computed for the resulting 4000 references. The results are also analyzed in terms of the type of question (Boolean or natural language) and topic (specialized vs. general interest). The results showed that Excite, Infoseek and AltaVista performed generally better. The conclusion of this methodological trial was that the method used al10ws the evaluation of the performance of Information Retrieval Systems in the Web. As for the results, web search engines are not very precise but extremely exhaustive.

Spanish abstract

Se han evaluado diez servicios de búsqueda: Altavista, Excite, Hotbot, Infoseek, Lycos, Magellan, OpenText, WebCrawler, WWWWorm, Yahoo. Se formularon 20 preguntas a cada uno de los 10 sistemas evaluados por 10 que se realizaron 200 consultas. Además, se examinó la relevancia de los primeros 20 resultados de cada consulta lo que significa que, en total, se revisaron aproximadamente 4.000 referencias, para cada una de las cuales se calcularon los valores de precisión y exhaustividad. Los análisis muestran que Excite, Infoseek y Altavista son los tres servicios que, de forma genérica, muestran mejor rendimiento. Se analizan también los resultados en función del tipo de pregunta (booleanas o de frase) y del tema (ocio o especializada). Se concluye que el método empleado permite analizar el rendimiento de los SRI de la W3 y que los resultados ponen de manifiesto que los buscadores no son sistemas de recuperación de información muy precisos aunque sí muy exhaustivos.

Item type: Journal article (Paginated)
Keywords: Information Retrieval Systems, evaluation, Internet, World Wide Web, search engines, Motores de búsqueda, buscadores, evaluación
Subjects: J. Technical services in libraries, archives, museum.
Depositing user: Maria Dolores/ M.D. Olvera Lobo
Date deposited: 29 Nov 2010
Last modified: 02 Oct 2014 12:17
URI: http://hdl.handle.net/10760/15115

References

1.OLVERA, M.D. Evaluación de la recuperación de información en Internet: un modelo experimental. Universidad de Granada. (Tesis Doctoral defendida el 2 de marzo de 1999).

2.SULLIVAN, D.(ed.) Search Engine Watch. Mecklermedia: cop.1996-1999. Disponible en: http://searchenginewatch.com/ (Consultado 2 marzo 96).

3.LEIGHTON, V.H.; SRIVASTAVA, J. “First 20 Precision among World Wide Web Search Services (Search Engines). Journal of the American Society for Information Science. 50 (10) 870-881, 1999.

4.CHU, H.; ROSENTHAL, M. Search engines for the World Wide Web: A comparative study and evaluation methodology, oct. 1996. Disponible en:

http://www.asis.org/annual-96/ElectronicProceedings/chu.html (Consultado 5 febr. 97).

5.DING, W.; MARCHIONINI, G. “A comparative study of web search service performance”. Proceedings of the ASIS Annual Conference 33. 136-142, 1996.

6.GORDON, M.; PATHAK, P. “Finding information on the World Wide Web: the retrieval effectiveness of search engines”. Information Processing and Management. 35, 141-180, 1999.

7.LAKE, M.”2nd Annual search engine shoot-out”. PC Computing.

Disponible en: http://www4.zdnet.com/pccomp/features/exc10997/sear/sear.html . (Consultado 3 enero 98).

8.TOMAIUOLO, N.G.; PACKER, J.G. “An analysis of Internet search engines: assessment of over 200 search queries.” Computers in Libraries. 16(6) 58-62, 1996

9.FELDMAN, S. “Just the answers, please: choosing a Web search service. Searcher Magazine. 29 agosto 1997. Disponible en: http://www.infotoday.com/searcher/may/story3.htm (Consultado 13 oct. 97)

10.LEBEDEV, A. Best search engines for finding scientific information on the Web. Sept. 29, 1996. Disponible en: http://www.chem.msu.su/eng/comparison.html (Consultado 12 dic. 97).

11.LEIGHTON, V.H. Performance of Four World Wide Web (WWW) Index Services: Infoseek, Lycos, Webcrawler and WWWWorm. 1995. Disponible en: http://www.winona.msus.edu/is-f/library-f/webind.htm (Consultado 2 enero 97).

12.LEIGHTON, V.H.; SRIVASTAVA, J. Precision among World Wide Web Search Services (Search Engines): Altavista, Excite, Hotbot, Infoseek, Lycos. act.10 jul. 97. Disponible en: http://www.winona.msus.edu/is-f/library/webind2/webind2.htm (Consultado 12 jul. 97).

13.OVERTON, R. “Search engines get faster and faster, but not always better”. PC World. sept. 1996. Disponible en:

http://www.pcworld.com/workstyles/online/articles/sep96/1409_engine.html (Consultado 10 nov. 96).

14.SCHLICHTING, A.; NILSEN, E. Signal detection analysis of WWW search engines. 17 diciembre 1997. Disponible en: http://www.microsoft.com/usability/webcong/schlichting/schlichting.htm (Consultado 13 oct. 97).

15.WESTERA, G. Robot-drive search engine evaluation: overview. 4 julio 1997. Disponible en:

http://www.curtin.edu.au/curtin/library/ staffpages/gwpersonal/senginestudy/ (Consultado 13 oct. 97)

16.CLARKE, S; WILLET, P. “Estimating the recall performance of web search engines”. Aslib Proceedings. 49(7) 184-189, 1997.

17.BLAIR, D.C.; MARON, M.E. “An evaluation of retrieval effectiveness for a full-text document-retrieval system”. Communications of the ACM. 28(3) 281-299, 1985.

18.SALTON, G.; McGILL, J. Introduction to modern information retrieval. New York: McGraw-Hill, 1983. ISBN 0070544840


Downloads

Downloads per month over past year

Actions (login required)

View Item View Item
Contact us
Send email Sponsors
Sponsor: AIMS Sponsor: D&P Sponsor: UniNa CAB Get connected
Facebook Facebook Twitter Twitter Linkedin LinkedIn RSS RSS