Analisi citazionale e indicatori bibliometrici nel modello Open Access

De Robbio, Antonella Analisi citazionale e indicatori bibliometrici nel modello Open Access. Bollettino AIB, 2007, vol. 2007, n. 3, pp. 257-288. [Journal article (Paginated)]

[img]
Preview
PDF
valutazione-23gennaio2008.pdf

Download (375kB) | Preview

English abstract

This article is focused on the bibliometric methods used for research evaluation, within the well known field of the bibliometrics which uses mathematical and statistical techniques to analyze the publications distribution patterns, and to explore their impact into the scholarly communities. While the bibliometric methods are used more often in the LIS, bibliometrics offers a wide range of applications in a variety of fields of knowledge. Since the research evaluation requires a double approach: quantitative (bibliometric analysis) and qualitative (peer-review, panel...), the fundamental idea is that the measurement of the scientific knowledge uses both the methods. Though the IF or impact factor is the most well known bibliometric index, is not the only one suggested by ISI (now Thompson) to refer. In the Open Access world are spreading a wide number of initiatives and projects regarding the “bibliometrics” field, in which are being testing alternative solutions to the traditional IF, for example the Eigenfactor, the Hirsch index and its variations like the g-index, a-index, h-b-index, tools that mark a meaningful change in this fascinating field. While the indicators “author-produced” are the citations, those “reader-produced” are usage data collected through webserver and linkresolver logs. A quantitative bibliometric indicator of new generation is the Usage Factor UF, complementary but non substitutive of traditional or alternative impact factor indicator. It will be necessary to organize the log data collection to share methods to obtain significant analysis. The article goes over some examples of new tools/projects for citational analysis in the Web area, among these the Web Impact Factor (WIF), and for the statistical analysis of logs and data, both bringing back to the new science known as metric of the web or Webometric. Within the OAI framework there are many research projects of the webometric type, involving the intellectual output archivied into the repositories and their impact within the constitutive processes of the scholarly communication. The theory assuming that an open access article in more likely to be read and therefore cited is matter of international debates and object of several studies, aimed to analyze the effects of the open access model and of the download on the citational impact. The article closes with a critical report on some of the most important works investigating the validity of this theory, from the original study of Lawrence, on Nature 2001, to the most recent works, the three postulates of Kurtz, the analysis run in 2006 by the Cornell’s Library staff on the MathSciNet database, the study of Moed which imposed a completely new methodological level with the introduction of the “variable citation window”. Useful tools for the citational bibliometric analysis, on the statistical usage measurement of the researchs for the successful data monitoring, should be in the hands of the research producers, not in the hands of those commercial oligopoles that can influence the investment strategies and the national and international policies for the research.

Italian abstract

L’articolo è focalizzato sui metodi bibliometrici usati per la valutazione della ricerca, entro l’ambito di studio noto come bibliometria, la quale utilizza tecniche matematiche e statistiche per analizzare i modelli di distribuzione delle pubblicazioni e per esplorare l’impatto entro le comunità scientifiche. Mentre i metodi bibliometrici sono più spesso usati nel campo LIS, la bibliometria offre ampie applicazioni in altre aree del sapere. Poiché la valutazione della ricerca richiede un duplice approccio: quantitativo (analisi bibliometrica) e qualitativo (peer-review, panel, …) l’idea di fondo è che la misurazione della produzione del sapere scientifico usi entrambi gli approcci in modo combinato. Sebbene l’Impact Factor o IF, sia l’indicatore bibliometrico più conosciuto, non è il solo indicatore proposto dall’ISI (ora Thompson) a cui fare riferimento. Nel mondo Open Access inoltre stanno nascendo una serie di iniziative e progetti che interessano il campo della "bibliometria" dove si stanno sperimentando soluzioni alternative al tradizionale IF, tra cui l’Eigenfactor, l’Indice di Hirsch e le sue varianti come il g-index, a-index, h-b-index, strumenti che segnano una svolta epocale in questo affascinante campo di indagine. Se gli indicatori generati dall’autore sono le citazioni, quelli generati dai lettori sono i dati sull’utilizzo che possono essere raccolti tramite server web e linkresolver logs. Indicatore bibliometrico quantitativo di nuova generazione è l’Usage Factor UF, complementare e non sostitutivo a fattori di impatto tradizionali o alternativi all’IF. Sarà necessario normalizzare il lavoro di raccolta dei dati di log al fine della condivisione di metodi per ottenere analisi significative. L’articolo passa in rassegna alcuni esempi di nuovi strumenti e/ progetti per l’analisi citazionale nell’ambiente Web, tra cui il Web Impact Factor (WIF) e per l’analisi statistica dei log e dei dati, che si riconducono alla nuova scienza nota come metrica del web o Webometrica. Entro il framework OAI numerosi sono i progetti di ricerca di tipo webometrico che coinvolgono le produzioni intellettuali depositate negli archivi e il loro impatto entro i processi che costituiscono la catena della comunicazione scientifica. La teoria che ipotizza che un articolo ad accesso aperto ha maggiori possibilità di essere letto e quindi citato è argomento di accesi dibattiti internazionali e oggetto di numerosi studi che hanno lo scopo di analizzare l’effetto dell’Open Access e dello scarico sull’impatto delle citazioni. L’articolo si chiude con una rassegna critica di alcuni dei lavori più importanti che indagano sulla validità di questa teoria, a partire dallo studio originale di Lawrence apparso su Nature nel 2001 e fino ai più recenti lavori, passando dai tre postulati di Kurtz, all’analisi condotta nel 2006 sulla banca dati MathSciNet dai bibliotecari della Cornell e fino al rigoroso studio di Moed che ha imposto un livello metodologico del tutto nuovo con l’introduzione della “variable citation window. Strumenti utili per analisi bibliometriche sulle citazioni, sulla misurazione statistica dell’uso delle ricerche da parte dell’utente/autore, per il conseguente monitoraggio dei dati, dovrebbero essere nelle mani di chi la ricerca la produce e non di pochi oligopoli commerciali che possono influenzare le strategie di investimento e le politiche scientifiche nazionali e internazionali.

Item type: Journal article (Paginated)
Keywords: Open Access, bibliometric methods, bibliometrics, research, evaluation, bibliometria, IF, bibliometric indicators, indicatori bibliometrici
Subjects: B. Information use and sociology of information > BA. Use and impact of information.
A. Theoretical and general aspects of libraries and information. > AC. Relationship of LIS with other fields .
E. Publishing and legal issues. > ED. Intellectual property: author's rights, ownership, copyright, copyleft, open access.
B. Information use and sociology of information > BB. Bibliometric methods
Depositing user: Antonella De Robbio
Date deposited: 17 Nov 2007
Last modified: 02 Oct 2014 12:09
URI: http://hdl.handle.net/10760/10686

References

Eugene Garfield, The History and Meaning of the Journal Impact Factor. JAMA, January 4, 2006—Vol 295, No. 1 (Reprinted). http://www.garfield.library.upenn.edu/papers/jamajif2006.pdf

Pezzilli R, Morselli-Labate AM, Morotti L, Steering Committee of “JOP. Journal of the Pancreas: Considerations on a 'Pancreatic' Electronic Journal at the beginning of Its 8th Year of Publication". JOP. J Pancreas (Online) 2007; 8(3):263-267. Editorial published by the Steering Committee of JoP http://www.joplink.net/prev/200705/index.html

Comba, Valentina (2003) La valutazione delle pubblicazioni: dalla letteratura a stampa agli Open Archives. Pubblicato in BollettinoAIB 2003(1):pp. 65-76. http://eprints.rclis.org/archive/00000095/

Alessandro Figa'-Talamanca, L'Impact Factor nella valutazione della ricerca e nello sviluppo dell’editoria scientifica. IV Seminario Sistema Informativo Nazionale Per La Matematica SINM 2000 : un modello di sistema informativo nazionale per aree disciplinar. Lecce, Lunedì 2 ottobre 2000 http://siba2.unile.it/sinm/4sinm/interventi/fig-talam.htm

Centro universitario per la valutazione e il controllo CRESCO. Report sulla valutazione della ricerca scientifica universitaria. A cura di Maria Vella. Gennaio 2004 http://www.cresco.unisi.it/wpeng/wp2eng.pdf

Guido Trombetti, Presidente della CRUI Conferenza dei Rettori delle Università Italiane, Relazione sullo stato delle Università Italiane 2006. Roma, 9 novembre 2006 www.crui.it/crui/newsletter/ottobre/lettera_CRUI_10.pdf

Marie McVeight (Ottobre 2004) Open Access Journals in the Thomson ISI citation Databases: analysis of the impact factors and citation patterns http://www.thomsonscientific.com/media/presentrep/essayspdf/openaccesscitations2.pdf

Hirsch, J. E. An index to quantify an individual's scientific research output (2005-08-03) In Proceedings of the National Academy of Sciences 102 16569 (2005) http://arxiv.org/abs/physics/?0508025

Egghe, L.; Rousseau R. (2006) An informetric model for the Hirsch-index, Scientometrics, vol. 69, no. 1, pp. 121-129.

Antonis Sidiropoulos, Dimitrios Katsaros, and Yannis Manolopoulos, Generalized h-index for disclosing latent facts in citation networks, arXiv:cs.DL/0607066 v1 13 Jul 2006,

Pablo D. Batista, Monica G. Campiteli, Osame Kinouchi, and Alexandre S. Martinez, Is it possible to compare researchers with different scientific interests?, Scientometrics, Vol 68, No. 1 (2006), pp. 179-189.

Rousseau, Ronald (2006) New developments related to the Hirsch index. http://eprints.rclis.org/archive/00006376/

Rousseau, Ronald (2006) A case study : evolution of JASIS' Hirsch index. http://eprints.rclis.org/archive/00005430/

Leo Egghe, Ronald Rousseau, Introduction to Informetrics: Quantitative Methods in Library, Documentation and Information Science. Elsevier, 1990. 978-0444884930

Noruzi, Alireza (2006) The Web Impact Factor : a critical review. The Electronic Library 24(4):pp. 490-500. http://eprints.rclis.org/archive/00005543/

Noruzi, Alireza (2005) Web impact factors for Iranian Universities. Webology 2(1). http://eprints.rclis.org/archive/00005596/

Stevan Harnad, Tim Brody, Comparing the Impact of Open Access (OA) vs. Non-OA Articles in the Same Journals http://www.dlib.org/dlib/june04/harnad/06harnad.html

John Ewing, Measuring Journals. Notices of the AMS, Vol. 53, No. 9, October 2006, 1049-1053 http://www.ams.org/notices/200609/comm-ewing.pdf

Maria Cassella, Novità recenti dal mondo delle statistiche di uso: il protocollo SUSHI e le nuove linee guida dell’ICOLC. AIB notizie 18 (2006), n. 9 http://www.aib.it/aib/editoria/n18/0908.htm3

D. Dellisanti, ICOLC 2006: SUSHI un nuovo strumento per la misurazione delle risorse elettroniche, Bollettino CILEA Nr. 105 Febbraio (2007) http://bollettino.cilea.it/rst/rst.php?op=view_metadata&id=549

Buttà Basilio, Metadati negli Open Archive: tecniche di conversione dei formati dei record nel formato MARC21 utilizzato da CDSware, tesi di laurea in informatica, Università degli Studi di Messina, A.A. 2003-2004 (relatore Puccio L., correlatore De Robbio A.).

Amelotti Ercole, Protocollo OAI-PMH negli Open Archive e applicazione CDSware per la rappresentazione dei relativi dati bibliografici, tesi di laurea in informatica, Università degli Studi di Messina, A.A. 2003-2004 (relatore Puccio L., correlatore De Robbio A.).

Yang, Kiduk, and Lokman I. Meho. "Citation Analysis: A Comparison of Google Scholar, Scopus, and Web of Science."Information Realities: Shaping the Digital Future for All - Proceedings of the Annual Meeting of the American Society for Information Science and Technology (November 2006) http://www.asis.org/Conferences/AM06/papers/185.html

Meho, Lokman I. "The Rise and Rise of Citation Analysis."Physics World 20, no. 1 (January 2007): 32-36. http://www.slis.indiana.edu/faculty/meho/PhysicsWorld.pdf

The Open Citation Project - Reference Linking and Citation Analysis for Open Archives http://opcit.eprints.org/oacitation-biblio.html

Steve Lawrence, Free online availability substantially increases a paper's impact http://www.nature.com/nature/debates/e-access/Articles/lawrence.html

Steve Lawrence (2001) Online or Invisible? Nature 411 (6837): 521 http://www.neci.nec.com/~lawrence/papers/online-nature01/

Garfield, E. (1955) Citation Indexes for Science: A New Dimension in Documentation through Association of Ideas Author eprint, in Science, Vol:122, No:3159, p.108-111, July 15, 1955 http://www.garfield.library.upenn.edu/papers/science_v122(3159)p108y1955.html

Craig, Ian; Andrew Plume, Marie McVeigh, James Pringle & Mayur Amin (2007). Do Open Access Articles Have Greater Citation Impact? A critical review of the literature. Journal of Informetrics. http://www.publishingresearch.net/Citations-SummaryPaper3_000.pdf.pdf

Iain D.Craig: Wiley-Blackwell; Andrew M.Plume, Mayur Amin: Elsevier; Marie E.McVeigh, James Pringle: Thomson Scientific

Peter Suber (2007), Publishers doubt the OA impact advantage, Open Access News, 18 May 2007 http://www.earlham.edu/~peters/fos/2007_05_13_fosblogarchive.html#5358905179606249479

Henk F. Moed The effect of “Open Access” upon citation impact: An analysis of ArXiv’s Condensed Matter Section http://arxiv.org/ftp/cs/papers/0611/0611060.pdf (novembre 2006)

Henneken, E. A., Kurtz, M. J., Eichhorn, G., Accomazzi, A., Grant, C., Thompson, D., and Murray, S. S. (2006) Effect of E-printing on Citation Rates in Astronomy and Physic http://arxiv.org/pdf/cs.DL/0604061

Philip M. Davis, Michael J. Fromerth, Does the arXiv lead to higher citations and reduced publisher downloads for mathematics articles? March 14, 2006 http://arxiv.org/abs/cs.DL/0603056

The Web of Knowledge: A Festschrift in Honor of Eugene Garfield. Edited by Blaise Cronin and Helen Barsky Atkins 2000/544 pp/hardbound ISBN: 1-57387-099-4 http://books.infotoday.com/asist/WebKnow.shtml

Koenig, M.E.D. (1983). Bibliometric indicators versus expert opinion in assessing research performance. Journal of the American Society for Information Science, 34, 136–145.

Renato Spigler, "Peer-Reviewing and Electronic Publishing", High Energy Physics Libraries Webzine, issue 6, March 2002 URL: <http://library.cern.ch/HEPLW/6/papers/5/>

Guédon, Jean-Claude, La lunga ombra di Oldenburg: i bibliotecari, i ricercatori, gli editori e il controllo dell'editoria scientifica, traduzione italiana a cura di Brunella Casalini, Maria Chiara Pievatolo e Francesca Di Donato, “Bollettino telematico di filosofia”, 2005, http://bfp.sp.unipi.it/hj/browse.php?browse=subjects&id=63.


Downloads

Downloads per month over past year

Actions (login required)

View Item View Item