Valutazione delle pubblicazioni scientifiche e open access

Reale, Emanuela Valutazione delle pubblicazioni scientifiche e open access., 2008 . In La biblioteca scientifica e tecnologica: servizi per l'informazione scientifica, Roma (Italy), 17 April 2008. (Unpublished) [Conference paper]

Preview

PDF Reale_roma_tre.pdf Download (91kB) | Preview

English abstract

The evaluation of scientific output is a central aspect in the process of assessment of the quality of the research produced by institutions, programs, individuals. The traditional debate concentrates on the relationship between peer review and quantitative measurements (metrics) of scientific research. Recently, the United Kingdom has decided to found the assessment of Universities only on bibliometric indexes, leaving peer reviewing only for human and social sciences, that still do not have acceptable standard metric indexes. On the other hand, Australia wants to found its scientific research assessment system only on peer and final users judgment. In the first part of the paper are shown advantages and disadvantages of both systems of assessment, and the necessity of an integration between the two processes, particularly in correlation with the Italian triennial process of research assessment made by CIVR. In the second part some possible changes in the assessment process due to the open access approach are analysed: open peer review as a transparent and collaborative way of peer reviewing, and the construction of new metrics based on a larger amount of information than commercial databases (Web of science, Scopus) usually cover.

Italian abstract

La valutazione dell’output scientifico è uno degli aspetti centrali nei processi di assessment della qualità della ricerca prodotta da istituzioni, programmi e individui. Il tradizionale dibattito che, con vicende alterne, ha caratterizzato questo momento valutativo si concentra sulla relazione tra peer review e misurazioni quantitative della ricerca (le cd. metriche). I vantaggi e gli svantaggi collegati ai diversi metodi sono stati ampiamente discussi in letteratura, ed evidenze empiriche a supporto dell’una e dell’altra soluzione vengono presentate sulla base di osservazioni tratte dalle diverse esperienze nazionali e internazionali di valutazione. L’argomento ha recentemente avuto un’ulteriore spinta a seguito della decisione del Regno Unito di basare la valutazione delle Università, tradizionalmente condotta attraverso panel disciplinari del RAE, su indici bibliometrici appositamente costruiti per la misurazione della qualità, lasciando la valutazione dei pari per le sole discipline umane e sociali, dove, cioè, le metriche non hanno ancora raggiunto standard accettabili. Per converso, in Australia la valutazione delle istituzioni dovrebbe passare da una sistema basato esclusivamente sull’uso delle metriche a un nuovo sistema dove la valutazione dovrebbe essere condotta da panel di ‘pari’ e di ‘utilizzatori finali’ dei risultati prodotti. Il paper è articolato in due parti. La prima discute i vantaggi e i pericoli collegati all’uso esclusivo delle metriche o della peer review per la valutazione dei prodotti di ricerca, e la necessità di mantenere un’integrazione dei due metodi che tenda a bilanciare i rispettivi svantaggi. Saranno, in particolare, analizzate possibili implementazioni collegate alla valutazione triennale della ricerca condotta in Italia dal Civr. La seconda parte presenta i possibili cambiamenti che l’approccio open access può introdurre nella valutazione dei pari, attraverso, da una parte, l’applicazione dell’open peer review per la valutazione delle pubblicazioni scientifiche, che consentirebbe trasparenza, ampia partecipazione e possibilità di critica al lavoro dei pari. Dall’altra, alcune tendenze verso la costruzione di nuove metriche basate su informazioni che coprono una quantità di informazioni molto più ampio di quanto consentito dai database commerciali sulle pubblicazioni scientifiche, attualmente più diffusi e utilizzati a livello internazionale (Web of science - Thompson e Scopus).

Item type:	Conference paper
Keywords:	Bibliometria, peer review, open peer review, bibliometrics, assessment, valutazione
Subjects:	B. Information use and sociology of information > BA. Use and impact of information. B. Information use and sociology of information > BB. Bibliometric methods B. Information use and sociology of information > BG. Information dissemination and diffusion.
Depositing user:	Enza Gasbarro
Date deposited:	22 May 2008
Last modified:	02 Oct 2014 12:11
URI:	http://hdl.handle.net/10760/11584

Downloads

Actions (login required)

View Item