Eine "autoritative" Datenbank auf dem Prüfstand: Der Social Sciences Citation Index (SSCI) und seine Datenqualität

Tüür-Fröhlich, Terje Eine "autoritative" Datenbank auf dem Prüfstand: Der Social Sciences Citation Index (SSCI) und seine Datenqualität. Information. Wissenschaft & Praxis, 2018, vol. 69, n. 5-6, pp. 265-275. [Journal article (Paginated)]

[img]
Preview
Text
[Information - Wissenschaft Praxis] Eine autoritative Datenbank auf dem Prfstand Der Social Sciences Citation Index (SSCI) und seine Datenqualitt.pdf - Published version

Download (1MB) | Preview

English abstract

Citation indexes provide the data for many scientometric studies, evaluations of scientific advancements and university rankings. In the literature, there are hardly any indications of endogenous errors (i.e. original references are correct, data base entry contains errors or is faulty) in the licensed databases. Trivial mistakes (e.g. misspelling of author names) in databases are counted of little relevance. Debugging Pierre Bourdieu as a cited author in the SSCI revealed more than 85 mutations. The case studies show a high number of endogenous database errors. Footnotes, common in jurisprudence, run the risk of being turned into phantom references as was the case for an article in Harvard Law Review case study: 99 % of error rate. The claim of SSCI to map the "relevant" global social sciences – for all disciplines covered in the SSCI – appears to be hampered by deficiencies in data collection and processing.

German abstract

Zitatdatenbanken bilden die Datengrundlagen für zahlreiche szientometrische Untersuchungen, Evaluationen wissenschaftlicher Leistungen und Uni-Rankings. In der Literatur finden sich kaum Hinweise auf endogene Fehler (Original richtig, Datenbankeintrag falsch) in den kostenpflichtigen Datenbanken. Banale Fehler (z. B. Falschschreibung der Namen von Autorinnen oder Autoren) in Datenbanken hätten nur geringe Relevanz. Die Fehlersuche zu Pierre Bourdieu als "cited author" im SSCI (Vergleich Original – SSCI-Record) ergab mehr als 85 Mutationen. Die Fallstudien zeigen eine hohe Anzahl endogener Datenbankfehler. In den Rechtswissenschaften übliche Referenzen in Fußnoten laufen große Gefahr, in Phantomreferenzen verwandelt zu werden (Fallstudie Harvard Law Review: 99 Prozent Fehler). Dem Anspruch des SSCI, die "relevanten" globalen Sozialwissenschaften abzubilden – für alle im SSCI erfassten Disziplinen –, stehen offenbar Mängel in Datenerfassung und -verarbeitung im Wege.

French abstract

Les bases de données de citations constituent la base des data pour de nombreuses analyses scientométriques, d’évaluations de travaux scientifiques et de classements d’universités. Dans la littérature, il n’y a pratiquement aucune indication d’erreurs endogènes (original correct, saisie dans la base de données incorrecte) dans les bases de données payantes. Les erreurs banales (telles que les fautes dans les noms d’auteur) dans les bases de données n’auraient que peu d'importance. La recherche d'erreurs pour Pierre Bourdieu en tant qu’auteur cité dans le SSCI (comparaison original – enregistrement SSCI) a révélé plus de 85 mutations. Les études de cas montrent un nombre élevé d'erreurs endogènes dans les bases de données. Les notes de bas de page, courantes dans les sciences juridiques, risquent d’être transformées en références fantômes (étude de cas de la Harvard Law Review : 99 % d’erreurs). Donc, l’affirmation de SSCI de représenter les sciences sociales globales « pertinentes » – pour toutes les disciplines couvertes dans le SSCI – semble être entravée par des lacunes dans la saisie et le traitement des données.

Item type: Journal article (Paginated)
Keywords: Empirical Study, Citation frequency, Quality, Database, Criticism, Impact factor, Mistakes, Social sciences, Social Science Citation Index
Subjects: B. Information use and sociology of information > BB. Bibliometric methods
H. Information sources, supports, channels. > HK. Online hosts.
Depositing user: Claus Harringer
Date deposited: 19 Mar 2020 07:29
Last modified: 19 Mar 2020 07:29
URI: http://hdl.handle.net/10760/39750

References

Adam, David (2002): The counting house. Nature, 415, 726–729.

Beebe, Barton (2010): Intellectual property law and the sumptuary code. Harvard Law Review 123 (4), 809–889.

Franceschini, Fiorenzo; Maisano, Domenico & Mastrogiacomo, Luca (2013): A novel approach for estimating the omitted-citation rate of bibliometric databases with an application to the field of bibliometrics. JASIST 64, 2149–2156.

Franceschini, Fiorenzo; Maisano, Domenico & Mastrogiacomo, Luca (2016): The museum of errors/horrors in Scopus. Journal of Informetrics Vol. 10 (1), 174–182.

Fröhlich, Gerhard (2008): Wissenschaftskommunikation und ihre Dysfunktionen: Wissenschaftsjournale, Peer Review, Impact Faktoren, in: Hettwer, Holger et al. (Hg.): WissensWelten. Gütersloh: Verlag der Bertelsmann Stiftung, 64–80.

Garfield, Eugene (2005): The Agony and the Ecstasy – The History and Meaning of the Journal Impact Factor http://garfield.library.upenn.edu/papers/jifchicago2005.pdf [09.01.2013].

Hamilton, David P. (1990): Publishing by – and for? – the Numbers. Science 250, 1331–2.

Hamilton, David P. (1991): Research Papers: Who's Uncited Now? Science 251, 25.

Moed, Henk F. (2005): Citation Analysis in Research Evaluation. Dordrecht/NL: Springer.

Pendlebury, David A. (1991): Science, Citation, and Funding. Science 251, 410–411.

Simkin, Mikhail V./Roychowdhury, V.P. (2002): Read before you cite! https://arxiv.org/abs/cond-mat/0212043 [17.09.2018].

Sofio, Séverine (2008a): Les Vertus de la reproduction. Travail, genre et sociétiés 19, 23-39.

Sofio, Séverine (2008b): Des discours aux pratiques, comment approcher la réalité des rapports de sexe ? Genre et professionsartistiques au XIXe siècle. Sociétés et représentations 24, 177–193.

Tüür-Fröhlich, Terje (2016): The Non-trivial Effects of Trivial Errors in Scientific Communication and Evaluation. Glückstadt/D.: VWH, Schriften zur Informationswissenschaft, Band 69 (zugl. Doctoral Thesis, Johannes Kepler Universität Linz, Institut für Philosophie & Wissenschaftstheorie).

Tüür-Fröhlich, Terje (2017): Eine "autoritative" Datenbank auf dem Prüfstand: Der Social Sciences Citation Index (SSCI) und seine Datenqualität. UNILEX 2017, 3–9.

Tüür-Fröhlich, Terje (2018): Open Citations – Die Transparenzforderungen der San Francisco Declaration on Research Assessment (DORA). Information – Wissenschaft und Praxis (IWP), 69 (4), 183–189.

Unver, Bayram et al. (2009): Referency accuracy in four rehabilitation journals. Clinical Rehabilitation 23, 741–5.

Veblen, Thorstein (1912): The Theory of the Leisure Class. N.Y.: Macmillan (2nd Ed.).


Downloads

Downloads per month over past year

Actions (login required)

View Item View Item