Problemática universalización de los indicadores de evaluación científica. Crítica desde la investigación en comunicación radiofónica.

Piñeiro-Otero, M-Teresa Problemática universalización de los indicadores de evaluación científica. Crítica desde la investigación en comunicación radiofónica. El profesional de la información, 2018, vol. 27, n. 2, pp. 254-266. [Journal article (Paginated)]

[thumbnail of Research article]
Preview
 Text (Research article)
EPI_2018_27_2.pdf - Published version
Available under License Creative Commons Public Domain Dedication.
Download (443kB) | Preview

English abstract

The problematic universalization of scientific evaluation indicators. A critique from radio studies. The creation of an academic accreditation system for university researchers in Spain has led to the universalization of the pure and experimental sciences indicators. This universalization is questionable for the assessment of certain areas of knowledge such as communication science. This article provides a critical analysis of scientific evaluation indicators from a minority field of communicative research: radio studies. For this purpose, a multidimensional approach has been developed: bibliometric analysis of articles in Spanish academic journals, a survey of researchers, a study of the presence of authorities (most productive authors) in WoS-Scopus-Google Scholar, and the resolution of the main calls for national competitive fundings. The study has confirmed the inappropriate use of certain indicators –visibility and impact, internationalization, cooperation, or funded projects- for the evaluation of Spanish radio research, even more adverse than their use in other areas of communication. The adoption of mixed systems that make it possible to better evaluate the real impact of radio research is proposed.

Spanish abstract

El establecimiento de un sistema de acreditación académica en la universidad española ha conllevado la universalización de indicadores de las ciencias puras y experimentales. Esta universalización resulta cuestionable para la valoración de determinadas ramas del conocimiento como la comunicación. El presente artículo efectúa un análisis crítico de los indicadores de evaluación científica desde un ámbito minoritario de la investigación comunicativa: los radio studies. Para ello se ha llevado a cabo una aproximación multidimensional: análisis bibliométrico de artículos en revistas académicas españolas, encuesta a investigadores, estudio de la presencia de autoridades (autores con mayor productividad e impacto) en WoS-Scopus-Google Scholar y resolución de las principales convocatorias de financiación de proyectos estatales. Esta aproximación constató la problemática de determinados indicadores –visibilidad e impacto, internacionalización, cooperación o proyectos financiados- para la evaluación de la investigación radiofónica española, incluso respecto a otras áreas de la comunicación, por lo que se propone la adopción de sistemas mixtos que permitan valorizar su impacto real.

Item type: Journal article (Paginated)
Keywords: Indicadores científicos; Acreditación académica; Evaluación; Investigación; Metainvestigación comunicativa; Comunicación; Radio; Investigación radiofónica; Investigadores; Radio studies; Scientific indicators; Academic accreditation; Evaluation; Research; Communicative metaresearch; Communication; Radio; Radio research; Researchers; Radio studies.
Subjects: B. Information use and sociology of information
B. Information use and sociology of information > BA. Use and impact of information.
B. Information use and sociology of information > BB. Bibliometric methods
B. Information use and sociology of information > BJ. Communication
B. Information use and sociology of information > BD. Information society.
H. Information sources, supports, channels.
H. Information sources, supports, channels. > HH. Audio-visual, Multimedia.
I. Information treatment for information services
Depositing user: Luz Buedo
Date deposited: 07 Mar 2019 09:56
Last modified: 07 Mar 2019 09:56
URI: http://hdl.handle.net/10760/34174

References

Alonso-Arroyo, Adolfo; Pulgarín, Antonio; Gil-Leiva, Isidoro (2005). “Estudio cienciométrico de la colaboración científica en la Universidad Politécnica de Valencia, España”. Information research, v. 11, n. 1. http://www.informationr.net/ir/11-1/paper245.html

AQU (2010). L’avaluació de la recerca en Humanitats i Ciències Socials. Quaderns de qualitat 1. Barcelona: Agència per a la qualitat del sistema universitari de Catalunya. ISBN: 978 84 693 4100 0 http://www.aqu.cat/doc/doc_49699642_1.pdf

Becher, Tony; Trowler, Paul (2001). Academic tribes and territories: Intellectual enquiry and the cultures of disciplines. Buckingham: Open University Press/SRHE. ISBN: 0 335 20627 1

Bozeman, Barry; Fay, Daniel; Slade, Catherine P. (2012). “Research collaboration in universities and academic enterpreneurship: the-state-of-the-art”. The journal of technology transfer, v. 38, n. 1. https://doi.org/10.1007/s10961-012-9281-8

Casado-del-Río, Miguel-Ángel; Fernández-Quijada, David (2015). “References in communication policy research: a bibliographical characterization of articles published by Spanish authors”. Communication & society, v. 28, n. 2, pp. 73-85. http://dadun.unav.edu/handle/10171/38118

Casanueva-Rocha, Cristóbal; Caro-González, Francisco-Javier (2013). “La Academia Española de Comunicación: productividad científica frente a actividad social”. Comunicar, v. 41, pp. 61-70. https://doi.org/10.3916/C41-2013-06

Castillo-Esparcia, Antonio; Peña-Timón, Vicente; Mañas-Valle, Sebastián (2014). “Revistas de comunicación en España. Una aproximación histórica”. Historia y comunicación social, v. 19, pp. 621-630. https://doi.org/10.5209/rev_HICS.2014.v19.45053

España (1989). “Real decreto 1086/1989, de 28 de agosto, sobre retribuciones del profesorado universitario”. BOE, n. 216, 9 septiembre. https://www.boe.es/buscar/doc.php?id=BOE-A-1989-21967

España (2002). “Real decreto 1052/2002), de 11 de octubre, por el que se regula el procedimiento para la obtención de la evaluación de la Agencia Nacional de Evaluación de la Calidad y Acreditación, y de su certificación, a los efectos de contratación de personal docente e investigador universitario”. BOE, n. 245, 12 octubre. https://www.boe.es/buscar/doc.php?id=BOE-A-2002-19804

España (2007). “Real decreto 1312/2007, de 5 de octubre, por el que se establece la acreditación nacional para el acceso a los cuerpos docentes universitarios”. BOE, n. 240, 6 octubre. https://www.boe.es/buscar/act.php?id=BOE-A-2007-17492

De-Filippo, Daniela (2013). “La producción científica española en Comunicación en WoS. Las revistas indexadas en SSCI (2007-12)”. Comunicar, v. 41, pp. 25-34.

https://doi.org/10.3916/C41-2013-02

Fernández-Quijada, David; Masip, Pere (2013). “Tres décadas de investigación española en comunicación: hacia la mayoría de edad”. Comunicar, v. 41, pp. 15-24.

https://doi.org/10.3916/C41-2013-01

Fernández-Quijada, David; Masip, Pere; Bergillos, Ignacio (2013). “El precio de la internacionalidad: la dualidad en los patrones de publicación de los investigadores españoles en comunicación”. Revista española de documentación científica, v. 36, n. 2. https://doi.org/10.3989/redc.2013.2.936

Giménez-Toledo, Elea; Alcaín-Partearroyo, María-Dolores (2006). “Estudio de las revistas españolas de periodismo”. Comunicación y sociedad, v. 19, n. 1, pp. 107-131. http://www.unav.es/fcom/communication-society/es/articulo.php?art_id=62

Ginés-Mora, José (2004). “La necesidad del cambio educativo para la sociedad del conocimiento. Revista iberoamericana de educación, v. 35, pp. 13-37.

http://rieoei.org/rie35a01.htm

Glänzel, Wolfgang; Shubert, András (2001). “Double effort = Double impact? A critical view at international co-authorship in chemistry”. Scientometrics, v. 50, n. 2.

https://goo.gl/wLYgF7

https://doi.org/10.1023/A:1010561321723

Heinze, Thomas (2008). “How to sponsor ground-breaking research: A comparison of funding schemes”. Science and public policy, v. 35, n. 5, pp. 302-318.

https://doi.org/10.3152/030234208X317151

Huang, Mu-Hsuan; Chang, Yu-Wei (2008). “Characteristics of research output in social sciences and humanities from a research evaluation perspective”. Journal of the American Society for Information Science and Technology, v. 59, n. 11, pp. 1819-1828.

https://doi.org/10.1002/asi.20885

Jiménez-Contreras, Evaristo; Delgado-López–Cózar, Emilio; Ruiz-Pérez, Rafael (2006). “Producción española en biblioteconomía y documentación con visibilidad internacional a través del Web of Science (1995–2004)”. El profesional de la información, v. 15, n. 5. pp. 373-383. http://www.elprofesionaldelainformacion.com/contenidos/2006/septiembre/6.pdf

Jones, Daniel (1998). “Investigación sobre comunicación en España. Evolución y perspectivas”. Zer. Revista de estudiosde comunicación, v. 3, n. 5.

http://www.ehu.eus/ojs/index.php/Zer/article/view/17359

Katz, J. Sylvan; Martin, Ben R. (1997). “What is research collaboration?”. Research policy, v. 26, n. 1, pp. 1-18. https://users.sussex.ac.uk/~sylvank/pubs/Res_col9.pdf https://doi.org/10.1016/S0048-7333(96)00917-1

Kousha, Kayvan; Thelwall, Mike (2015). “Web indicators for research evaluation. Part 3: Books and non-standard outputs”. El profesional de la información, v. 24, n. 6, pp. 724-736. https://doi.org/10.3145/epi.2015.nov.04

Kuhn, Thomas S. (1971). La estructura de las revoluciones científicas. México: Fondo de Cultura Económica. ISBN: 978 84 375 0579 4

Martínez-Nicolás, Manuel (2006). “Masa (en situación) crítica. La investigación sobre periodismo en España: comunidad científica e intereses de conocimiento”. Anàlisi. Quaderns de comunicació i cultura, n. 33. http://www.raco.cat/index.php/Analisi/article/view/51745

Martínez-Nicolás, Manuel (2009). “La investigación sobre comunicación en España. Evolución histórica y retos actuales”. Revista latina de comunicación social, n. 64.

https://doi.org/d282rr

Martínez-Nicolás, Manuel (2014). “La investigación española sobre Comunicación de mayor visibilidad internacional.Análisis de los trabajos publicados en las revistas internacionales del Journal Citation Reports (JCR) y el SCImago Journal & Country Rank ( SJR-Scopus)”. En: IV Congreso intl de la Asociación Española de Investigación de la Comunicación (AE-IC). Inédita.

Masip, Pere (2011). “Efecto Aneca: producción española en comunicación en el Social science citation index”. Anuario ThinkEPI, v. 5, pp. 206-210. https://recyt.fecyt.es/index.php/ThinkEPI/article/view/30505

Orduña-Malea, Enrique; Martín-Martín, Alberto; Delgado- López-Cózar, Emilio (2017). “Google Scholar como una fuente de evaluación científica: una revisión bibliográfica sobre errores de la base de datos”. Revista española de documentación científica, v. 40, n. 4. https://doi.org/10.3989/redc.2017.4.1500

Paul-Hus, Adèle; Desrochers, Nadine; Costas, Rodrigo (2016). “Characterization, description, and considerations for the use of funding acknowledgement data in Web of Science”. Scientometrics, v. 108, n.1, pp. 108: 167.

https://doi.org/10.1007/s11192-016-1953-y

Perceval, José-María; Fornieles-Alcaraz, Javier (2008). “Confucio contra Sócrates: la perversa relación entre la investigación y la acreditación”. Anàlisi, v. 36, pp. 213-224. http://www.raco.cat/index.php/Analisi/article/view/94533

Piñeiro-Otero, Teresa (2017). “La investigación radiofónica española desde la perspectiva de su comunidad científica. Características, percepciones y valoraciones”. Revista española de documentación científica. v. 40, n. 4. https://doi.org/10.3989/redc.2017.4.1417

Piñeiro-Otero, Teresa; Martínez-Rolán, Xabier (2016). “De la reflexión al análisis cuantitativo. Una aproximación a la investigación radiofónica española”. En: Díaz-Nosty, Bernardo; De-Frutos, Ruth (coords.). Rumbos de la investigación en España sobre Comunicación. Actas del III Congreso nacional sobre metodología de la investigación en comunicación, pp. 719-796. AE-IC; Málaga, España. ISBN: 978 84 608 7053 1 http://www.mapcom.es/media/files/Rumbos_TMIC_AEIC.pdf

Reig, Ramón (2014). “La investigación dependiente: crítica estructural al sistema JCR”. Ámbitos, n. 27. http://institucional.us.es/ambitos/?p=1608

Repiso, Rafael; Torres-Salinas, Daniel; Delgado-López-Cózar, Emilio (2011). “Análisis de la investigación sobre radio en España: una aproximación a través del análisis bibliométrico y de redes sociales de las tesis doctorales defendidas en España entre 1976-2008”. Estudios sobre el mensaje periodístico, v. 17, n. 2, pp. 417-429. https://doi.org/10.5209/rev_ESMP.2011.v17.n2.38123

Rodríguez-Gómez, Eduardo-Francisco (2016). “Aportación científica de los congresos de la AE-IC (2008-2014): reseña histórica y estado actual de la investigación en Comunicación”. Historia y comunicación social, v. 21, n. 1, pp. 115-137.

https://doi.org/10.5209/rev_HICS.2016.v21.n1.52687

Soriano-Clemente, Jaume (2008). “El efecto Aneca”. En: Actas del congreso internacional fundacional AE-IC I+C Investigar la Comunicación. Santiago de Compostela: Asociación Española de Investigación de la Comunicación. ISBN: 978 84 612 3816 3

Thelwall, Mike; Kousha, Kayvan (2015a). “Web indicators for research evaluation. Part 1: Citations and links to academic articles from the Web”. El profesional de la información, v. 24, n. 5, pp. 587-606. https://doi.org/10.3145/epi.2015.sep.08

Thelwall, Mike; Kousha, Kayvan (2015b). “Web indicators for research evaluation. Part 2: Social media metrics”. El profesional de la información, v. 24, n. 5, pp. 607-620.

https://doi.org/10.3145/epi.2015.sep.09

Thelwall, Mike; Kousha, Kayvan; Dinsmore, Adam; Dolby, Kevin (2016). “Alternative metric indicators for funding scheme evaluations”. Aslib journal of information management, v. 68, n. 1, pp. 2-18. https://doi.org/10.1108/AJIM-09-2015-0146

Torres-Salinas, Daniel; Bordons, María; Giménez-Toledo, Elea; Delgado-López-Cózar, Emilio; Jiménez-Contreras, Evaristo; Sanz-Casado, Elías (2010). “Clasificación integrada de revistas científicas (CIRC): propuesta de categorización de las revistas en ciencias sociales y humanas”. El profesional de la información, v. 19, n. 6, pp. 675-683. https://doi.org/10.3145/epi.2010.nov.15

Zhao, Dangzhi (2010). “Characteristics and impact of grant-funded research: a case study of the library and information science field”. Scientometrics, v. 84, n. 2, pp. 293- 306.

https://doi.org/10.1007/s11192-010-0191-y


Downloads

Downloads per month over past year

Actions (login required)

View Item View Item
Contact us
Send email Sponsors
Sponsor: AIMS Sponsor: D&P Sponsor: UniNa CAB Get connected
Facebook Facebook Twitter Twitter Linkedin LinkedIn RSS RSS