investigación

Hacia una nueva cultura de la evaluación: experiencias institucionales en el marco de CoARA

Ángel Borrego
Facultad de Información y Medios Audiovisuales
Universidad de Barcelona (UB)

Lluís Anglada
Consorcio de Servicios Universitarios de Cataluña (CSUC)
ORCID Id 0000-0002-6384-4927


Reformant l’avaluació de la recerca per afavorir la qualitat i l’impacte científic: Experiències i tendències en el marc de CoARA. (2025). Barcelona: Instituto de Bioingeniería de Cataluña. 3 vídeos. Disponible en: <https://www.youtube.com/playlist list=PLztiU5moh1RPvMAmDVbuwW1fNq2zawSFF>. Presentaciones disponibles en <https://zenodo.org/communities/jornadacoaracatalunya/records>.


La Coalition for Advancing Research Assessment (CoARA) agrupa un amplio colectivo de organizaciones comprometidas con la reforma de los sistemas de evaluación de la investigación. Esta iniciativa surge en un contexto de creciente consenso sobre la necesidad de superar los modelos de evaluación basados principalmente en indicadores cuantitativos (como el factor de impacto o el número de publicaciones), con tal de impulsar una valoración más cualitativa, centrada en la diversidad de las contribuciones científicas y en prácticas responsables. Más de 700 organizaciones de investigación, entidades financiadoras, agencias de evaluación y sociedades científicas han adoptado los principios recogidos en el Agreement on Reforming Research Assessment (https://coara.eu/agreement/the-agreement-full-text/), publicado en julio de 2022.

El jueves 17 de julio de 2025, el Instituto de Bioingeniería de Cataluña (IBEC) acogió la jornada “Reformando la evaluación de la investigación para favorecer la calidad y el impacto científico: experiencias y tendencias en el marco de CoARA” (https://events.ibecbarcelona.eu/reformingresearchassessment), un espacio en el que diversas instituciones catalanas compartieron sus experiencias en la implementación de los principios de CoARA, con el objetivo de avanzar hacia un sistema de evaluación más justo e integral.

La actividad se estructuró en tres partes. La primera estuvo dedicada a la presentación de cinco proyectos financiados en el marco de la primera convocatoria del CoARA Cascade Funding Programme, un mecanismo de apoyo económico destinado a promover transformaciones institucionales en las prácticas de evaluación. Este programa contempla dos convocatorias (abril-junio de 2024 y febrero-abril de 2025) y subvenciona proyectos de un año en tres modalidades: intercambio de conocimiento (teaming projects), pruebas piloto (institutional pilot projects) y cambios institucionales (institutional change projects).

En esta sesión se presentaron los proyectos liderados por diferentes instituciones. La UOC se centró en consolidar la estrategia institucional de ciencia abierta; la Universitat Ramon Llull revisó sus prácticas de evaluación para identificar las dimensiones clave del nuevo paradigma (ampliación del concepto de investigación, inclusión de narrativas, transparencia, etc.); la UAB aplicó los criterios CoARA en una convocatoria interna de ayudas postdoctorales; el IBEC desarrolló un proyecto conjunto en colaboración con la Université de Carthage (Túnez); y el Centro de Regulación Genómica incorporó narrativas de impacto en sus procesos de evaluación. En general, todas las intervenciones coincidieron en la necesidad de sensibilizar al personal investigador, dada la falta de conocimiento o el escepticismo respecto a la propuesta de reforma. También se destacó la importancia de formar adecuadamente a las personas evaluadoras que deberán aplicar los nuevos criterios, así como la dificultad de hacer llegar estas iniciativas a todo el colectivo investigador, a menudo sobrecargado de tareas.

La segunda parte de la jornada puso el foco en el desarrollo de planes de acción institucionales. Se presentaron las estrategias de tres centros de investigación (ISGlobal, CREAF e IDIBAPS) y de dos universidades (UPC y UB). Los ponentes de los centros destacaron la necesidad de un compromiso institucional firme, con la implicación activa de las direcciones, para que los principios de CoARA se integren transversalmente en todas las políticas internas. También remarcaron la conveniencia de reconocer formalmente el trabajo de las personas evaluadoras. Las universidades, por su parte, señalaron la complejidad de aplicar criterios cualitativos en instituciones con gran diversidad disciplinaria, la necesidad de elaborar rúbricas específicas y la exigencia de disponer de tiempo para implementar los cambios de forma efectiva.

Finalmente, la mesa redonda de clausura ofreció una visión más amplia con la participación de agentes clave del sistema catalán de investigación. AQU Catalunya abordó la integración de los principios de CoARA en los procesos de acreditación. La Fundación "la Caixa" expresó su interés por el impacto social de la investigación que financian. La Institución CERCA, coordinadora de los 42 centros de investigación del sistema catalán, y la Agencia de Calidad y Evaluación Sanitarias de Cataluña (AQuAS), con responsabilidades de evaluación en el sistema de salud, también aportaron su perspectiva sobre la implementación del nuevo modelo de evaluación basado en evidencias y orientado a la mejora continua.

Si tuviéramos que destacar rasgos comunes entre las distintas experiencias expuestas en la jornada, podríamos señalar tres: en todos los casos, las instituciones adheridas a CoARA crean comités interdisciplinares para impulsar y hacer seguimiento de las acciones de reforma; también establecen planes de trabajo que identifican los momentos en que se aplican criterios de evaluación en algún proceso de la institución; y otorgan gran importancia a la difusión de los objetivos de la reforma, dado que no son compartidos de forma automática por todo el personal investigador más allá de los “convencidos”.

La jornada puso de manifiesto que la reforma de la evaluación de la investigación es una transformación compleja pero imprescindible para fomentar una ciencia más responsable, inclusiva y orientada al bien común. A pesar del interés creciente y la existencia de iniciativas inspiradoras, la implementación de los principios de CoARA exige tiempo, recursos y, sobre todo, un cambio cultural profundo dentro de las instituciones. El compromiso de los equipos directivos, la formación de las personas evaluadoras y la sensibilización del personal investigador emergen como condiciones clave para garantizar el éxito de esta transformación.

 

© Imagen inicial generada con inteligencia artificial (DALL·E, OpenAI).

Crónica de la jornada de Ciencia Ciudadana: el conocimiento no solo se comparte, sino que se construye colectivamente con y desde la sociedad

Candela Ollé 
Ciencias de la Información y la Comunicación - Universitat Oberta de Catalunya (UOC)

Aurora González-Teruel
Departamento de Historia de la Ciencia y Documentación - Universitat de València

Miembros del proyecto “Ciencia Abierta en España: la transición hacia un nuevo modelo de investigación”


Jornada de Ciencia abierta, ciencia ciudadana: impacto y beneficio social. Valencia: Universidad de Valencia. 4 vídeos. Disponible en: <https://www.youtube.com/watch?v=zgJqZRMsFFM&list=PLxHTIX0tYDtPDhEbeaoQG_quOLKhD5Qin>


El seminario “Ciencia abierta, ciencia ciudadana: impacto y beneficio social”, celebrado en la Universitat de València el pasado 6 de junio de 2025, se enmarca en el proyecto de investigación “Ciencia Abierta en España: la transición hacia un nuevo modelo de investigación”, financiado por el Ministerio de Ciencia, Innovación y Universidades (Proyecto de I+D+i PID2021-125828OB-I00 financiado por MICIU / AEI /10.13039/501100011033 y por FEDER, UE) y liderado desde la FIMA y los ECIC-UOC. La jornada reunió a académicos, gestores y representantes de instituciones públicas con el objetivo común de reflexionar sobre las transformaciones contemporáneas en la práctica científica, derivadas de los principios de apertura, participación e impacto social.

Pasado, presente y, sobre todo, futuro de la investigación: la calidad y la accesibilidad

Candela Ollé
Profesora de los Estudios de Ciencias de la Información y la Comunicación
Universitat Oberta de Catalunya (UOC)


Sharp, Phillip A.; Bonvillian, William B.; Desimone, Robert; Imperiali, Barbara; Karger, David R.; Mavhunga, Clapperton Chakanetsa; Brand, Amy; Lindsay, Nick; Stebbins, Michael (2024). Access to science and scholarship: key questions about the future of research publishing. Cambridge, MA: MIT. 58 p. Disponible en: <https://access-to-science.pubpub.org/>. [Consulta: 26/10/2024]. 

Sharp, Phillip A.; Bonvillian, William B.; Brand, Amy; Stebbins, Michael (2024). The future of open research policy should be evidence based. Proceedings of the National Academy of Sciences. Disponible en: <https://doi.org/10.1073/pnas.2412688121> (editorial). [Consulta: 26/10/2024].


Esta reseña combina el informe del MIT (Massachusetts Institute of Technology) y también la editorial que se deriva, publicada en el Proceedings of the National Academy of Sciences donde se afirma que «necesitamos urgentemente un enfoque científico para elaborar el futuro de la publicación de la investigación».

El informe del MIT se organiza en dos partes. La primera, Modelos de negocio en la edición de revistas: mirando atrás y adelante y, la segunda, Preguntas abiertas sobre el futuro de la edición académica en seis áreas clave donde se necesitan más investigaciones y datos. A su vez, los contenidos están ordenados en seis áreas generales: modelos de acceso y negocio; datos de investigación; publicación previa a la impresión; revisión por pares; costes para investigadores; y universidades e infraestructura.

Acceso abierto en un mundo global

Ángel Borrego
Facultat d’Informació i Mitjans Audiovisuals
Universitat de Barcelona (UB)


Pinfield, Stephen (2024). Achieving global open access: the need for scientific, epistemic and participatory openness. Abingdon; New York: Routledge. XI, 121 p. ISBN 9781032679259. Disponible en: <https://www.taylorfrancis.com/books/oa-mono/10.4324/9781032679259/>. [Consulta: 13/10/2024]. 


Durante las últimas décadas, se ha ensalzado el acceso abierto a la bibliografía científica como un bien global. La libre diseminación del conocimiento se percibe como una fuente de beneficios al acelerar el progreso científico y facilitar la actuación de profesionales y gestores públicos. Sin embargo, en los últimos años, el acceso abierto también ha sido objeto de crítica, y no siempre por parte de editoriales comerciales que veían peligrar su modelo de negocio, sino que en ocasiones los reproches proceden de algunos de sus supuestos beneficiarios.

Sobre la deseable formación de gestores de datos en el contexto de la ciencia abierta

Ángel M. Delgado-Vázquez
Jefe de Servicio de Soporte al Aprendizaje y la Investigación
Biblioteca/CRAI
Universidad Pablo de Olavide
ORCID: 0000-0003-2461-8553
@amdelvaz


Basalti, Chiara; Fazekas-Paragh, Judi; Forni, Monica; van Gelder, Celia; Hasani-Mavriqi, Illire; Janik, Joanna; Kalová, Tereza; Kuchma, Iryna; Lindroos, Hanna; Lütcke, Henry; Pinnick, Jaana; Raga, Núria; Thorpe, Deborah; Wildgaard, Lorna (2024). Recommendations for data stewardship skills, training and curricula with implementation examples from European countries and universities. Brussels: EOSC Association AISBL. Disponible en: <https://doi.org/10.5281/zenodo.10573892>. [Consulta: 16/07/24].   


Se trata de un informe elaborado por la EOSC Association Task Force «Data stewardship, curricula and career paths» que pretende ofrecer un panorama de cómo se está abordando la incorporación de gestores de datos dentro de los centros y equipos de investigación.

El informe parte de la base de la necesidad de contar con personal especializado en gestión de datos dentro de las diferentes unidades y centros de investigación.

Para ello, se hace un relato y síntesis de experiencias, tanto a nivel nacional, como a nivel institucional, con datos de 10 países y 7 universidades.

Páginas

Suscribirse a RSS - investigación