Vamos con el tercer ítem de la matriz de evaluación de #sexenios, en lo referido a impacto científico, y con el tercer hilo de la serie. Los anteriores están disponibles en y
En este caso vamos a ver cómo justificar, cuando sea preciso y hasta donde lo sea, la calidad editorial del medio de difusión (revista, editorial) o el reconocimiento, en el caso de aportaciones que no sean publicaciones
Esto es algo que ya se venía haciendo, sobre todo en los campos de Ciencias Sociales y Humanidades. En los campos que usaban intensivamente el JCR, pues se daba por hecho que la mera presencia en WoS ya avalaba la calidad del medio (y esto va a seguir pasando)
Como puede intuirse va de eso, de demostrar la calidad editorial del medio a partir de un tercero que la avala mediante la evaluación de este para la inclusión en repertorios prestigiosos.
En román paladino, que en qué listados está la revista o qué sellos de calidad tiene la editorial.
Esto tampoco hay que hacerlo siempre, puesto que, si ya sabes que la revista, por ejemplo, está en la WoS o en Scopus, sinceramente, ni sigas leyendo.
Como lo que se trata es de no invertir en esto más del tiempo necesario, habitualmente recomendamos, para revistas, es pasarse por @Miar_UB que ofrece información muy valiosa. En la ficha de la revista, para este criterio, hay que fijarse en lo marcado en rojo:
Se trata de listados que requieren, para su inclusión, que las revistas pasen una escrupulosa revisión de sus métodos editoriales, que es justo lo que se busca aquí. ¿Hay otras?
Claro, pero estas son las más habituales en revistas españolas o en revistas usadas por españoles, sobre todo en Ciencias Sociales y Humanidades y en aquellas áreas con menor presencia en listados con los de WoS o Scopus.
Por si hay algún suspicaz en la sala, la evaluación de la @FECYT_Ciencia es como mínimo, tan dura con la de WoS y Scopus.
Por experiencia, si está esa info en MIAR no hay ni que visitar la fuente primaria. Habríamos acabado con esto. Pero ¿y si mi revista no está en ninguno de estos listados? ¿se puede hacer algo?
Claro, la Resolución de 5 de diciembre de 2023, de la CNEAI con los criterios con un anexo en el que se explicitan los criterios que han de cumplir los medios. Si eres capaz de justificarlo, o hay algún instrumento de evaluación que lo haga, puede usarlo. boe.es/boe/dias/2023/…
Se me ocurren que listados como el de ANVUR o CAPES podrían ayudar, aunque hay criterios que no están incluidos en sus evaluaciones.
Vale, ya tenemos las revistas, vamos con los libros (y los capítulos incluidos en ellos, que también pueden ser aportación). En la línea de lo que ocurre con las revistas, lo que se busca son evaluaciones de la calidad editorial, y eso es justo lo que hace CEA-APQ.
Hay una edición para colecciones editoriales y otra para monografías sueltas:
Otra de las iniciativas en marcha para validar la calidad de la edición en el caso de los libros es el Directory of Open Access Books (DOAB) que contiene + de 76.000 libros de editoriales en las que se ha comprobado el peer review.
📷
Además, con el programa PRISM, avalan la revisión por pares en títulos concretos
Hay otras iniciativas de evaluación de monografías y volúmenes editados. Por ej., para su inclusión en WoS o Scopus también son evaluadas. Que el documento esté ahí ya es un indicio, que habitualmente los trabajos publicados en esas editoriales se indexen en ellas, también.
Hablando de libros otra cosa importante, no solo estaríamos hablando del prestigio de la editorial, también de la de la colección, llegado el caso. Se podría hablar de elementos como quién la dirige, quién forma parte del comité editorial, quién más ha publicado en ella...
Respecto de otras aportaciones, se dice que se valorará el reconocimiento que hayan recibido. ¿De qué estamos hablando? Pensemos por ejemplo en las obras artísticas y en los premios que hayan podido recibir, incluso en determinados contextos, la mera nominación ya podría servir
Pensemos por ejemplo en los encargos, en las subvenciones, que quien lo otorgue sea una organización de prestigio, que tampoco se lo den a cualquiera.
• • •
Missing some Tweet in this thread? You can try to
force a refresh
Informa @acabezas, que estos días lo tenemos en #ResearchSupportUPO hablando de CVs narrativos, que el @ERC_Research ha hecho público un documento en el que explica los cambios que llevará a cabo en su modelo de evaluación de la investigación
La motivación es clara: sumarse al movimiento europeo (y global) que apuesta por un cambio profundo en cómo se está llevando a cabo la evaluación y que lidera @CoARAssessment y @DORAssessment
Incorporan dos cuestiones muy interesantes: de un lado la posibilidad de incluir en el cv outputs de investigación más allá de los papers, esto es, pueden ser incluidos y valorados items como datasets, software, código…
El baremo general de @ANECAinfo para #sexenios presenta un apartado dedicado al impacto social, que es una de las grandes novedades. Se busca medir la acogida por parte de agentes externos a la ciencia de los avances y desarrollos científicos. @bibupo @pablodeolavide
Antes de seguir leyendo respondemos a la pregunta que muchos se hacen: ¿es obligatorio demostrar que mi aportación tiene impacto social? NO, DE NINGUNA MANERA. Si lo tiene, bien, si no lo tiene, bien también.
En él, el primer epígrafe es el dedicado al uso y lectura de la aportación en plataformas no académicas. Este es un dato un poco complicado de obtener, en la medida en que no hay plataformas que se dediquen a recolectar esta métrica de manera sistemática.
Para acabar con el apartado “presenta impacto científico” de #sexenios, el baremo general de @ANECAinfo incluye un aparte para “Otros indicios: Proyectos financiados vinculados, tesis doctorales vinculadas, estándares de ética, premios, traducciones, reseñas, etc.”
En el caso de los proyectos financiados vinculados o las tesis doctorales, es la típica información que siempre hemos recomendado incluir en el campo resumen (la 1a cajita de 4.000 caracteres), o bien en el campo otros datos. Lo mismo podríamos decir en el caso de los premios.
Traducciones y reseñas sí van incluidas en la cajita de indicios de calidad. Si no controlas las reseñas recibidas por los libros en los que has participado, puedes usar la búsqueda en Dialnet, en la herramienta de búsqueda de tu biblioteca, o en motores como #GoogleScholar.
5º hilo relacionado con la defensa del bloque “presenta impacto científico” en las aportaciones presentadas a la convocatoria de #sexenios. En este caso dedicado al impacto científico del medio de difusión,
o lo que es lo mismo, lo que habitualmente se venía defendiendo casi en exclusiva en esta convocatoria. . Así que esto ya nos lo sabemos, pero lo vamos a repasar.
Como recordaréis, aquí lo que hay que hablar es de la posición del medio en listados ordenados según el impacto, medido en indicadores basados en citas. ¿Cuáles serían estos listados?
Vamos con el cuarto hilo sobre #sexenios, este dedicado a la internacionalización del medio de difusión.
¿Qué se va buscando aquí? Que las aportaciones hayan sido publicadas en medios de difusión presentes en repertorios internacionales, que publiquen frecuentemente en él autores de distintos países, que en el equipo editorial (en sentido amplio) haya diversidad geográfica…
Este criterio, y el hilo, de alguna manera es, por tanto, complementario al anterior. Hay que dejar claro desde el principio que no es de aplicación ni en todas las áreas ni en todos los casos, ya que aplica directamente el punto 4 de los criterios generales de la convocatoria
Este segundo hilo es una continuación del de ayer, en el que explicábamos cómo localizar y dar valor a las citas e indicadores basados en ellas. En este caso vamos a dar algunas ideas de cómo obtener datos y darles valor respecto del uso y lectura de la aportación.
Ambos hilos, y los que vengan detrás, tratan de dar respuesta a la matriz de evaluación publicada por @ANECAinfo en los pasados días y que ha de servir como baremo general para los comités de evaluación de los distintos campos.
En el caso de las métricas de uso y lectura, es una información complementaria, y en determinados casos, sustitutoria de la que se aporta sobre citas (por ausencia o escasez de estas por reciente publicación, por ejemplo).