EDITORIALES
CUIDEN Citación y la valoración de las publicaciones científicas enfermeras
ALBERTO GÁLVEZ TORO, MANUEL AMEZCUA, CÉSAR HUESO MONTORO
Grupo de Estudios Documentales. Fundación Index, Granada, España
Dirección para correspondencia: indexcd@interbook.net
]]> Evaluar el peso de las publicaciones científicas es una tarea tan compleja como preocupante. A efectos de baremación de méritos curriculares (bolsas de empleo, promoción profesional, selección académica, becas y subvenciones de investigación, etc) se suelen utilizar criterios para determinar el valor que debe otorgarse a las publicaciones como indicador de la capacidad investigadora del profesional, sin embargo no existe una normativa concreta y uniforme que lo regule. Es más, la ambigüedad y disparidad de criterios ha venido estimulando una cierta picaresca curricular que ha tenido como objeto procurarse los mayores méritos en el menor tiempo posible (publicaciones fraccionadas, intercambio de autorías, artículos intrascendentes, etc).1 Recientemente se han levantado algunas voces contra los sistemas tradicionales de valoración “al peso” de las publicaciones, que no habían hecho más que aumentar el ruido y contaminar el acervo científico con productos mediocres e inútiles, alertando sobre la necesidad de combinar indicadores cuantitativos y cualitativos que hagan más ecuánime la valoración.2
Sin duda ha supuesto un gran avance el que los centros evaluadores hayan incorporado los indicadores bibliométricos de impacto y repercusión como criterios a considerar. Por supuesto que no resuelven el problema, ya que estos criterios dicen poco si no se acompañan de procesos más cualitativos que determinen la calidad intrínseca de las contribuciones en base a su pertinencia, su rigor y su utilidad.3 Pero hoy es ya incuestionable el efecto positivo que ha producido la bibliometría, especialmente en contextos diferentes a los hegemónicos, donde ha ocasionado una productiva reflexión entre los investigadores sobre la necesidad de superar su tradicional aislamiento. El problema surge cuando una reacción de naturaleza positiva (la de compartir conocimiento con otros contextos culturales) produce un efecto perverso, como es la adscripción radical a productos extraños en detrimento de los propios. Esto es lo que ha ocurrido cuando determinadas agencias evaluadoras han adoptado como sistema único de evaluación bibliográfica el Factor Impacto (FI) del Science Citation Index (SCI), base de datos del Institute for Scientific Information (ISI) de Filadelfia (Estados Unidos), probablemente muy útil para analizar la producción científica más visible internacionalmente, pero totalmente inútil para conocer el comportamiento de la producción científica de interés local,4 especialmente de la que se publica en revistas que escapan a su cobertura, con un marcado acento anglosajón.5 Para entender esto, baste decir que siguiendo la lógica del SCI, a sólo efectos curriculares, un investigador enfermero español debería preferir publicar en una revista médica inglesa con impacto reconocible que en la revista enfermera española con mayor circulación.
Si partimos ya del limitante de que los indicadores bibliométricos no están diseñados para evaluar los artículos en particular, si no a clasificar las revistas en los que éstos se publican, cuando además se adopta una fuente única de clasificación (SCI), el efecto que produce es que una parte importante de la producción científica deja de existir formalmente, y entre ella los artículos publicados en revistas de enfermería iberoamericanas, que sistemáticamente quedan excluidas del SCI. Debe constituir un gran negocio esto de delimitar estrechamente el espacio científico ortodoxo (literatura biomédica anglosajona) puesto que la Fundación Index recibió hace varios años un requerimiento del Institute for Scientific Information para que retirase de su página web los indicadores bibliométricos que viene publicando desde el año 1993 referidos a la repercusión de las revistas de enfermería de Iberoamérica. Estos indicadores, agrupados hoy en la base de datos CUIDEN citación, vienen a amortiguar en parte el efecto excluyente de otras fuentes como el SCI.
De manera incomprensible todavía hay agencias gubernamentales en países iberoamericanos que continúan adoptando el SCI como fuente única para la evaluación del conocimiento, lo que les obliga a invisibilizar y desacreditar el conocimiento propio. No es el caso de la Agencia de Calidad, Acreditación y Prospectiva de las Universidades de Madrid, que establece que la evaluación de la producción académica y científica y su difusión6 se realice a través del índice de impacto en aquellas revistas en las que se conozca y se haya calculado, lo que posibilita la utilización de otras fuentes además del SCI. De manera más concreta, la Dirección General de Personal y Desarrollo Profesional del Servicio Andaluz de Salud, establece en su recién aprobado sistema de selección de personal (Resolución de 18 de octubre de 2005) que los indicadores de impacto de CUIDEN Citación serán utilizados para la asignación de méritos de carácter científico a profesionales del grupo B (enfermería, fisioterapia, trabajo social, terapia ocupacional, etc).7 Eso significa que al menos las enfermeras andaluzas son reconocidas por publicar sus artículos en revistas enfermeras con impacto en su ámbito territorial y por tanto no tendrán que emigrar si no quieren hacia otras disciplinas y latitudes.
CUIDEN citación es una de las bases de datos del entorno virtual de gestión del conocimiento de la Fundación Index.8 Contiene una selección de los principales indicadores bibliométricos de impacto y repercusión, actividad y consumo de información de la Enfermería del área ligüística del español y del portugués. Entre los indicadores que incluye destaca el Índice de Impacto denominado Repercusión Inmediata, que está siendo incorporado actualmente por agencias de evaluación externas para la baremación de la producción científica de candidatos a puestos docentes y clínicos.
La información que contiene CUIDEN citación procede de los estudios bibliométricos que el Grupo de Estudios Documentales de la Fundación Index viene realizando desde hace más de una década. Estos estudios se basan en el análisis de las citas bibliográficas referenciadas en un conjunto de revistas seleccionadas, que llamaremos revistas fuente, de entre el conjunto de revistas de enfermería indexadas en CUIDEN. El análisis de las referencias consiste en la revisión de todas las citas y en la selección de aquéllas que pertenecen a revistas de enfermería. De esto resulta un índice de revistas de enfermería citadas por las revistas fuente. Se trata del conjunto de revistas consumidas por los autores que han publicado en las revistas fuente para la fundamentación y redacción de sus trabajos. Por tanto, de las revistas visibles que, a la postre, terminan definiendo el conjunto de revistas citadas de entre todas las citables.
La selección de las revistas fuente de las que obtener las citas bibliográficas se hace aplicando los siguientes criterios: que estén incluidas en la base de datos CUIDEN, que tengan una Repercusión Inmediata distinta de cero en estudios anteriores, que tengan tres o más citas en análisis anteriores al año de estudio, que sean revistas emergentes con más de dos citas en el análisis del año en curso, y que cumpliendo o no con los requisitos anteriores fueran revistas fuente en análisis previos.
CUIDEN Citación contiene cuatro opciones de búsqueda mediante las cuales se pueden localizar los indicadores bibliométricos de las revistas de enfermería citadas por el conjunto de revistas fuente seleccionadas:
-Repercusion Inmediata. Esta opción permite localizar el valor del principal índice de impacto, la Repercusión Inmediata de las revistas fuente. Además proporciona información adicional, el índice de inmediatez, que es el indicador que resulta de dividir el número de citas que recibe una revista en el año de estudio dividido entre el número de artículos publicados ese mismo año. Permite conocer la precocidad con la que los artículos publicados son citados.
-Repercusión Histórica. Es el grado en que una revista es citada por unidad de producción -artículo nuevo publicado-. Informa del peso y del nivel de consumo de una revista en una comunidad científica. Se calcula dividiendo el número total de citas que recibe una revista fuente entre el número de artículos publicados en el año de análisis.
]]> -Repercusión Histórica sin Autocitas. Es el grado en que una revista es citada por el resto de revistas Fuente por unidad de producción -artículo nuevo publicado-. Permite conocer la Repercusión Histórica de una revista eliminando el efecto de las autocitas. Informa del peso y del nivel de consumo de una revista en una comunidad científica, pero eliminando el sesgo asociado a las autocitas, pues sabemos que, en términos generales, cada revista tiende a citarse a sí misma antes que a las demás. Se calcula dividiendo el número total de citas (restándole las autocitas) que recibe una revista fuente entre el número de artículos publicados en el año de análisis. Esté menú de búsqueda ofrece información adicional sobre el número de autocitas y el porcentaje de autocitas de cada revista fuente.-Índice de revistas citadas. Se trata de un menú de búsqueda que permite localizar todas las revistas de enfermería citadas por las revistas fuente, sean o no del área ligüística del español y del portugués. En ella se listan varios cientos de títulos de revistas de enfermería de más de una quincena de países.
CUIDEN citación es, por tanto, un instrumento que permite medir el impacto de las revistas de enfermería del área ligüística del español y del portugués, su visibilidad y su consumo. Recoge miles de citas de revistas de enfermería y define a un conjunto de revistas visibles frente a aquellas que no lo son.8,9 No aparecer en los índices de citas de CUIDEN citación significa que la revista en cuestión no existe, es decir, que del conjunto de revistas citables –que se publican en ésta área ligüística y disciplinar-, los autores sólo citan algunas de ellas. En el Catálogo de Publicaciones Periódicas –REHIC- de la Fundación Index, hay indexadas 227 revistas de enfermería. De éstas, que serían la mayoría de revistas de enfermería citables, únicamente una cuarta parte son citadas, y sólo el 14% cumplen los requisitos para ser consideradas revistas fuente. Las revistas invisibles, además, coinciden con aquellas que prestan poco interés por su difusión, cuyas colecciones están incompletas y desactualizadas en CUIDEN. La relación entre el impacto de una revista de enfermería y su indexación en CUIDEN es un hecho demostrado.10 La cita a una publicación periódica está relacionada con la accesibilidad a su producción científica. La accesibilidad en nuestro medio estaría determinada por su indexación en los fondos documentales y bases de datos que normalmente consultan los usuarios potenciales de una disciplina. En este caso, una inadecuada indexación en CUIDEN, medio habitual de consulta bibliográfica de las enfermeras, supondría una pérdida de oportunidad para su consumo y citación, incluso aunque la revista fuera gratuita y tuviera libre acceso electrónico.
Autores y agencias de evaluación deben ser conscientes de que no es suficiente con publicar un artículo para que sea visible, sino que hace falta publicarlo en una revista concreta para que sea leído y citado posteriormente. En la enfermería del área ligüística del español y del portugués conocemos cuáles son esas revistas gracias a CUIDEN citación.
Bibliografía
1. [Sin autor especificado] Publicación simultánea, publicación fragmentada (o 'salami') y publicación duplicada, problemas a evitar por el bien de todos. Rev ROL Enferm 1994; XVII(191-192):9 [ Links ]
2. Figueredo Gaspari E. Valoración curricular de las publicaciones científicas Med clínica 2005; 125(17):661-665 [ Links ]
3. Camí J. Impactolatría: diagnóstico y tratamiento. Medicina Clínica 1997;109(13):515-524. [ Links ]
4. Bordons M, Zulueta MA. Evaluación de la actividad científica a través de indicadores bibliométricos. Rev Esp Cardiol 1999; 52: 790-800. [ Links ]
5. Gálvez Toro A, Amezcua M, Hueso Montoro C. El autor evaluado: impacto de las publicaciones periódicas. Evidentia 2006 mar-abr; 3(8). En: http://www.index-f.com/evidentia/n8/217articulo.php [Consultado el 5-03-2006]. [ Links ]
6. RESOLUCIÓN de 29 de noviembre de 2005, del Presidente de la Agencia de Calidad, Acreditación y Prospectiva de las Universidades de Madrid, por la que se aprueba la convocatoria de evaluación o informe positivo para la contratación como profesor universitario por las universidades de Madrid y se abre el plazo de presentación de solicitudes BOCM nº 307 de 26 de diciembre de 2005. [ Links ]
7. RESOLUCION de 18 de octubre de 2005, de la Dirección General de Personal y Desarrollo Profesional del Servicio Andaluz de Salud, por la que se dispone la publicación del Pacto de Mesa Sectorial de Sanidad suscrito entre la Administración Sanitaria de Andalucía- SAS y las organizaciones sindicales CEMSATSE, CC.OO., UGT y CSI-CSIF, sobre sistema de selección de personal estatutario temporal para puestos básicos en el Servicio Andaluz de Salud. BOJA nº 211 de octubre de 2005. Pp. 37-61. [ Links ]
8. Gálvez Toro A, Hueso Montoro C, Amezcua M. Indicadores CUIDEN de repercusión de las revistas de enfermería del área lingüística del español y del portugués. Index Enferm 2004; 46:76-80. [ Links ]
9. Gálvez Toro A, Hueso Montoro C y Amezcua M. Consumo de Información de las revistas de enfermería del área lingüística del español y del portugués (año 2002). Desarrollo Científico de Enfermería, 2004, 12(3):69-76. [ Links ]
10. Gálvez Toro A. Un modelo explicativo de la pauta de citación de las revistas españolas de enfermería. Enfermería Clínica, 2002; 12(5):210-216. [ Links ] ]]>