Factor de impacto de revistas: ¿amenaza u oportunidad?

Son muchas las críticas que está recibiendo la aplicación de los criterios de evaluación de la calidad de las publicaciones científicas en ciencias de la salud. Muchas de ellas han ido dirigidas a la utilización del factor impacto (FI) —indicador bibliométrico del Science Citation Index(SCI), base de datos del Institute for Scientific Information (ISI), hoy de la empresa Thomson Reuter— como criterio casi exclusivo para evaluar a investigadores determinando financiación de proyectos, acreditación para profesorado, etc.

Estas críticas consideran al FI un indicador obsoleto (1), manipulable (1, 2), representativo del culto a lo cuantificable, lastrado por la lentitud de los procesos editoriales (3), que no se hace cargo de la disparidad entre el impacto científico y la relevancia social o clínica de la investigación (2, 3, 4), ni es representativo de la calidad o el mérito de una publicación científica (5, 6, 7). Por el contrario, se denuncia que en la consideración de este indicador priman la competencia sobre la cooperación (5, 8) o el currículum del autor sobre la utilidad de su investigación (2, 8). Además, se opone a una investigación aplicable en la práctica clínica, por cuanto aleja la publicación de la investigación de su contexto de aplicabilidad (9, 10, 11) contribuyendo a un empobrecimiento del desarrollo profesional de la enfermería (12). Asimismo, se esgrimen razones de identidad lingüística, disciplinar y geográfica para clamar contra el FI (8, 13, 14) y poner en valor una alternativa mediante la configuración del llamado espacio científico iberoamericano (ECI) como un bloque documental y de gestión del conocimiento paralelo al anglosajón (13, 15). En ese contexto, las críticas alcanzan a los autores que tratan de abrirse espacio en el difícil y competitivo mundo del FI, presentándolos en torno a dos tendencias: una "identitaria" donde se sitúan las enfermeras que citan y publican en revistas del ECI; y otra "disgregadora" (13) donde, por exclusión, estarían quienes consultan fuentes externas y tratan de publicar también fuera del ECI. De manera más explícita se critica el pragmatismo y conformismo de buena parte de los investigadores y académicos afanados por publicar en revistas con FI en pro de los méritos curriculares frente a la utilidad del conocimiento, renunciando con ello al propio idioma, a las revistas cercanas disciplinar y geográficamente (8), y a que revierta sobre los ciudadanos el beneficio de una investigación financiada con sus impuestos (8, 16).

Sin detrimento de la razón que, en parte, les asiste, nos parece necesario señalar algunos aspectos ocultos bajo tal aluvión de críticas, esbozar las virtudes de un riguroso sistema de evaluación de la calidad de las publicaciones científicas, y apostar por no quedarnos al margen del vigente en tanto se disponga de otro más racional.

Objetividad y estímulo

Estamos en un entorno y una profesión donde tradicionalmente han primado los criterios subjetivos o, a lo sumo, la antigüedad frente a otros méritos curriculares o científicos como indicadores de la adecuación del perfil del candidato a un determinado puesto docente o asistencial. Con la consideración de otros méritos científicos se produce una laxitud en las buenas prácticas de autoría que, sin llegar al fraude (17), hizo necesaria la inclusión de indicadores de calidad de la producción científica frente al mero recuento de publicaciones (18). En ese sentido, se ha reconocido el valor de la bibliometría (15) y la objetividad del FI como indicador que cierra espacios a la arbitrariedad (19).

Por otra parte, existe una tendencia a emprender campañas de descrédito contra cualquier rankingpor parte de quienes no quedan bien situados en el mismo (20). Pero la apuesta de los gobiernos por mejorar la posición del sistema científico y la universidad ha conducido a la sobrevaloración del FI como criterio de excelencia de la investigación en ciencias de la salud. Y aunque la situación respecto de la investigación está mejorando y países como España o Brasil, que empiezan a ocupar la posición que les corresponde a nivel internacional (21, 22), no puede decirse lo mismo en áreas como la enfermería (23, 24, 25). Por ejemplo, en la universidad española los criterios de evaluación de la calidad investigadora y docente empiezan a tenerse en cuenta para la acreditación del profesorado universitario, con unos niveles de exigencia desconocidos hasta ahora. Y aunque persisten antiguos privilegios logrados, en algunos casos, con unos méritos que hoy no alcanzarían para acreditarse en la figura profesional más baja, conforta pensar que un sistema de evaluación de la calidad (aunque imperfecto) pueda acabar con ese estatus, siendo deseable su extensión a más ámbitos, como estímulo para la mejora de la gestión, la práctica asistencial, la docencia y la investigación en enfermería. En esa línea, será inevitable abordar cuestiones como el reclutamiento y la promoción de profesionales e investigadores con base en el mérito, la evaluación periódica, el reconocimiento del esfuerzo y la rendición de cuentas (22).

Sobre la dicotomía utilidad-impacto

El discurso sobre la incompatibilidad entre la utilidad de la investigación y el FI debe ser revisado, pues ambos pueden ser compatibles. Además, con la apuesta de un país por la internacionalización de su sistema científico no se traiciona a sus ciudadanos; pudiendo argumentarse que estos, a través de sus representantes políticos, deciden que es útil para la ciencia (también la enfermera) salir de su invisibilidad internacional, incorporándose a los circuitos del sistema científico global, utilizando como criterio para asignar los recursos que salen de sus impuestos precisamente los indicadores que apunten a que esta internacionalización se está produciendo (19).

Por otra parte, aunque existe consenso en las perversiones y limitaciones que encierra su uso inapropiado, el FI se ha convertido en un índice de calidad asentado en el reconocimiento de su valor por la comunidad científica (6, 26), cobrando fuerza la opinión de que no hay nada que por sí solo lo mejore, por lo que debe ser considerado como un buen recurso técnico para la evaluación (27). Así lo sugiere un estudio que encuentra una fuerte correlación entre la valoración que hacen los médicos sobre la calidad de las revistas y su factor de impacto, concluyendo que el FI puede ser un indicador razonable de calidad para las revistas generales de medicina (28). En otro estudio, realizado en cinco países (29), los investigadores enfermeros encuestados piensan que publicar en revistas internacionales aumenta el prestigio de sus instituciones, rechazando la dicotomía impacto-utilidad, dado que la investigación puede tener implicaciones globales incluso si se hace a nivel local. Las políticas basadas en la consideración del FI como estímulo para la internacionalización del sistema científico han dado resultados positivos para la enfermería en los países que las adoptaron, mejorando la formación de posgrado (29), y aumentando el rigor teórico y metodológico de los trabajos publicados sin detrimento de su utilidad e interés local (23, 29).

Sobre la identidad y el idioma

Aun aceptando la presencia del ECI (30) en enfermería, también niega lo evidente quien no reconozca la existencia de una comunidad científica global que lo incluye, rebasándolo. Por ello, el debate sobre la identidad no debe plantearse en términos excluyentes, pues somos tan enfermeros como los enfermeros japoneses o australianos; tan latinos como los brasileños o italianos; tan sanitarios como los fisioterapeutas o médicos y, muchos a la vez, enfermeros y antropólogos o psicólogos. Por ello, no supondría renuncia alguna publicar en revistas de esas disciplinas o países, máxime cuando algunas de ellas se editan también en español y todas se difunden globalmente.

Innegablemente, es una barrera añadida el dominio hegemónico del idioma inglés (1, 10, 25), y oponerse a ello ha sido comparado con pedir que vuelva el latín como idioma de la comunidad científica mundial (31). Pero tal vez la solución sea intermedia y ya empieza a vislumbrarse al existir una tímida ruptura del monopolio norteamericano y del idioma inglés en el JCR, tal y como se comprueba en la tabla 1 elaborada con la consulta de la ficha de cada revista de enfermería del JCR Science Edition y sus normas de publicación. Resultaba llamativo que de las pocas revistas de enfermería no anglosajonas del JCR, ninguna fuera del área hispanohablante hasta la feliz incorporación de la revista Aquichan, lo que debería hacernos reflexionar para sacarnos del lamento y la autocompasión, poniéndonos a trabajar para consolidar y aumentar la presencia del español en el JCR.

Estamos de acuerdo en reclamar la diversificación de los índices bibliométricos para evaluar la calidad, reconociendo la existencia y validez de los elaborados por otras empresas, instituciones y fundaciones (8, 14, 32), con la consideración de otros medios de difusión de la información científica, como libros (7) o publicaciones abiertas (16, 21). Pero esto no nos puede hacer olvidar que, pese a su imperfección, el FI seguirá vigente (1, 33), siendo hoy imprescindible para evaluar la producción científica (19, 27). En esa línea se hace precisa una labor de análisis y propuestas de aumento de la financiación y mejora de la calidad de la investigación, que fue acometida hace años por otras disciplinas (34) o la propia enfermería en países como Brasil (25, 32).

Aceptar el reto

Se ha denunciado que la consideración del FI como criterio principal para la acreditación del profesorado universitario deja en desventaja a la enfermería (3, 10, 12), pero no es algo que afecte exclusivamente esta disciplina y, probablemente, no existan suficientes investigadores nacionales preparados para cubrir las plazas necesarias en varias áreas de conocimiento de la universidad (20). Pero parece que la apuesta no irá por relajar los criterios de evaluación, sino por contratar investigadores preparados, aunque sean extranjeros, para que actúen de células dinamizadoras en los centros donde se incorporen (20). Tal posibilidad ya se recoge en la figura de "Investigador distinguido" de la nueva Ley española de la Ciencia (21).

Con todo ello, las modificaciones de los criterios que se propongan han de ser para todas las ciencias de la salud, sin excepciones o discriminaciones positivas para la enfermería (4). En España reclamábamos desde antiguo la igualdad de estatus con otras ciencias, y hemos tropezado con los duros criterios de acreditación para todas las de la salud. Las mencionadas condiciones de desventaja nos obligan a trabajar más, haciendo un esfuerzo que nos saque del ostracismo científico, diseñando estrategias que nos ayuden, estudiando y emulando lo que otros hicieron. En contra de lo que algunos denuncian (8), no ha de movernos nuestro currículum sino un objetivo más ambicioso: situar a la enfermería en español al nivel de la comunidad científica global; misión de largo alcance que corresponde emprender a la actual generación pero que se verá cumplida en las venideras.

Contamos con fortalezas entre las que cabe destacar: la proximidad al campo de las enfermeras asistenciales (deseada por otras disciplinas que no trabajan tan estrechamente con los pacientes), el desarrollo de la enfermería avanzada (un salto en el nivel asistencial que debería verse reflejado en el investigador), y jóvenes egresados con más tiempo y mejor preparación (dominio del inglés, de las TIC y de la metodología de la investigación). A ello se añade la potencialidad de las universidades, con programas de máster y doctorado, personal investigador y financiación para la investigación. Si se vence el recelo entre el ámbito asistencial y el universitario, capaz de dilapidar ese potencial (35), y se promueve una alianza estratégica entre profesionales universitarios y asistenciales, operaría una sinergia capaz de hacernos competitivos a nivel interdisciplinar e internacional.

Romper el monopolio

Como han advertido varios autores (7, 8, 11), ante la importancia que adquiere el FI en la evaluación de la actividad investigadora, en primer lugar tendemos a publicar nuestros artículos en revistas con impacto, con lo que las publicaciones de enfermería no incluidas corren el riesgo de quedar relegadas. Pero, sin renunciar a publicar nuestras investigaciones en las revistas de mayor impacto, cabe desarrollar una doble estrategia: publicar en ambas (con y sin FI) esforzándose por incluir y mantener en el JCR a las revistas de enfermería en español mejor situadas para ello. No todo ha de ir a revistas con FI, pero sí aquello más general, menos local y con mayor proyección o interés internacional; sin olvidar la publicación de artículos de calidad en las otras revistas para no cerrarnos definitivamente la puerta y poder romper el círculo vicioso.

Para entrar y mantenerse en el JCR conviene saber cómo funciona, observando las estrategias desarrolladas por quienes nos precedieron y adoptando aquellas que sigan vigentes (26). Publicamos poco en revistas de enfermería con FI (23, 24, 25), con menos citas que los investigadores de otros países, de las que casi ninguna es en español (36). Sin embargo, las citas clásicas u obligadas, las autocitas y las citas selectivas aumentan la probabilidad de publicación e inciden en la base de cálculo del FI (2). Por ello, para romper el oligopolio existente, han de incluirse las revistas de enfermería en español entre esas estrategias de citación. Así se reclamó en su momento, con similar éxito, desde la comunidad enfermera lusoparlante (6) o la comunidad médica española (37).

Cabe escoger selectivamente algunas citas de las revistas que ya están incluidas y las mejor situadas para entrar en el JCR, es decir, aquellas que estén indexadas en más bases bibliográficas internacionales, pues ya gozarán de una buena visibilidad de partida; aquellas que publiquen, al menos, el abstract en inglés, que sean puntuales en su edición, y que estén mejor situadas en otros índices bibliométricos. Citar artículos originales, especiales y de revisión, publicados el último año y el año en curso, pues el FI se calcula sobre los artículos citados que estén escritos en los dos años anteriores. Por ejemplo, si un artículo publicado en 2011 en una revista del SCI cita tres trabajos de Aquichán fechados en 2005, 2008 y 2009, solo este último estaría contribuyendo a mantener la revista en el SCI y a aumentar su impacto. Aunque el tiempo de edición puede superar los dos años, siempre se puede actualizar alguna cita bibliográfica, si es pertinente, durante el proceso de revisión (37).

Formación y cooperación

La necesidad de formación en investigación de los profesionales de la salud, particularmente de enfermería, ha sido señalada en varios estudios tanto españoles (38, 39) como internacionales (25, 40, 41). Por tanto, deberíamos formarnos y colaborar con otras áreas —en equipos multidisciplinares o institutos de investigación— que nos hagan más competitivos en las convocatorias públicas (42), bien recurriendo, según lo requiera la naturaleza de nuestra investigación, a coautores estadísticos, epidemiólogos, anglohablantes o expertos en análisis cualitativo, por citar algún ejemplo. Esto dejará menos margen al intercambio de autorías o favores (17), pero aumentará las posibilidades de éxito (23) contribuyendo a la consolidación de disciplinas emergentes (43) y a la formación de recursos humanos (29, 43). También es preciso incentivar a los alumnos y jóvenes egresados para el desarrollo de actividades de investigación, integrando a los mejores en los grupos de investigación establecidos (6).

Optimizar esfuerzos

Ya en las primeras décadas del siglo XX advertía James Catell que "quien dedica menos de la mitad de su semana laboral a la investigación porque se ve obligado a dedicar más de la mitad de la misma a la enseñanza, con razón puede llamarse aficionado" (31). La polémica frase encierra un mensaje vigente, al menos respecto del tiempo dedicado a la formación de posgrado: contemplamos con optimismo los nuevos programas de máster y doctorado para enfermería, que siempre levantaron grandes expectativas donde se instauraron (44, 45, 46), con la esperanza de que bastarán para sacarnos del limbo de la investigación; pero no es así. Si bien la competencia investigadora debe desarrollarse en los estudios de posgrado (47), esta no queda demostrada con la tesis de maestría o doctorado, sino con la incorporación del doctorando a la comunidad científica, es decir, publicando los resultados de sus investigaciones. Si del trabajo de investigación con el que un doctorando ha convencido a un tribunal de que posee la competencia investigadora no sale una publicación de impacto podemos considerar, parafraseando a Catell, que doctorando y directores "son aficionados"; o, en otros términos, que no han optimizado su esfuerzo. Así lo entendieron en algunos países donde exigen que sus estudiantes hayan publicado en revistas para obtener su doctorado (27, 48), pues es en el proceso editorial donde, considerando el mérito de las investigaciones, se produce un diálogo ético-científico entre actores cualificados (autores, revisores, editores) en el que los evaluadores actúan de "certificadores" de la competencia investigadora (49).

Los editores son quienes mejor conocen el funcionamiento de las bases de datos y los cálculos del FI, por lo que sería pretencioso darles aquí consejos. Pero sí se aprecia que la inclusión de una revista en el JCR pasa por una apuesta editorial (19, 37, 50, 51,52), por lo que cabe pedirles que, desde el compromiso ético y social que les caracteriza (49), adopten esfuerzos para la mejora de la calidad, la indexación de sus revistas en bases de datos nacionales e internacionales (6, 19), la adopción del sistema de revisión por pares, etc.; siendo deseable tanto la sana competencia como una colaboración entre ellos (8, 52), pero orientada a introducir sus revistas en el JCR (52) y no a sobrevivir al margen (8). En esa línea, la exitosa estrategia que se aprecia en las publicaciones latinoamericanas, con numerosas revistas que admiten y publican artículos en cualquiera de los dos idiomas oriundos (español y portugués) junto al inglés, no se produce en la Península Ibérica ni en el resto de Europa, donde las publicaciones de cada país guardan con celo su identidad y se pliegan al inglés como único idioma común además del propio.

Es cierto que los criterios de evaluación de la actividad investigadora en ciencias de la salud son potencialmente perniciosos si conceden exclusividad al FI como criterio de calidad. Apostamos por una diversificación de indicadores, sin que ello conduzca a la enfermería a una segunda vía, más relajada; sino que, como ciencia de la salud, debemos compartir criterios con el resto de disciplinas científicas del área.

Hechas las críticas y denuncias, es el momento de apostar por jugar la partida en un escenario global; hacer investigación de calidad, publicarla en revistas de impacto citando las revistas latinas (en español y portugués) con vocación internacional; superar viejos recelos para identificar y aprovechar las sinergias favorables (asistencial-universidad, enfermería-resto de disciplinas científicas), y optimizar esfuerzos y recursos. De ese modo se podrá, no ya alcanzar el equilibrio con el gigante norteamericano (53) o con el idioma inglés, pero sí al menos aumentar la visibilidad de la producción científica de la enfermería en español.