Type a search term to find related articles by LIMS subject matter experts gathered from the most trusted and dynamic collaboration tools in the laboratory informatics industry.
La revisión académica por pares (también conocida como arbitraje) es el proceso de someter el trabajo académico, la investigación o las ideas de un autor al escrutinio de otros expertos en el mismo campo, antes de que se publique un artículo que describe este trabajo en una revista, actas de conferencias o como un libro. La revisión por pares ayuda al editor (es decir, al editor en jefe, al consejo editorial o al comité del programa) a decidir si el trabajo debe ser aceptado, considerado aceptable con revisiones o rechazado.
La revisión por pares requiere una comunidad de expertos en un campo determinado (y a menudo estrechamente definido), que estén calificados y puedan realizar una revisión razonablemente imparcial. La revisión por pares generalmente se considera necesaria para la calidad académica y se utiliza en la mayoría de las principales publicaciones académicas, pero de ninguna manera impide la publicación de investigaciones no válidas.[1] Se han asimismo identificado debilidades en las prácticas comunes de revisión por pares, lo que lleva a los críticos a argumentar en favor de reformas.
Se han propuesto varios sistemas alternativos de revisión por pares para abordar problemas conocidos en el proceso de arbitraje.[2][3] Tradicionalmente, los revisores pares han sido anónimos, pero hay varios ejemplos de revisión por pares abierta, donde los comentarios son visibles para los lectores, generalmente con las identidades de los revisores también reveladas, por ejemplo, F1000, eLife, BMJ y BioMed Central.
El primer registro de una revisión editorial previa a la publicación es de 1665 por Henry Oldenburg, el editor fundador de Philosophical Transactions of the Royal Society en la Royal Society of London.[4][5][6]
La primera publicación revisada por pares podría haber sido Ensayos y observaciones médicas publicados por la Royal Society of Edinburgh en 1731. El sistema actual de revisión por pares evolucionó a partir de este proceso del siglo XVIII,[7] comenzó a involucrar a revisores externos a mediados del siglo XIX,[8] y no se convirtió en algo común hasta mediados del siglo XX.[9]
La revisión por pares se convirtió en una piedra de toque del método científico, pero hasta finales del siglo XIX a menudo la realizaba directamente un editor en jefe o un comité editorial.[10][11][12] Los editores de revistas científicas en ese momento tomaban decisiones de publicación sin buscar aportes externos, es decir, un panel externo de revisores, lo que les daba libertad a los autores establecidos en su discreción periodística. Por ejemplo, los cuatro artículo revolucionarios del annus mirabilis de Albert Einstein publicados en la edición de 1905 de Annalen der Physik fueron revisados por pares: por el editor en jefe de la revista, Max Planck, y por su coeditor, Wilhelm Wien, ambos futuros ganadores del Premio Nobel y expertos en los temas de estos documentos. Mucho más tarde, Einstein fue muy crítico con el proceso de revisión externa, diciendo que no había autorizado al editor en jefe para mostrar su manuscrito «a especialistas antes de que se imprima», y le informó de que «publicaría el documento en otro lugar» (lo hizo, y más tarde tuvo que retirar la publicación).[13]
Si bien algunas revistas médicas comenzaron a nombrar revisores externos de manera sistemática, es solo a partir de mediados del siglo XX que esta práctica se ha extendido ampliamente y que los revisores externos han recibido cierta visibilidad dentro de las revistas académicas, incluido el agradecimiento de autores y editores.[10][14] Un editorial de 2003 en Nature declaró que, a principios del siglo XX, «la carga de la prueba recaía generalmente en los detractores más que en los defensores de nuevas ideas».[15] Esta revista instituyó la revisión formal por pares solo en 1967.[16] Revistas como Science y American Journal of Medicine recurrieron cada vez más a revisores externos en las décadas de 1950 y 1960, en parte para reducir la carga de trabajo editorial. En el siglo XX, la revisión por pares también se hizo común para las asignaciones de fondos científicos. Este proceso parece haberse desarrollado independientemente del de la revisión editorial por pares.[4] : 221
El primer Congreso de Revisión por Pares se reunió en 1989.[17] Con el tiempo, la fracción de artículos dedicados a la revisión por pares ha disminuido constantemente, lo que sugiere que, como campo de estudio sociológico, ha sido reemplazado por estudios más sistemáticos de sesgos y errores.[18] Pragmáticamente, la revisión por pares se refiere al trabajo realizado durante la selección de los manuscritos enviados. Este proceso alienta a los autores a cumplir con los estándares aceptados de su disciplina y reduce la difusión de hallazgos irrelevantes, reclamos injustificados, interpretaciones inaceptables y puntos de vista personales. Es probable que las publicaciones que no hayan sido revisadas por pares sean consideradas con sospecha por académicos académicos y profesionales. [cita requerida] Los trabajos no revisados por pares contribuyen menos al crédito académico de los académicos, como el índice h, aunque esto depende en gran medida del campo.
En el caso de las publicaciones propuestas, el editor (editor en jefe o el consejo editorial, a menudo con la ayuda de los editores correspondientes o asociados) envía copias anticipadas del trabajo o las ideas de un autor a investigadores o académicos expertos en el campo (conocidos como «árbitros» o «revisores»). La comunicación es normalmente por correo electrónico o mediante un sistema de procesamiento de manuscritos basado en la web como Open Journal Systems. Dependiendo del campo de estudio y de la revista específica, generalmente hay de uno a tres árbitros para un artículo determinado. Por ejemplo, Springer afirma que hay dos o tres revisores por artículo.[19]
El proceso de revisión por pares implica tres pasos:[20]
Paso 1: Evaluación de escritorio. Un editor evalúa el manuscrito para juzgar si el documento se pasará a los árbitros de la revista. En esta fase, muchos artículos reciben un «rechazo de escritorio», es decir, el editor elige no pasar el artículo. Los autores pueden o no recibir una carta de explicación.
El rechazo de escritorio está destinado a ser un proceso simplificado para que los editores puedan descartar rápidamente manuscritos no viables y brindar a los autores la oportunidad de buscar una revista más adecuada. Por ejemplo, los editores de European Accounting Review someten cada manuscrito a tres preguntas para decidir si un manuscrito pasa a los árbitros: 1) ¿El artículo es adecuado para los objetivos y el alcance de la revista?; 2) si el contenido del artículo (por ejemplo, revisión de literatura, métodos, conclusiones) es suficiente y el documento hace una valiosa contribución a la mayor cantidad de literatura, y 3) ¿sigue el formato y las especificaciones técnicas? Si la respuesta a cualquiera de estas preguntas es «no», el manuscrito recibe un rechazo de escritorio.[21]
Las tasas de rechazo de escritorio varían según la revista. Por ejemplo, en 2017 los investigadores del Banco Mundial compilaron las tasas de rechazo de varias revistas de economía mundial; la tasa de rechazo de escritorio varió de 21 % ( Economic Lacea ) a 66 % ( Journal of Development Economics ).[22] La American Psychological Association publica las tasas de rechazo de varias publicaciones importantes en el campo, y aunque no especifican si el rechazo es una evaluación previa o posterior, sus cifras en 2016 oscilaron entre un mínimo del 49 % y un máximo del 90 %.[23]
Paso 2: revisión a ciegas. Si el documento no es rechazado, los editores envían el manuscrito a los árbitros, quienes son elegidos por su experiencia y distancia de los autores. En este punto, los árbitros pueden rechazar, aceptar sin cambios (esto es raro)[24] o indicar a los autores que revisen y vuelvan a enviar.
Las razones varían para la aceptación de un artículo por parte de los editores, pero Elsevier publicó un artículo donde tres editores evalúan los factores que impulsan la aceptación del artículo. Estos factores incluyen si el manuscrito: ofrece «una nueva visión de un tema importante», será útil para los profesionales, propone una nueva teoría, plantea nuevas preguntas, tiene métodos y conclusiones apropiados, presenta un buen argumento basado en la literatura y lo presenta de forma atractiva y clara.[25]
Estos árbitros devuelven una evaluación del trabajo al editor, señalando debilidades o problemas junto con sugerencias de mejora. Por lo general, la mayoría de los comentarios de los árbitros finalmente son vistos por el autor, aunque un árbitro también puede enviar comentarios solo al editor; las revistas científicas observan esta convención casi universalmente. El editor luego evalúa los comentarios de los árbitros, su propia opinión sobre el manuscrito antes de pasar una decisión a los autores, generalmente con los comentarios de los árbitros.[26]
Las evaluaciones de los árbitros generalmente incluyen una recomendación explícita de qué hacer con el manuscrito o la propuesta, a menudo elegida entre las opciones proporcionadas por la revista o la agencia de financiación. Por ejemplo, Nature recomienda cuatro cursos de acción:[27]
Durante este proceso, el papel de los árbitros es de asesoramiento. El editor generalmente no tiene la obligación de aceptar las opiniones de los árbitros,[28] aunque a menudo lo hará. Además, los árbitros en publicaciones científicas no actúan como un grupo, no se comunican entre sí y, por lo general, no son conscientes de las identidades o evaluaciones de los demás. Los defensores argumentan que si los revisores de un documento son desconocidos entre sí, el editor puede verificar más fácilmente la objetividad de las revisiones. Por lo general, no existe el requisito de que los árbitros logren un consenso, y la decisión a menudo la toman los editores en función de su mejor juicio de los argumentos.
En situaciones donde múltiples árbitros discrepan sustancialmente sobre la calidad de un trabajo, hay una serie de estrategias para llegar a una decisión. El documento puede ser rechazado por completo, o el editor puede elegir qué punto de la revisión deben abordar los autores.[29] Cuando un editor recibe críticas muy positivas y muy negativas para el mismo manuscrito, el editor a menudo solicitará una o más revisiones adicionales a modo de desempate. Como otra estrategia en el caso de los empates, el editor puede invitar a los autores a responder a las críticas de un árbitro y permitir una refutación convincente para romper el empate. Si un editor no se siente seguro para sopesar la persuasión de una refutación, el editor puede solicitar una respuesta del árbitro que hizo la crítica original. Un editor puede transmitir comunicaciones de ida y vuelta entre los autores y un árbitro, lo que en efecto les permite debatir un punto.[30]
Algunas revistas han comenzado a publicar en internet el historial previo a la publicación de cada artículo individual, desde la presentación original hasta los informes de los revisores, los comentarios de los autores y los manuscritos revisados. Por ejemplo, el British Medical Journal [31] y algunas publicaciones de Nature Research, como Nature Communications.[32]
Tradicionalmente, los revisores a menudo permanecen anónimos para los autores, pero este estándar varía tanto con el tiempo como con el campo académico. En algunos campos académicos, la mayoría de las revistas ofrecen al revisor la opción de permanecer en el anonimato o no, o un árbitro puede optar por firmar una revisión, renunciando así al anonimato. Los artículos publicados a veces contienen, en la sección de agradecimientos, gracias a árbitros anónimos o nombrados que ayudaron a mejorar el documento. Por ejemplo, las revistas de Nature ofrecen esta opción.[27]
Paso 3: revisiones. Si el manuscrito no ha sido rechazado durante la revisión por pares, vuelve a los autores para su revisión. Durante esta fase, los autores abordan las preocupaciones planteadas por los revisores.
En una revista o editorial de libros, la tarea de elegir revisores generalmente recae en un editor.[33] Cuando llega un manuscrito, un editor solicita revisiones de académicos u otros expertos que pueden o no haber expresado su voluntad de arbitrar para esa revista o división de libros. Las agencias otorgantes generalmente reclutan un panel o comité de revisores antes de la llegada de las solicitudes.[34]
Se supone que los árbitros deben informar al editor de cualquier conflicto de intereses que pueda surgir. Las revistas o los editores individuales pueden invitar a los autores de un manuscrito a nombrar personas que consideren calificadas para arbitrar su trabajo. Para algunas revistas, este es un requisito de presentación. Los autores a veces también tienen la oportunidad de nombrar candidatos naturales que deberían ser descalificados, en cuyo caso se les puede pedir que proporcionen justificación (generalmente expresada en términos de conflicto de intereses). Un obstáculo potencial en el reclutamiento de árbitros es que generalmente no se les paga, en gran parte porque hacerlo crearía un conflicto de intereses. Además, la revisión quita tiempo a sus actividades principales, como su propia investigación. Para la ventaja del posible reclutador, la mayoría de los posibles árbitros son autores, o al menos lectores, que saben que el sistema de publicación requiere que los expertos donen su tiempo. Servir como árbitro puede ser incluso una condición de una subvención o membresía de una asociación profesional. [cita requerida]
Para la mayoría de las publicaciones académicas, la identidad de los revisores se mantiene anónima (también llamada "revisión por pares ciegos"). La alternativa, la revisión por pares atribuida implica revelar las identidades de los revisores. Algunos revisores optan por renunciar a su derecho al anonimato, incluso cuando el formato predeterminado de la revista es una revisión por pares ciega.
En la revisión anónima por pares, el editor de la revista o el organizador de la conferencia conocen a los revisores, pero sus nombres no se dan al autor del artículo. En algunos casos, la identidad del autor también puede ser anonimizada para el proceso de revisión, con la información de identificación que se elimina del documento antes de la revisión. El sistema está destinado a reducir o eliminar el sesgo.[12]
Otros apoyan la revisión a ciegas porque ninguna investigación ha sugerido que la metodología puede ser dañina y que el costo de facilitar tales revisiones es mínimo.[35] Algunos expertos propusieron procedimientos de revisión a ciegas para revisar temas de investigación controvertidos.[36]
La revisión "doble ciego" ha sido diseñada por revistas de sociología en la década de 1950[37] y sigue siendo más común en las ciencias sociales y las humanidades que en las ciencias naturales.[cita requerida] En esta, la identidad de los autores se oculta a los revisores y viceversa, para que el conocimiento de la autoría o la preocupación por la desaprobación del autor no sesgue su revisión.[38] Los críticos del proceso de revisión doble ciego señalan que, a pesar de cualquier esfuerzo editorial para garantizar el anonimato, el proceso a menudo no lo hace, ya que ciertos enfoques, métodos, estilos de escritura, anotaciones, etc., permiten identificar a un cierto grupo de personas en un tema de investigación, e incluso a una persona en particular.[39]
En muchos campos de la "gran ciencia", los cronogramas de operación públicamente disponibles de los principales equipos, como telescopios o sincrotrones, harían que los nombres de los autores fueran obvios para cualquiera que quisiera buscarlos. Los defensores de la revisión doble ciego argumentan que su desempeño no es peor que el simple ciego, y que genera una percepción de equidad e igualdad en el financiamiento académico y la publicación.[40] La revisión simple ciego depende en gran medida de la buena voluntad de los participantes, pero no más que la revisión doble ciego con autores fácilmente identificables.
Un estándar más riguroso de arbitraje se conoce como auditoría. Debido a que a los revisores no se les paga, no se puede esperar que dediquen tanto tiempo y esfuerzo a una revisión como lo requiere una auditoría. Es por ello que revistas académicas como Science, organizaciones como la American Geophysical Union y agencias como los National Institutes of Health y la National Science Foundation mantienen y archivan datos y métodos científicos en caso de que otro investigador desee replicar o auditar la investigación después de la publicación.[41][42][43]
La revisión por pares anónima tradicional ha sido criticada por su falta de responsabilidad, la posibilidad de abuso por parte de los revisores o de quienes administran el proceso de revisión por pares (es decir, editores de revistas),[44] su posible sesgo y su inconsistencia[45] junto con otros defectos.[46][47] Eugene Koonin, investigador principal del Centro Nacional de Información sobre Biotecnología, afirma que el sistema tiene "males conocidos" y defiende la "revisión por pares abierta".[48]
A partir de la década de 1990, varias revistas científicas comenzaron a experimentar con procesos híbridos de revisión por pares, lo que permite las revisiones por pares abiertas en paralelo al modelo tradicional. La evidencia inicial de los efectos de las revisiones por pares abiertas fue mixta. La identificación de los revisores para los autores no tiene un impacto negativo y puede tener un impacto positivo sobre la calidad de las revisiones, la recomendación con respecto a la publicación, el tono de la revisión y el tiempo dedicado a la revisión. Sin embargo, la tasa de aceptación a las invitaciones a revisar es mayor.[49][50] Informar a los revisores que sus revisiones firmadas podrían publicarse en la web y estar disponibles para el público en general no tuvo un impacto negativo en la calidad de las revisiones y recomendaciones con respecto a la publicación, pero condujo a un mayor tiempo dedicado a la revisión, además de una disminución de los revisores.[31]
Investigaciones recientes han llamado la atención sobre el uso de tecnologías de redes sociales y blogs de ciencia como un medio de revisión por pares informal, posterior a la publicación, como en el caso de la controversia #arseniclife (o GFAJ-1).[51] En diciembre de 2010, un artículo publicado en Scienceexpress (la versión anticipada de Science) generó tanto entusiasmo como escepticismo, ya que sus autores, liderados por la astrobióloga de la NASA Felisa Wolfe-Simon, afirmaron haber descubierto y cultivado ciertas bacterias que podrían Reemplace el fósforo con arsénico en sus componentes fisiológicos. En el momento de la publicación del artículo, la NASA emitió comunicados de prensa que sugerían que el hallazgo afectaría la búsqueda de vida extraterrestre, provocando entusiasmo en Twitter bajo el hashtag #arseniclife, así como críticas de colegas expertos que expresaron escepticismo a través de sus blogs personales.[52] En última instancia, la controversia en torno al artículo atrajo la atención de los medios,[53] y una de las críticas científicas más vocales, Rosemary Redfield, publicada formalmente en julio de 2012[54] respecto al intento fallido de ella y sus colegas de replicar los hallazgos originales de los científicos de la NASA.
Varios editores han expresado críticas a la revisión por pares.[55][56]
La interposición de editores y revisores entre autores y lectores puede permitir que los intermediarios actúen como guardianes.[57] Algunos sociólogos de la ciencia sostienen que la revisión por pares hace que la capacidad de publicar sea susceptible al control de las élites y a los celos personales.[58][59] El proceso de revisión por pares puede suprimir el disenso contra las teorías "convencionales" [60][15][61] y puede estar sesgado contra la novedad.[62] Un análisis lingüístico de los informes de revisión sugiere que los revisores se centran en rechazar las solicitudes buscando puntos débiles y no en encontrar ideas innovadoras de alto riesgo / alta ganancia que puedan estar en la propuesta.[63] Los revisores tienden a ser especialmente críticos con las conclusiones que contradicen sus propios puntos de vista,[64][65] e indulgentes con los que coinciden. Al mismo tiempo, los científicos establecidos son más propensos que otros a ser buscados como árbitros, particularmente por revistas / editoriales de alto prestigio. También hay signos de sesgo de género, que favorecen a los hombres como autores.[66] Como resultado, las ideas que armonizan con los expertos establecidos tienen más probabilidades de verse impresas y aparecer en revistas de primer nivel que las iconoclastas o revolucionarias. Esto concuerda con las conocidas observaciones de Thomas Kuhn sobre las revoluciones científicas.[67] Se ha establecido un modelo teórico cuyas simulaciones implican que la revisión por pares y el financiamiento de investigación sobrecompetitivo fomentan la opinión dominante al monopolio.[68]
Las críticas a la revisión por pares anónima tradicional alegan que carece de responsabilidad, puede conducir al abuso por parte de los revisores y puede ser parcial e inconsistente.[47][45][69]
La revisión por pares falla cuando un artículo revisado por pares contiene errores fundamentales que socavan al menos una de sus conclusiones principales y que podrían haber sido identificados por revisores más cuidadosos. Muchas revistas no tienen ningún procedimiento para tratar las fallas de revisión por pares más allá de publicar cartas al editor.[70]
La revisión por pares en revistas científicas supone que el artículo revisado ha sido preparado con honestidad. El proceso ocasionalmente detecta fraude, pero no está diseñado para hacerlo.[71] Cuando la revisión por pares falla y se publica un documento con datos fraudulentos o irreproducibles, el documento puede retirarse.
Un experimento de 1998 sobre la revisión por pares con un manuscrito ficticio encontró que los revisores no detectaron algunos errores del manuscrito y la mayoría de los revisores pueden no notar que las conclusiones del documento no están respaldadas por sus resultados.[72]
Ha habido casos en los que se afirmó que se realizó una revisión por pares, pero en realidad no se realizó; esto se ha documentado en algunas revistas de acceso abierto depredadoras (por ejemplo, el asunto ¿Quién tiene miedo de la revisión por pares?) o en el caso de las revistas patrocinadas por Elsevier.[73]
En noviembre de 2014, un artículo en Nature expuso que algunos académicos estaban enviando detalles de contacto falsos para revisores recomendados a las revistas, por lo que si el editor contactaba con el revisor recomendado, ellos eran el autor original que revisaba su propio trabajo con un nombre falso.[74] El Comité de Ética de Publicaciones emitió una declaración advirtiendo de la práctica fraudulenta.[75] En marzo de 2015, BioMed Central retiró 43 artículos[76] y Springer retiró 64 artículos en 10 revistas en agosto de 2015.[77] La revista Tumor Biology es otro ejemplo de fraude de revisión por pares.[73]
Los revisores generalmente carecen de acceso a datos sin procesar, pero sí ven el texto completo del manuscrito, y generalmente están familiarizados con publicaciones recientes en el área. Por lo tanto, están en una mejor posición para detectar el plagio de la prosa que los datos fraudulentos. Algunos casos de tal plagio textual por parte de historiadores, por ejemplo, han sido ampliamente publicitados.[78]
En el aspecto científico, una encuesta de 3247 científicos financiados por los Institutos Nacionales de Salud de EE. UU. encontró que 0.3 % admitió datos falsos y 1.4 % admitió plagio.[79] Además, el 4.7 % de la misma encuesta admitió auto-plagio o autoplagio, en el que un autor vuelve a publicar el mismo material, datos o texto, sin citar su trabajo anterior.
Una forma relacionada de mala conducta profesional es un revisor que utiliza la información aún no publicada de un manuscrito o solicitud de subvención para beneficio personal o profesional. Se desconoce la frecuencia con la que esto sucede, pero la Oficina de Integridad de Investigación de los Estados Unidos ha sancionado a los revisores que han sido sorprendidos explotando el conocimiento que obtuvieron como revisores. [cita requerida] Una posible defensa para los autores contra esta forma de mala conducta por parte de los revisores es publicar previamente su trabajo en forma de preimpresión o informe técnico en un sistema público como arXiv. La preimpresión puede usarse más tarde para establecer la prioridad, aunque las preimpresiones violan las políticas establecidas en algunas revistas. [cita requerida]
En 2017, la Escuela Superior de Economía de Moscú presentó un "Monumento a un crítico anónimo". Toma la forma de un gran cubo de hormigón, o dados, con "Aceptar", "Cambios menores", "Cambios mayores", "Revisar y volver a enviar" y "Rechazar" en sus cinco lados visibles. El sociólogo Igor Chirikov, quien ideó el monumento, dijo que si bien los investigadores tienen una relación de amor y odio con la revisión por pares, los revisores, no obstante, hacen un trabajo valioso, pero en su mayoría invisible, y el monumento es un tributo para ellos.[80]