“Los términos indefinidos en las revisiones sistemáticas las hacen no científicas y poco fiables”

• Afirmación: Los términos indefinidos en las revisiones sistemáticas las hacen no científicas y poco fiables
• Veredicto: ENGAÑOSO
• Nivel de evidencia: L2 — Guías académicas y artículos metodológicos de fuentes revisadas por pares
• Anomalía clave: La afirmación confunde el rigor metodológico con la exhaustividad de las definiciones. Las revisiones sistemáticas pueden estar científicamente fundamentadas incluso en presencia de elementos indefinidos, siempre que esta indefinición se reconozca explícitamente y la metodología permanezca rigurosa
• Verificación de 30 segundos: Fuentes autorizadas (UCL, BMJ Paediatrics Open) confirman que las revisiones sistemáticas deben o bien definir los límites de la investigación, o bien indicar claramente qué elementos permanecen indefinidos — ambos enfoques son metodológicamente aceptables (S006, S003)

Steelman — qué afirman los defensores de la posición

La versión más convincente de esta afirmación se basa en un principio fundamental del método científico: la reproducibilidad y la precisión requieren definiciones claras. Los defensores de esta posición pueden argumentar que las revisiones sistemáticas, que pretenden sintetizar datos científicos, deben operar con términos estrictamente definidos, de lo contrario:

• Los criterios de inclusión y exclusión de estudios se vuelven arbitrarios
• Diferentes investigadores no podrán reproducir la búsqueda bibliográfica
• Las conclusiones de la revisión pierden generalización debido a la ambigüedad conceptual
• Los lectores no pueden evaluar la aplicabilidad de los resultados a su contexto

Esta posición encuentra apoyo parcial en la literatura metodológica. Las guías para realizar revisiones sistemáticas efectivamente enfatizan la importancia de criterios de inclusión explícitos y tipos de estudios claramente descritos (S005). Las guías bibliotecarias universitarias señalan la necesidad de una búsqueda bibliográfica exhaustiva y criterios de selección explícitos como características distintivas de las revisiones sistemáticas en comparación con las narrativas (S005, S008).

Además, la literatura filosófica reconoce la problematicidad de los términos indefinidos en la argumentación lógica. La Enciclopedia de Filosofía de Stanford señala que aunque algunos conceptos básicos, como "relevancia" y "suficiencia", permanecen intuitivos e indefinidos incluso en la lógica formal, esto crea dificultades metodológicas (S013).

Lo que realmente muestran las evidencias

Los datos empíricos y las guías metodológicas pintan un cuadro más matizado que refuta la categoricidad de la afirmación inicial.

La indefinición como realidad metodológica reconocida

La guía del University College London sobre la formulación de preguntas de investigación para revisiones sistemáticas contiene una aclaración críticamente importante: "Cualquier pregunta de investigación tiene supuestos ideológicos y teóricos respecto a los significados y procesos en los que se enfoca. Una revisión sistemática debe o bien definir los límites de estos elementos en la etapa inicial, o bien indicar claramente qué elementos permanecen indefinidos" (S006).

Esta guía, actualizada en enero de 2026, reconoce explícitamente la legitimidad de dos enfoques: definición completa o reconocimiento explícito de la indefinición. El requisito clave es la transparencia, no la certeza absoluta de todos los términos.

Ejemplos empíricos de revisiones científicamente fundamentadas con conceptos indefinidos

La revisión sistemática de Kloos y colegas (2023), publicada en la revista Medical Teacher y citada 15 veces, investiga "el abandono como un aspecto indefinido y pasado por alto del maltrato a estudiantes de medicina" (S004). El título mismo reconoce que el concepto central de la investigación — "abandono" — es indefinido. Sin embargo, esta es una revisión sistemática revisada por pares, publicada en una revista prestigiosa de educación médica, lo que demuestra que la comunidad científica acepta revisiones sistemáticas que trabajan explícitamente con conceptos indefinidos.

Este ejemplo ilustra un principio metodológico importante: las revisiones sistemáticas pueden servir como herramienta para investigar y clarificar conceptos previamente indefinidos, no solo para sintetizar datos sobre preguntas ya claramente definidas.

Crítica de la falsa dicotomía entre tipos de revisiones

El artículo de Gordon (2025) en BMJ Paediatrics Open proporciona un análisis crítico de un error común: "Cualquier pregunta indefinida por defecto abarca un área amplia — pero esto en sí mismo no justifica realizar una revisión de alcance. Más preocupante aún, muchos trabajos bajo la etiqueta de revisiones de alcance descartan elementos sustanciales de rigor que son vitales para obtener resultados confiables y generalizables" (S003).

Esta observación invierte la lógica de la afirmación inicial. El problema no es que los términos indefinidos hagan que las revisiones sean no científicas, sino que los investigadores a veces utilizan la indefinición como pretexto para reducir el rigor metodológico. Gordon enfatiza que un área amplia de investigación o la indefinición de una pregunta no eximen de la necesidad de mantener "elementos sustanciales de rigor" (S003).

Los estándares metodológicos son independientes de la exhaustividad de las definiciones

El análisis comparativo de tipos de revisiones muestra que las revisiones sistemáticas se distinguen de las narrativas no por la exhaustividad de las definiciones, sino por características metodológicas (S005):

• Búsqueda bibliográfica exhaustiva: diseñada para descubrir todos los estudios relevantes
• Criterios de inclusión explícitos: descripción clara de los tipos de estudios a incluir
• Extracción sistemática de datos: proceso estructurado de extracción de información
• Evaluación de calidad: evaluación formal de la calidad metodológica de los estudios incluidos

Ninguno de estos criterios requiere que todos los términos estén completamente definidos antes de comenzar la revisión. Requieren transparencia, reproducibilidad y sistematicidad del proceso.

Conflictos e incertidumbres en las evidencias

Limitaciones de los datos extraídos

Es necesario reconocer una limitación sustancial de las fuentes disponibles: la mayoría de los materiales extraídos representan textos fragmentarios de guías bibliotecarias, conteniendo predominantemente elementos de navegación y extractos incompletos. Solo cuatro fuentes (S003, S004, S006, S010) contienen contenido sustantivo adecuado para análisis metodológico.

Esta limitación significa que este análisis se basa en una base de evidencia relativamente estrecha, aunque la calidad de las fuentes disponibles (revistas revisadas por pares, guías de universidades prestigiosas) permanece alta.

Tensión entre ideal y práctica

Existe una tensión evidente entre el ideal metodológico de certeza completa y la realidad práctica del proceso de investigación. La revisión sistemática y metaanálisis de Bagde y colegas (2023) sobre ChatGPT, citada 73 veces, señala que "algunos estudios tienen ubicaciones o tamaños de muestra indefinidos" (S010).

Esta observación apunta a un problema práctico: incluso en revisiones sistemáticas contemporáneas publicadas en revistas autorizadas, los investigadores enfrentan indefinición en los datos primarios. La cuestión no es si se puede evitar completamente la indefinición (a menudo no se puede), sino cómo manejarla de manera metodológicamente correcta.

Fundamentos filosóficos de la indefinición

La Enciclopedia de Filosofía de Stanford reconoce un problema fundamental: algunos conceptos básicos permanecen como "conceptos intuitivos e indefinidos" incluso en la lógica formal (S013). Esta observación filosófica tiene consecuencias importantes para la metodología de las revisiones sistemáticas: si incluso la lógica formal no puede eliminar completamente la indefinición de conceptos fundamentales, es poco realista exigir que las revisiones sistemáticas en campos empíricos complejos logren una definición absoluta de todos los términos.

El papel constructivo de la indefinición en la investigación exploratoria

La existencia de revisiones sistemáticas que exploran conceptos indefinidos (S004) sugiere que la indefinición puede desempeñar un papel metodológicamente legítimo en ciertos contextos de investigación. Cuando un campo está emergiendo o cuando los fenómenos estudiados son inherentemente complejos y multifacéticos, una revisión sistemática puede servir precisamente para mapear cómo diferentes investigadores han conceptualizado y operacionalizado términos que aún no tienen definiciones consensuadas.

En tales casos, la indefinición no es un defecto metodológico sino el objeto mismo de la investigación. El requisito científico no es eliminar esta indefinición antes de comenzar, sino documentarla sistemáticamente y analizarla críticamente.

Riesgos de interpretación

Confundir rigor metodológico con precisión terminológica

El riesgo principal de la afirmación original es que puede llevar a rechazar revisiones sistemáticas metodológicamente rigurosas simplemente porque trabajan con conceptos que aún están siendo refinados por la comunidad científica. Esto confunde dos dimensiones distintas de la calidad científica:

• Rigor metodológico: la sistematicidad, transparencia y reproducibilidad del proceso de investigación
• Precisión terminológica: el grado en que todos los conceptos utilizados tienen definiciones operacionales completas

Una revisión puede ser metodológicamente rigurosa (búsqueda exhaustiva, criterios explícitos, evaluación sistemática) mientras trabaja con conceptos que son deliberadamente exploratorios o que reflejan la indefinición existente en el campo.

Crear barreras artificiales a la investigación exploratoria

Si se acepta la afirmación de que los términos indefinidos hacen que las revisiones sistemáticas sean no científicas, se crearía una barrera artificial para la investigación en áreas emergentes o interdisciplinarias, donde los conceptos están necesariamente en desarrollo. Esto podría tener el efecto perverso de limitar las revisiones sistemáticas solo a campos maduros con terminología establecida, privando a campos emergentes de los beneficios de la síntesis sistemática de evidencia.

Ignorar la función de transparencia sobre la indefinición

Como señala la guía de UCL (S006), el requisito científico real no es eliminar toda indefinición, sino ser transparente sobre ella. Una revisión que reconoce explícitamente qué términos permanecen indefinidos y cómo esto afecta la interpretación de los resultados es científicamente más honesta que una que pretende una precisión falsa mediante definiciones arbitrarias impuestas artificialmente.

Malinterpretar la naturaleza iterativa del conocimiento científico

La ciencia avanza a menudo mediante un proceso iterativo donde los conceptos se refinan progresivamente a través de múltiples ciclos de investigación empírica y reflexión teórica. Las revisiones sistemáticas que trabajan con conceptos indefinidos pueden ser pasos cruciales en este proceso de refinamiento, identificando inconsistencias en cómo diferentes investigadores han operacionalizado términos y señalando la necesidad de mayor clarificación conceptual.

Rechazar tales revisiones como "no científicas" malinterpreta fundamentalmente cómo funciona el progreso científico en la práctica, especialmente en ciencias sociales, del comportamiento y de la salud donde los fenómenos estudiados son inherentemente complejos y multidimensionales.