Revisiones sistemáticas en Ciencias de la Salud: Evaluación de la calidad de los estudios incluidos

En el proceso de evaluación crítica es importante garantizar la fiabilidad de un instrumento de evaluación a fin de evitar la subjetividad y los errores al extraer información sobre la calidad de cada estudio. Los pasos generales para la evaluación crítica son:

1. Tener en cuenta el tipo de diseño de los estudios incluidos basados en la pregunta de investigación
2. Seleccionar una herramienta válida de evaluación de la calidad apropiada para la revisión sistemática
3. Testear la herramienta con una muestra de estudios incluidos
4. Realizar una evaluación crítica de los estudios incluidos de forma independiente y por duplicado
5. Tabular y resumir el resultado de la evaluación crítica

La evaluación puede ser realizada por las listas de validación y por las escalas de evaluación.

Existe otra herramienta que cuantifica la calidad metodológica de los estudios incluidos como un todo. El método GRADE (Grading of Recommendations Assessment, Development, and Evaluation) ofrece algunas ventajas frente a otras herramientas:

• la calidad de la evidencia, clasificada como alta, moderada, baja y muy baja, se reporta separada del grado de recomendación (fuerte o débil) 
• se reconoce y pondera por los valores y preferencias de los pacientes
• ofrece una interpretación clara y pragmática del grado de recomendación para clínicos, pacientes y gestores
• evalúa explícitamente la importancia para los pacientes de las variables de resultado de las alternativas terapéuticas consideradas

El grupo Cochrane Common Mental Disorders ha elaborado 7 vídeos que demuestran la aplicación de la lista de comprobación CASP (Critical Appraisal Skills Programme) en distintos tipos de estudios.

• Si la calidad de los estudios es pobre, comprometerá los resultados de la revisión sistemática e incluso podría invalidarla.
• La valoración de la calidad metodológica es importante pero controvertida.
• No existe un consenso claro sobre cuál es la mejor forma de reflejar la calidad metodológica de un estudio.

• calidad se refiere al grado en que un estudio emplea medidas para reducir el sesgo y el error en su diseño, realización y análisis.
• evaluación de la calidad, su propósito es captar y analizar las variaciones entre los estudios incluidos en términos de su credibilidad y vulnerabilidad frente a diversas fuentes de sesgo. 
• evaluación crítica es el proceso de evaluación sistemática de la validez de la investigación y su pertinencia para una pregunta de revisión específica.
• lectura crítica, tiene como objetivo verificar la validez (aproximación a la verdad), y la utilidad (aplicabilidad clínica) de los resultados del artículo analizado, con el fin de incorporarlos al cuidado de pacientes y mejorar así la calidad de la asistencia.
• validez interna se refiere al grado en que los resultados de un estudio son correctos para las circunstancias estudiadas y donde las diferencias entre los grupos a estudio pueden ser atribuidas a la intervención investigada y no a otros factores.
• validez externa se refiere a la evaluación del grado en el que los resultados de un estudio aportan una base correcta para generalizarlo a otras poblaciones, circunstancias y/o variables de tratamiento y medición. Dependerá de las características de los pacientes, del tratamiento administrado (tanto el tratamiento a estudio como otros pautados por comorbilidades asociadas), del escenario del tratamiento y de la medición de resultados (tanto los criterios como el tiempo de seguimiento). 

Lista de verificación PRISMA 2020