¿Qué significa coherencia?

Los datos se mantienen consistentes.

Medición

La medición de la coherencia se puede utilizar para describir el grado de acuerdo entre las evaluaciones de varios autores. La estadística Kappa se puede utilizar para calcular la coherencia entre dos autores al realizar evaluaciones simples. decisiones de inclusión/exclusión. Consistencia de la medición, ver Tabla 1. El estándar de referencia recomendado para utilizar el valor Kappa para juzgar la coherencia es:

①Kappa =+1, lo que indica que los resultados de los dos juicios son completamente consistentes.

②Kappa = -1, lo que indica que los resultados de los dos juicios son completamente inconsistentes.

③Kappa =0, ​​​​lo que indica que los resultados de los dos juicios son causados ​​por casualidad.

④Kappa<0, lo que indica que el grado de coherencia es peor que el causado por casualidad. Los resultados de las dos inspecciones son muy inconsistentes, pero no tiene sentido en aplicaciones prácticas.

⑤Kappa>0, esto significa que cuanto mayor sea Kappa, mejor será la coherencia.

⑥Kappa<0.4, lo que indica que el grado de consistencia no es el ideal.

⑦Kappa≥0,75, lo que indica que se ha logrado un nivel de acuerdo bastante satisfactorio.

Sin embargo, no se recomienda utilizar la estadística Kappa como estándar para revisiones sistemáticas. Aunque puede revelar problemas en las primeras etapas de los experimentos preliminares, no puede revelar el impacto sustancial de los desacuerdos sobre las evaluaciones. Por ejemplo, el desacuerdo al evaluar la elegibilidad de un estudio a gran escala bien realizado tendrá un mayor impacto en una revisión sistemática que el desacuerdo en un estudio pequeño con riesgo de sesgo