Medicina Basada en la Evidencia

Evaluación de la precisión de las pruebas diagnósticas – 263 – es inferior al esperado por azar. La interpretación más aceptada de los rangos de valores situados entre 0 y 1 se expone en la Tabla 3 . Al igual que otros estimadores poblacionales, los índices kappa se deben calcular con sus intervalos de confianza. El índice kappa también puede ser aplicado a pruebas cuyos resultados tengan más de 2 categorías nomina- les, utilizando la misma metodología para el cálculo del acuerdo esperado por azar. VARIABLES DISCRETAS ORDINALES. ÍNDICE KAPPA PONDERADO El índice kappa ponderado debe emplearse cuando el resultado de la prueba analizada puede adoptar más de dos categorías, entre las que existe cierto orden jerárquico (resultados discretos ordinales). En esta si- tuación, pueden existir distintos grados de acuerdo o desacuerdo entre las evaluaciones repetidas. Veamos un ejemplo: En la Tabla 4 se presentan los resultados de dos eva- luaciones sucesivas de un cuestionario (test-retest), diseñado para detectar el consumo problemático de alcohol en adolescentes (datos figurados). Los resulta- dos se expresan en tres categorías: riesgo bajo, medio y alto. Es evidente que no puede considerarse igual una discrepancia entre riesgo bajo y medio, que entre bajo y alto. El índice kappa ponderado nos permite estimar el grado de acuerdo, considerando de forma diferente esas dis- crepancias. Para ello, debemos asignar diferentes pesos a cada nivel de concordancia. Habitualmente, se asig- nará un peso 1 al acuerdo total (100% de acuerdo) y un peso 0 al desacuerdo extremo. A los desacuerdos inter- medios se les asignarán pesos intermedios, en función del significado que tengan las distintas discordancias en el atributo estudiado. Así, si en nuestro ejemplo hemos optado por asignar un peso de 0,25 a las discordancias riesgo alto – medio, ello significa que cuando una de las evaluaciones clasifica el riesgo como alto y la otra como medio, el grado de acuerdo entre ambas es solo del 25%. El índice kappa ponderado se calcula de forma simi- lar al índice kappa, con la diferencia de que, en las fórmulas de las proporciones de acuerdo observado y esperado, las frecuencias de las distintas casillas se deben multiplicar por sus pesos respectivos. En la Ta- bla 5 podemos ver los pesos asignados en el ejemplo de la Tabla 4 y los cálculos de las observaciones es- peradas por azar en cada casilla. Las proporciones de acuerdo observado (P o ), esperado (P e ) y el índice kappa ponderado ( k w ) para este ejemplo serán las siguientes (P o y P e calculados respectivamente con los valores de las Tablas 4 y 5 ): Tabla 4. Resultados de dos evaluaciones sucesivas, separadas por un corto periodo de tiempo (test-retest), de un cuestionario diseñado para detectar el consumo problemático de alcohol, en 100 adolescentes (datos figurados). Los resultados se expresan en tres categorías: riesgo bajo, medio y alto. Las casillas reflejan el recuento de casos en que hay acuerdo y desacuerdo 1ª evaluación 2ª evaluación Riesgo bajo Riesgo medio Riesgo alto Riesgo bajo 35 12 5 52 Riesgo medio 8 10 5 23 Riesgo alto 5 9 11 25 48 31 21 100 Tabla 5. Pesos asignados a los distintos grados de acuerdo entre evaluaciones (en negrita en la esquina superior derecha de cada casilla) y recuentos esperados por azar en cada una de las casillas de la Tabla 4 (ecuaciones de cada casilla) 1ª evaluación 2ª evaluación Riesgo bajo Riesgo medio Riesgo alto Riesgo bajo 1 0,25 0 52 Riesgo medio 0,25 1 0,25 23 Riesgo alto 0 0,25 1 25 48 31 21 100