La calculadora de kappa de Cohen te permite obtener rápidamente el coeficiente de concordancia entre dos evaluadores a partir de una tabla 2×2. Solo necesitas introducir las frecuencias de las celdas para calcular el acuerdo observado, el esperado por azar y el valor kappa. Esta herramienta es esencial para investigadores que necesitan medir la fiabilidad más allá del simple porcentaje de acuerdo, corrigiendo el efecto del azar en sus clasificaciones binarias.
Calculadora de Kappa de Cohen
Introduce los datos de la tabla 2×2 de concordancia entre dos evaluadores o jueces.
| Evaluador 2 | ||
|---|---|---|
| Sí | No | |
| Evaluador 1 | ||
Cómo usar la calculadora
Esta calculadora te permite obtener el coeficiente Kappa de Cohen de forma rápida y precisa para tus análisis de concordancia entre evaluadores. Para usarla:
- Introduce las frecuencias en las cuatro celdas de la tabla 2×2 proporcionada.
- Presiona el botón «Calcular Kappa de Cohen» o la tecla Enter en cualquier campo.
- Revisa los resultados, que mostrarán el acuerdo observado (Po), el acuerdo esperado por azar (Pe) y el coeficiente Kappa (κ).
Cada celda representa una combinación de respuestas entre los dos evaluadores. Por ejemplo, la casilla a corresponde a los casos en los que ambos evaluadores dijeron «Sí», mientras que la casilla b es para las ocasiones en las que el Evaluador 1 dijo «Sí» y el Evaluador 2 dijo «No». Introduce números enteros no negativos.
Qué mide la kappa de Cohen
El coeficiente Kappa de Cohen (κ) es una medida de concordancia o fiabilidad entre dos evaluadores que clasifican elementos dentro de una misma categoría binaria (como «Sí/No», «Presente/Ausente», «Positivo/Negativo»). A diferencia del simple porcentaje de acuerdo, Kappa corrige el acuerdo que se podría esperar solo por azar. Es muy útil en contextos de investigación donde:
- Se necesita validar la fiabilidad entre jueces o evaluadores en estudios cualitativos.
- Se debe verificar la consistencia de la codificación de datos por parte de diferentes investigadores.
- Se quiere evaluar la reproductibilidad de un diagnóstico o clasificación.
- Se trabaja con tablas de contingencia de 2×2 para medir la asociación entre clasificaciones.
Mide el grado de acuerdo que va más allá del azar, por lo que un valor de 0 indica un acuerdo no mayor que el esperado aleatoriamente, y un valor de 1 representa un acuerdo perfecto.
Fórmula
El cálculo del coeficiente Kappa de Cohen se basa en los valores de una tabla de contingencia 2×2 y sigue estos pasos:
- Acuerdo observado (Po): Proporción de casos en los que los evaluadores coinciden.
Fórmula: Po = (a + d) / n
Donde a y d son las celdas de acuerdo, y n es el total de casos (n = a + b + c + d). - Acuerdo esperado por azar (Pe): Proporción de acuerdo que se esperaría si las clasificaciones fueran independientes.
Fórmula: Pe = [ (a+b)*(a+c) + (c+d)*(b+d) ] / n²
Se calcula multiplicando los marginales de cada celda de acuerdo y dividiéndolo por el total al cuadrado. - Coeficiente Kappa (κ): Compara el acuerdo observado que supera el azar con el acuerdo máximo posible que supera el azar.
Fórmula: κ = (Po − Pe) / (1 − Pe)
Si deseas profundizar en el análisis de tablas de contingencia, puedes consultar nuestra guía sobre la prueba de Chi-cuadrado.
Ejemplo resuelto
Supón que dos evaluadores clasifican 100 respuestas a una pregunta como «Apropiado» (Sí) o «No apropiado» (No). Los resultados son los siguientes:
| Evaluador 2 | |||
|---|---|---|---|
| Sí | No | Total | |
| Evaluador 1 | a = 40 | b = 10 | 50 |
| Evaluador 1 | c = 5 | d = 45 | 50 |
| Total | 45 | 55 | n = 100 |
- Cálculo de Po (Acuerdo Observado):
Po = (a + d) / n = (40 + 45) / 100 = 85 / 100 = 0,85. - Cálculo de Pe (Acuerdo Esperado por Azar):
Pe = [ (a+b)*(a+c) + (c+d)*(b+d) ] / n²
Pe = [ (40+10)*(40+5) + (5+45)*(10+45) ] / 100²
Pe = [ (50*45) + (50*55) ] / 10000
Pe = [ 2250 + 2750 ] / 10000 = 5000 / 10000 = 0,50. - Cálculo de κ (Kappa de Cohen):
κ = (Po − Pe) / (1 − Pe) = (0,85 − 0,50) / (1 − 0,50) = 0,35 / 0,50 = 0,70.
El coeficiente Kappa obtenido es de 0,70. Puedes comprobar este resultado usando los valores en la calculadora superior.
Cómo interpretarla
La interpretación del coeficiente Kappa de Cohen se basa en convenciones ampliamente aceptadas en la literatura metodológica, que categorizan el grado de concordancia. Es importante recordar que estas son guías orientativas y que el contexto de la investigación puede modificar la interpretación.
| Valor de Kappa (κ) | Grado de concordancia |
|---|---|
| κ ≤ 0 | Sin acuerdo o acuerdo inferior al azar. |
| 0 < κ ≤ 0,20 | Acuerdo leve o insignificante. |
| 0,21 ≤ κ ≤ 0,40 | Acuerdo justo. |
| 0,41 ≤ κ ≤ 0,60 | Acuerdo moderado. |
| 0,61 ≤ κ ≤ 0,80 | Acuerdo sustancial. |
| 0,81 ≤ κ ≤ 1,00 | Acuerdo casi perfecto. |
En el ejemplo resuelto (κ = 0,70), se interpreta como una concordancia sustancial entre los evaluadores, indicando que su acuerdo es considerablemente mayor que el esperado solo por azar.
Limitaciones importantes: El coeficiente Kappa puede verse afectado por la prevalencia de una categoría sobre otra (paradoja de la prevalencia) y por el sesgo entre evaluadores. En casos con prevalencias extremas (por ejemplo, más del 90% de los casos en una categoría), Kappa puede ser bajo incluso con un alto porcentaje de acuerdo, por lo que siempre debe revisarse junto con la tabla de datos crudos.
Preguntas frecuentes
¿En qué se diferencia Kappa de Cohen del simple porcentaje de acuerdo?
El porcentaje de acuerdo solo cuenta las coincidencias (Po). Kappa de Cohen corrige ese valor restando el acuerdo que podría darse simplemente por azar (Pe). Por tanto, es una medida más rigurosa de la fiabilidad real entre evaluadores.
¿Puedo usar Kappa si tengo más de dos evaluadores o más de dos categorías?
El coeficiente que aquí se calcula es para dos evaluadores y dos categorías (kappa simple). Para más de dos evaluadores se puede usar la Kappa de Fleiss, y para más de dos categorías ordinales (como «bajo, medio, alto») se puede utilizar la Kappa ponderada, que asigna diferentes pesos a los desacuerdos.
¿Qué hago si obtengo un valor de Kappa negativo?
Un valor negativo de Kappa indica que el acuerdo observado es menor que el acuerdo que se esperaría por puro azar. Suele ser señal de que hay una inconsistencia sistemática en la forma de clasificar de los evaluadores o de un posible error en la recogida o transcripción de los datos. Se debe revisar el protocolo de evaluación.
¿Es Kappa de Cohen lo mismo que la fiabilidad de un test o encuesta?
No exactamente. Kappa mide la concordancia entre evaluadores. Para medir la fiabilidad o consistencia interna de un test o encuesta compuesta por varios ítems, se suele utilizar otra métrica, como el alfa de Cronbach. Ambas son medidas de fiabilidad, pero aplicadas a contextos diferentes. Puedes encontrar más herramientas relacionadas en nuestra sección de calculadoras para encuestas.
¿Cuáles son las principales paradojas o críticas al uso de Kappa?
Las dos principales son la paradoja de la prevalencia (kappa bajo con alto porcentaje de acuerdo cuando una categoría es muy frecuente) y la paradoja del sesgo (kappa puede variar incluso si los porcentajes marginales de los evaluadores cambian). Por ello, se recomienda siempre reportar junto con Kappa la tabla de contingencia completa y los porcentajes de acuerdo simple.