Más allá del acuerdo interjueces: protocolo y herramienta para la validación de contenido en investigación educativa

Abstract

Introducción: La validez de contenido constituye una fuente de evidencia fundamental en la construcción de instrumentos de medición en ciencias sociales. El juicio de expertos es el procedimiento más extendido para obtenerla; sin embargo, su implementación adolece con frecuencia de falta de transparencia metodológica, criterios de decisión implícitos y ausencia de reglas de interpretación explícitas. Método: Este trabajo presenta un protocolo de validación interjueces orientado a sistematizar y objetivar ese proceso. El protocolo propone la valoración de cuatro indicadores por ítem —univocidad, pertinencia, relevancia y adecuación de la escala de respuesta— mediante una rúbrica de cuatro niveles. Resultados: A partir de las puntuaciones otorgadas por los jueces, se calculan dos índices complementarios: el nivel de calidad del ítem y el grado de consenso interjueces estimado mediante la desviación estándar. La combinación de ambos índices permite adoptar decisiones fundamentadas de conservación, modificación o eliminación de cada ítem conforme a criterios replicables. El protocolo se acompaña de un ejemplo de implementación y de una herramienta en formato Excel que automatiza los cálculos. Discusión: Se discuten los fundamentos metodológicos de la propuesta y sus limitaciones, situándola en el marco de los enfoques contemporáneos de validación basados en evidencia múltiple.