The Revised Osterlind Index. A Comparative Analysis in Content Validity Studies [El Indice de Osterlind Revisado. Un Análisis Comparativo en Estudios de Validez de Contenido]

Abstract

Abstract A procedure commonly used to obtain empirical evidence in content validity studies is the calculation of the Osterlind index after gathering the expert opinions about the adequacy of the items to measure a particular dimension of the tool. The aim of this work is to compare the results obtained when experts score the degree of suitability item-dimension on the traditional 3-point rating scales with the results obtained using, alternatively, 5-point ones. 105 participants valued, on 5-point rating scales, the fitness item-dimension of 31 items to 7 dimensions that composed a questionnaire to measure satisfaction with the training received. These marks were also transformed into 3-point rating scales. Comparison between Osterlind indexes calculated using scores from 5 and 3-point rating scales shows that the new propose is more conservative than the classic procedure; i.e., items considered adequate using 3-point rating scales were removed using 5-point rating scales. Resumen Un procedimiento comunmente usado para obtener evidencias empiricas en estudios de validez de contenido es el calculo del indice de Osterlind tras recoger la opinion de expertos acerca de la adecuacion de items para medir una concreta dimension de un test. El objetivo de este trabajo es comparar los resultados obtenidos cuando los expertos puntuan el grado de adecuacion item-dimension sobre la tradicional escala de valoracion de 3 puntos y sobre una de 5 puntos. 105 participantes valoraron, sobre escalas de valoracion de 5 puntos, la adecuacion de 31 items a 7 dimensiones de un cuestionario para medir la satisfaccion con la formacion recibida. Estas puntuaciones fueron posteriormente transformadas a 3 puntos de valoracion. La comparacion entre los indices de Osterlind calculados a partir de valoraciones sobre escalas de 5 y 3 puntos muestra que, usando las escalas de 5 puntos, se eliminaron items que fueron considerados adecuados usando escalas de 3.