El viaje desde los cuestionarios Likert a los cuestionarios de elección forzosa: evidencia de la invarianza de los parámetros de los ítems

Multidimensional forced-choice questionnaires are widely regarded in the personnel selection literature for their ability to control response biases. Recently developed IRT models usually rely on the assumption that item parameters remain invariant when they are paired in forced-choice blocks, without giving it much consideration. This study aims to test this assumption empirically on the MUPP-2PL model, comparing the parameter estimates of the forced-choice format to their graded-scale equivalent on a Big Five personality instrument. The assumption was found to hold reasonably well, especially for the discrimination parameters. In the cases in which it was violated, we briefly discuss the likely factors that may lead to non-invariance. We conclude discussing the practical implications of the results and providing a few guidelines for the design of forced-choice questionnaires based on the invariance assumptionLos cuestionarios de elección forzosa multidimensionales son bastante apreciados en la literatura de selección de personal por su capacidad para controlar los sesgos de respuesta. Los modelos de TRI desarrollados recientemente normalmente asumen que los parámetros de los ítems permanecen invariantes cuando se emparejan en bloques de elección forzosa, sin dedicarle mucha atención. Este estudio tiene como objetivo poner a prueba empíricamente este supuesto en el modelo MUPP-2PL, comparando las estimaciones de los parámetros del formato de elección forzosa con su equivalente en escala graduada, en un instrumento de personalidad Big Five. Se encontró que el supuesto se cumplía razonablemente bien, especialmente para los parámetros de discriminación. En los casos en los que no se cumplió se discuten brevemente los posibles factores que pueden dar lugar a no invarianza. Concluimos discutiendo las implicaciones prácticas de los resultados y proponiendo algunas pautas para el diseño de cuestionarios de elección forzosa basados en el supuesto de invarianzaThis research is funded by the Spanish government’s Ministerio de Economia y Competitividad, projects PSI 2015-65557-P and PSI 2017-85022-

Análisis del número óptimo de opciones desde la teoría de la respuesta al ítem

Análisis del número óptimo de opciones desde la teoría de la respuesta al ítem. En este estudio se analiza el número óptimo de alternativas en tests de elección-múltiple desde la Teoría de la Respuesta al Ítem (TRI). Se estableció un nuevo procedimiento que permite el estudio de esta cuestión desde la TRI con una sola muestra. Concretamente se aplicó un Test de Vocabulario Inglés de 221 ítems de 5 alternativas a una muestra de 452 personas. Las respuestas de las 1/2/3 peores alternativas fueron reasignadas aleatoriamente para construir las respuestas a los ítems de 4, 3 y 2 opciones, respectivamente. Se analizaron los cambios en los parámetros a, b y c de los ítems, en la información del test y en la estimación de la habilidad. Se obtuvieron los peores resultados con los ítems de 2 alternativas. La reducción a 3 o 4 alternativas no tuvo efectos prácticos relevantes. Se recomiendan los ítems de 3 alternativas por ser menos susceptibles a la presencia de conocimiento parcial. Se comentan los efectos del número de opciones para diferentes niveles de habilida

Anatri 1.0: representación de funciones características de ítems dicotómicos y politómicos

El programa ANATRI permite estudiar varios modelos de Teoría de la Respuesta al Item para items dicotómicos y politómicos. Los modelos para items dicotómicos incluidos son los denominados como de 1, 2, 3 y 4 parámetros, en sus versiones normal y logística. Los modelos para items politómicos son el modelo de respuesta graduada, el modelo de crédito parcial y el modelo de respuesta nominal. El usuario selecciona el modelo y especifica los parámetros de uno o varios items. Mediante el programa se obtienen las curvas características de los items y, en su caso, las funciones de regresión asociadas a las diversas segmentaciones. Permite analizar en profundidad las propiedades particulares de los items, con lo que se facilita la didáctica de los diferentes modelos