Optimal number of strata for the stratified methods in computerized adaptive testing

Test security can be a major problem in computerized adaptive testing, as examinees can share information about the items they receive. Of the different item selection rules proposed to alleviate this risk, stratified methods are among those that have received most attention. In these methods, only low discriminative items can be presented at the beginning of the test and the mean information of the items increases as the test goes on. To do so, the item bank must be divided into several strata according to the information of the items. To date, there is no clear guidance about the optimal number of strata into which the item bank should be split. In this study, we will simulate conditions with different numbers of strata, from 1 (no stratification) to a number of strata equal to test length (maximum level of stratification) while manipulating the maximum exposure rate that no item should surpass (rmax) in its whole domain. In this way, we can plot the relation between test security and accuracy, making it possible to determine the number of strata that leads to better security while holding constant measurement accuracy. Our data indicates that the best option is to stratify into as many strata as possible.This research was supported by a grant from the Spanish Ministerio de Ciencia e Innovación (project number PSI2009–10341), and by a grant from the Fundación Universitaria Antonio Gargallo and the Obra Social de Ibercaja

Computerized adaptive testing: the capitalization on chance problem

This paper describes several simulation studies that examine the effects of capitalization on chance in the selection of items and the ability estimation in CAT, employing the 3-parameter logistic model. In order to generate different estimation errors for the item parameters, the calibration sample size was manipulated (! = 500, 1000 and 2000 subjects) as was the ratio of item bank size to test length (banks of 197 and 788 items, test lengths of 20 and 40 items), both in a CAT and in a random test. Results show that capitalization on chance is particularly serious in CAT, as revealed by the large positive bias found in the small sample calibration conditions. For broad ranges of θ, the overestimation of the precision (asymptotic Se) reaches levels of 40%, something that does not occur with the RMSE (θ). The problem is greater as the item bank size to test length ratio increases. Potential solutions were tested in a second study, where two exposure control methods were incorporated into the item selection algorithm. Some alternative solutions are discussed.This research was partly supported by two grants from the Spanish Ministerio de Educación y Ciencia (projects PSI2008-01685 and PSI2009-10341) and by the UAM-IIC Chair Psychometric Models and Applications

eCat-Listening: diseño y propiedades psicométricas de un test adaptativo informatizado de comprensión auditiva de la lengua inglesa

In this study, eCAT-Listening, a new computerized adaptive test for the evaluation of English Listening, is described. Item bank development, anchor design for data collection, and the study of the psychometric properties of the item bank and the adaptive test are described. The calibration sample comprised 1.576 participants. Good psychometric guarantees: the bank is unidimensional, the items are satisfactorily fi tted to the 3-parameter logistic model, and an accurate estimation of the trait level is obtained. As validity evidence, a high correlation was obtained between the estimated trait level and a latent factor made up of the diverse criteria selected. The analysis of the trait level estimation by means of a simulation led us to fi x the test length at 20 items, with a maximum exposure rate of .40En este trabajo se describe eCAT-Listening, un nuevo test adaptativo informatizado para la medición del nivel de comprensión auditiva del inglés. Se describe la elaboración del banco de ítems, el diseño de anclaje para la recogida de datos y el estudio de las propiedades psicométricas del banco de ítems y del test adaptativo. La muestra de calibración fue de 1.576 personas. Se obtienen unas buenas garantías psicométricas: el banco es unidimensional, los ítems se ajustan satisfactoriamente al modelo logístico de 3 parámetros y se consigue una estimación precisa de los diferentes niveles de rasgo. Como prueba de validez, se obtuvo una alta correlación entre el rasgo estimado y un factor latente de nivel de inglés compuesto por las diferentes puntuaciones criterio utilizadas en el estudio. El análisis de la estimación del nivel de rasgo mediante simulación nos lleva a fijar la longitud del test adaptivo en 20 ítems, con una tasa máxima de exposición de 0,40This research was supported by two grants from the Spanish Ministry of Science and Innovation (project numbers PSI2009-10341 and PSI2008-01685) and by the UAM-IIC Chair «Psychometric Models and Applications

Item parameter drift in computerized adaptive testing: study with eCAT

En el presente trabajo se muestra el análisis realizado sobre un Test Adaptativo Informatizado (TAI) diseñado para la evaluación del nivel de inglés, denominado eCAT, con el objetivo de estudiar el deterioro de parámetros (parameter drift) producido desde la calibración inicial del banco de ítems. Se ha comparado la calibración original desarrollada para la puesta en servicio del TAI (N= 3224) y la calibración actual obtenida con las aplicaciones reales del TAI (N= 7254). Se ha analizado el Funcionamiento Diferencial de los Ítems (FDI) en función de los parámetros utilizados y se ha simulado el impacto que sobre el nivel de rasgo estimado tiene la variación en los parámetros. Los resultados muestran que se produce especialmente un deterioro de los parámetros a y c, que hay un importante número de ítems del banco para los que existe FDI y que la variación de los parámetros produce un impacto moderado en la estimación de θ de los evaluados con nivel de inglés alto. Se concluye que los parámetros de los ítems se han deteriorado y deben ser actualizadosThis study describes the parameter drift analysis conducted on eCAT (a Computerized Adaptive Test to assess the written English level of Spanish speakers). The original calibration of the item bank (N = 3224) was compared to a new calibration obtained from the data provided by most eCAT operative administrations (N = 7254). A Differential Item Functioning (DIF) study was conducted between the original and the new calibrations. The impact that the new parameters have on the trait level estimates was obtained by simulation. Results show that parameter drift is found especially for a and c parameters, an important number of bank items show DIF, and the parameter change has a moderate impact on high-level-English θ estimates. It is then recommended to replace the original estimates by the new se

The Ceramic Industry in Spain: Challenges and Opportunities in Times of Crisis

In the last few years, the Spanish ceramic industry has gone through a severe crisis, which has led to great market loss and reduction in profi ts. Nevertheless, the ceramic industries in Spain have always characterised themselves as an innovative sector, highly predisposed to changes. It is precisely in times of crisis that the industries most seek to break new ground in their quest for new innovations that will give them an edge over competitors. This study provides an overview of the advances that have recently materialised in the ceramic tile industry. Various technological issues are thus highlighted, such as tile decoration by inkjet printing, laser technology, physical vapour deposition (PVD) technology, fi ring using laser technology (laser­fi ring project), etc. These techniques are being used to develop innovative products, thus obtaining tiles with bactericidal capability, conductive glazes, anti­electrostatic tiles, etc

Capillary electrophoresis as a tool for genotyping SH3 mediated coffee leaf rust resistance

Coffee is an important agricultural commodity in the world. However, it is susceptible to Hemileia vastatrix (Hv), an obligatory biotrophic fungus that causes coffee leaf rust (CLR). Natural resistance to rust has been identified in the wild species Coffea canephora and Coffea liberica. These species have been used in breeding programs where interspecific resistant hybrids have been generated. The SH3 gene, derived from C. liberica, has been shown to confer extreme and long-lasting resistance to Hv. A total of 167 accessions of the INIA’s Coffee Germplasm Collection of Peru (INIA-CGC) were screened with 4 markers linked to the SH3 gene. As positive controls, EA67 (C. liberica) and the hybrid S.288 (C. arabica x C. liberica) were used. Separation of PCR products was done by capillary electrophoresis, which allow to discriminate the alleles of each marker. For three markers, specific alleles for either C. arabica or C. liberica species were found. In all cases, S.288 exhibited specific alleles for both species; whereas the INIA-CGC accessions had exclusively C. arabica alleles and EA67 had C. liberica alleles. The BA-48-21O-f marker did not produce PCR fragments for any of the positive controls, suggesting that this marker is not as predictive as the other three to determine the presence of SH3. This work reports the existence of multiple alleles for the Sat244 marker; however, the collection does not have the SH3 mediated-resistance gene. Finally, the utility of capillary electrophoresis as a tool to identify alleles linked to SH3 was demonstrated

Nuevo banco de ítems para evaluar adaptativamente los Cinco Grandes

Even though the Five Factor Model (FFM) has been the dominant paradigm in personality research for the past two decades, very few studies have measured the FFM adaptively. Thus, the purpose of this research was the building of a new item pool to develop a computerized adaptive test (CAT) for personality assessment. Method: A pool of 480 items that measured the FFM facets was developed and applied to 826 participants. Facets were calibrated separately and item selection was performed being mindful of the preservation of unidimensionality of each facet. Then, a post-hoc simulation study was carried out to test the performance of separate CATs to measure the facets. Results: The final item pool was composed of 360 items with good psychometric properties. Findings reveal that a CAT administration of four items per facet (total length of 120 items) provides accurate facets scores, while maintaining the factor structure of the FFM. Conclusions: An item pool with good psychometric properties was obtained and a CAT simulation study demonstrated that the FFM facets could be measured with precision using a third of the items in the poolA pesar de que el Modelo de los Cinco Factores (MCF) ha sido el paradigma predominante durante las últimas dos décadas, muy pocos estudios han medido el MCF de forma adaptativa. El objetivo de esta investigación fue construir un nuevo banco de ítems para desarrollar un test adaptativo informatizado (TAI) para evaluar la personalidad. Método: se desarrolló un banco de 480 ítems para evaluar las facetas del MCF y se aplicó a 826 participantes. Cada faceta se calibró por separado y la selección de ítems se realizó atendiendo a que cada faceta fuese unidimensional. Después se realizó un estudio de simulación post-hoc para evaluar la efi ciencia de TAIs a nivel de facetas. Resultados: el banco final estaba formado por 360 ítems con buenas propiedades psicométricas. Los resultados demostraron que la aplicación adaptativa de cuatro ítems por faceta proporciona puntuaciones precisas en las mismas, al mismo tiempo que se mantiene la estructura factorial del MCF. Conclusiones: el banco final está formado por ítems con buenas propiedades psicométricas. La aplicación adaptativa del banco permite medir la personalidad de forma eficiente a nivel de facetas utilizando una tercera parte de los ítemsThe research has been funded by the Ministry of Economy and Competitivity of Spain (PSI2013-44300-P), and the UAM-IIC Chair «Psychometric Models and Applications

Relación entre el tipo histológico según la localización tumoral en adenocarcinoma gástrico avanzado resecable y su impacto en la sobrevida a 5 años. Instituto Regional de Enfermedades Neoplásicas - IREN Norte. 2008 – 2013

Objetivo: Determinar la relación entre el tipo histológico según la localización tumoral en la sobrevida a 5 años de pacientes con carcinoma gástrico avanzado resecable. Material y métodos. El presente estudio analizó información de una serie de 95 pacientes. Los pacientes fueron agrupados de acuerdo al tipo histológico de la clasificación de Lauren y Jarvi en: tipo intestinal (n = 41), tipo difuso (n = 39) y mixto (n = 15), atendidos en el Instituto Regional de Enfermedades Neoplásicas IREN- Norte de Trujillo, periodo 2008 – 2013. Resultados: Las tasas de sobrevida a 5 años, en pacientes con adenocarcinoma gástrico de tipo histológico intestinal (n = 41) de acuerdo a la localización tumoral fueron de 60,6%, 47,1% y 0.0% ubicadas en cuerpo, antro y fondo respectivamente (p = 0,042). Las tasas de sobrevida a 5 años, en pacientes con adenocarcinoma gástrico de tipo histológico difuso (n = 39), de acuerdo a la localización tumoral fueron de 45,6% y 16.7% cuando las lesiones se ubicaron en cuerpo y antro gástrico respectivamente (p = 0.028). De acuerdo al tipo histológico mixto (n = 15) según localización tumoral, observamos que la sobrevida a 5 años de pacientes con lesiones en antro y cuerpo gástrico fueron de 68,2% y 50% respectivamente (p = 0,410). Conclusiones: El tipo histológico no constituye un factor pronóstico que tenga impacto en los resultados finales a largo plazo, sin embargo la localización tumoral al parecer si la tendría. Se hace necesario identificar con prontitud a otros factores clínicos, patológicos y moleculares de importancia pronóstica

El tesoro de la conciencia en torno a Carlos Gaviria Díaz

RESUMEN: El presente Leer y Releer se plantea como un homenaje a Carlos Gaviria Díaz, quien nació en Sopetrán, Antioquia, el 8 de mayo de 1937 y murió en Bogotá el 31 de marzo de 2015. El 8 de mayo de este mismo año la hasta ese momento Biblioteca Central de la Universidad de Antioquia asumió el nombre de Biblioteca Carlos Gaviria Díaz en homenaje a quien estuviera íntimamente ligado a la Universidad de Antioquia (y por lo tanto a la Biblioteca), dado que aquí estudió Derecho, fue profesor y decano de dicha facultad, presidente de la Asociación de Profesores y Vicerrector General. En otros ámbitos se desempeñó como magistrado y senador, y fue también candidato presidencial. Es decir, una vida dedicada a aprender, a enseñar y a ejercer el servicio público.Tabla de contenido: (1) Presentación por Luis Germán Sierra; (2) Carlos Gaviria o la pulcritud. In memorian 1937-2015 por Héctor Abad Faciolince (3) Palabras en la biblioteca por Carlos Gaviria Gómez; (4) La filosofía política del doctor Carlos Gaviria Díaz por Iván Darío Arango; (5) Carlos Gaviria Díaz: la honestidad intelectual y la democracia por Heriberto Santacruz Ibarra; (6) Sobre el delito político: evocando a Carlos Gaviria Díaz por Julio González Zapata; (7) Jorge Luis Borges, según Carlos Gaviria Díaz por Juan David Laverde Palma; (8) Fascismo ordinario por Carlos Gaviria Díaz; (9) La moral y el estado de derecho por Carlos Gaviria Díaz; (10) El tesoro de la conciencia por Carlos Gaviria Díaz; (11) Juan Carlos Osorno Saldarriaga por Luis Germán Sierra J

Group and call effect in achieving success in a subject: Analyses of the "Biology and Botany" whole life in the E.U.I.T.A. (University of Seville)

La Biología y la Botánica son dos materias fundamentales en la formación de un ingeniero técnico agrícola. Sus contenidos se han ofrecido a veces en asignaturas independientes y, en otras ocasiones como la que nos ocupa, en una sola asignatura. Por otra parte, siempre se ha mirado con interés, e incluso preocupación, el efecto de la variable grupo, de forma independiente o relacionándola con su distribución en turnos de mañana o tarde, así como la importancia de la convocatoria (en los distintos momentos a lo largo del curso académico) en la que el alumno consigue superar la asignatura. Aquí presentamos los resultados en la consecución de objetivos por parte de los alumnos y, por ende, de los profesores y de la Universidad de Sevilla a lo largo de la totalidad de la vida de la asignatura "Biología y Botánica" dentro del plan de estudios 2003/04 para tres titulaciones simultáneas, desde su comienzo en el curso 2003/04 hasta su extinción en el curso 2009/10, de la E.U.I.T.A. (Escuela Universitaria de Ingeniería Técnica Agrícola) de la Universidad de Sevilla. Además se consideran convocatorias pertenecientes al período de extinción añadido. Los análisis toman en cuenta además el éxito en la superación de la asignatura tanto de forma cualitativa (aprobado o suspenso de la evaluación a la que el alumno se ha sometido) como cuantitativa (nota conseguida). Las conclusiones obtenidas permiten mirar los resultados y la consecución de objetivos, así como una potencial toma de decisiones para el futuro, basándose en un marco temporal amplio y objetivo.Biology and Botany are two critical issues in the formation of a technical agricultural engineer. Their topics are sometimes offered in separate subjects and, at other times as here, within a single one. Besides, it has always been considered with interest, and even concern, the effect of the variable group, independently or in relation to their distribution in the morning or afternoon turns, and the importance of the call (at different times during the academic year) at which the student gets to pass the subject. Here we present the results in the achievement of objectives by students, and therefore teachers and the University of Seville, along the entire life of the subject "Biology and Botany" within the teaching 2003/04 plan for three simultaneous academic programs, from its start in the course 2003/04 to its extinction in the course 2009/10, in the E.U.I.T.A. (University School of Technical Agricultural Engineering) of the University of Seville. Calls belonging to the period of extinction are also considered. Analyses are both qualitative, based on having success in passing the subject or not, and quantitative (mark scored). Obtained conclusions let us see the results and the achievement of objectives, as well as a potential decision-making for the future, with a base on a comprehensive and objective frame