Seamless Integration of Group Communication into an Adaptive Online Exercise System

Distance learners in traditional online exercise and tutoring systems often get stuck with questions for which they need the help of a tutor or colleague. Learning alone can also be frustrating. In our Communication And Tutoring System CATS we have integrated the possibility to dial up a tutor and/or to setup an immediate group communication with other distance learners using Internet videoconferencing technology. To find the appropriate partner, we have implemented a measurement algorithm that keeps track of the performance level of a learner by measuring the percentage of correct answers at the current level, the reliability with which the learner answers the questions and the time he/she takes. From these measures we derive a unified performance parameter that controls the presentation of the next set of questions. These are then generated dynamically by the exercise applet. The CATS system automatically selects the most appropriate communica-tion partner(s) bas! ed on the exercises the learners are currently working on, and on their skill levels. We motivate this approach from a pedagogical point of view and present the architecture and implementation of the CATS system

理解状況に適応した多肢選択式問題の自動生成に関する構想

筆者らは、選択肢を適切に選択することにより、学習者の理解状況に応じた多肢選択式問題を自動的に生成する方法を検討している。多肢選択式問題は、問題文と選択肢による定型的な形式で生成されるため、語彙情報を知識ベースとして作成しておくことにより、機械的に多くの問題を生成できる。更に、学習者の語彙に対する理解状況を適切にモデリングすることにより、個々の学力に適応した問題を多数提供できることが期待できる。本稿ではその構想について報告する。Article教育システム情報学会研究報告. 21(4):3-8 (2006)journal articl

Modelo de evaluación adaptativa del nivel de conocimientos del estudiante para sistemas tutoriales inteligentes

El presente trabajo propone un modelo de valuación del nivel de conocimientos del estudiante en un sistema tutorial inteligente que se diferencia por su capacidad para adaptarse a las características de cada estudiante, tales como estilo de aprendizaje y nivel de conocimiento previo. A partir de la revisión del estado del arte en la temática se identificaron las principales técnicas usadas en evaluación adaptativa que fueron implementadas en el modelo propuesto, por ejemplo, los test adaptativos informatizados explican el procedimiento a seguir para llevar a cabo la evaluación de conocimientos y la teoría de respuesta al ítem propone el modelo probabilístico para representar el conocimiento del estudiante asociado a un tema según las respuestas dadas en un test de evaluación. La validación del modelo se realizó a través de casos de estudio con estudiantes simulados con el fin de contrastar los niveles de conocimiento diagnosticados tanto por el modelo de evaluación tradicional como por el modelo adaptativo. / Abstract: This work proposes a model for assessing the level of knowledge of a student in an Intelligent Tutoring System that differs from others because its capability to adapt itself to the student characteristics, such as learning style and previous knowledge. From the reviewing of the state of the art in this topic it was identified the main techniques used in adaptive assessment that were implemented in the proposed model, for example, Computerized Adaptative Testing explains the procedure for conducting knowledge assessment and Item Response Theory proposes the probabilistic model to represents the student's knowledge related to a topic according to the answers given in an assessment test. The model validation was accomplished through case studies with simulated students in order to compare knowledge levels diagnosed by both the traditional assessment model and the adaptive model.Maestrí

Sistemática para a implantação de testes adaptativos informatizados baseados na teoria da resposta ao item

Tese (doutorado) - Universidade Federal de Santa Catarina, Centro Tecnológico, Programa de Pós-Graduação em Engenharia de Produção, Florianópolis, 2011Essa tese apresenta uma sistemática para a implantação de Testes Adaptativos Informatizados baseados na Teoria da Resposta ao Item (SITAI), com a finalidade de servir como um suporte para a orientação nas etapas do desenvolvimento e elaboração de um TAI. A literatura existente sobre Testes Adaptativos Informatizados (TAI) geralmente está focada no que diz respeito ao algoritmo do TAI. Dessa forma, existe uma carência em encontrar um método para a implantação de TAIs. Nessa tese, foi desenvolvido um método, constituído por diretrizes, que sistematiza etapas para a elaboração de um TAI qualquer, independente das características particulares de cada um, onde o pesquisador poderá utilizá-lo como um guia para o desenvolvimento do TAI que deseja elaborar. A sistemática desenvolvida nessa tese pretende servir como um guia, principalmente ao usuário leigo que deseja desenvolver e implantar um TAI, orientando-o quanto à criação das etapas do teste, salientando os cuidados necessários na elaboração do mesmo, e indicando os métodos e critérios adequados para o teste a ser construído, de acordo com as características e especificações do teste. Nesse trabalho, também foi feito um levantamento bibliográfico exaustivo sobre TAIs, um levantamento bibliográfico sucinto sobre a TRI voltado para a aplicação de TAIs, foram definidas as etapas necessárias para a implantação de um TAI, segundo as características específicas do teste, foram identificados os mais diferentes métodos e critérios utilizados para a elaboração de um TAI e foi realizado um estudo de caso na avaliação teórica para a obtenção da carteira de habilitação de motorista realizada pelo Departamento de Trânsito do Estado de Santa Catarina (DETRAN-SC) a fim de aplicar e validar a sistemática desenvolvida. Embora a SITAI não tenha sido aplicada em sua plenitude, nas etapas em que ela foi aplicada, pode-se constatar que ela proporciona uma boa referência para a implantação de TAIs. Não houve grandes dificuldades para seguir a SITAI em relação à definição do teste, à calibração do banco de itens, à elaboração do algoritmo e à análise da precisão e da validade. Os resultados mostraram as deficiências e as vantagens potenciais da implantação de um TAI no DETRAN-SC