Medical competence:The interplay between individual ability and the health care environment

Competency-based education in the health care professions has become a prominent approach to postgraduate training in Canada, the Netherlands, the United Kingdom, the United States, and many other countries. Competency frameworks devised at national and international levels have been well received, and in many cases mandated, by governing bodies. However, the teaching and assessment of competencies pose questions of practicality, validity, and reliability. In this article we propose that competence and competencies be approached in the context of the particular clinical environment, such that the assessment of competence is tied to a trainee's performance of essential clinical activities that define the profession. Competence is implicit in the eventual entrustment of trainees to perform these professional activities. Competencies and "entrustable professional activities'' (EPAs) relate to each other as two dimensions of a grid in which each EPA can be mapped back to a number of competencies. This backward visioning from EPAs to competencies is proposed as a guide to curriculum planning and assessment. The authors discuss experiences with this conceptual model in research, curriculum development and learner assessment

The Future of High-Quality Care Depends on Better Assessment of Physician Performance

Item does not contain fulltex

An online evidence based medicine exercise prompts reflection in third year medical students

BACKGROUND: Reflective practice is a desirable trait in physicians, yet there is little information about how it is taught to or learned by medical students. The purpose of this study was to determine whether an online Evidence Based Medicine (EBM) exercise with a face-to-face debriefing session would prompt third year medical students to reflect on their current skills and lead them to further reflection on clinical decision making in the future. METHODS: All third year medical students at the University Of Maryland School Of Medicine who completed their pediatrics clerkship between 7/1/09 and 2/11/11 were required to complete the EBM exercise. Following completion each student received a personal report (Learning Profile) of their responses and attended a one hour large group debriefing session. Student responses to a survey following the debriefing sessions were analyzed using a post-test survey design with a single experimental cohort. RESULTS: Ninety-five percent of students completing the debriefing survey indicated that the debriefing session helped them better understand their learning profiles; 68% stated that their profiles allowed them to evaluate themselves and their decisions. Sixty-three percent noted that participating in the exercise and the debrief would lead them to either learn more about EBM and use EBM more in the future or reflect more on their own decision making. CONCLUSIONS: The EBM exercise was a successful way to introduce the concept of reflective practice to third year medical students, and the graphic Learning Profiles were effective instigators of discussion and reflection

Le Passeport éducatif : relier l’évaluation programmatique à l’apprentissage et à la pratique tout au long de la formation

Competency-based medical education (CBME) shifts us from static assessment of learning to developmental assessment for learning. However, implementation challenges associated with CBME remain a major hurdle, especially after training and into practice. The full benefit of developmental assessment for learning over time requires collaboration, cooperation, and trust among learners, regulators, and the public that transcends each individual phase. The authors introduce the concept of an “Education Passport” that provides evidence of readiness to travel across the boundaries between undergraduate medical education, graduate medical education, and the expanse of practice. The Education Passport uses programmatic assessment, a process of collecting numerous low stakes assessments from multiple sources over time, judging these data using criterion-referencing, and enhancing this with coaching and competency committees to understand, process, and accelerate growth without end. Information in the Passport is housed on a cloud-based server controlled by the student/physician over the course of training and practice. These data are mapped to various educational frameworks such Entrustable Professional Activities or milestones for ease of longitudinal performance tracking. At each stage of education and practice the student/physician grants Passport access to all entities that can provide data on performance. Database managers use learning analytics to connect and display information over time that are then used by the student/physician, their assigned or chosen coaches, and review committees to maintain or improve performance. Global information is also collected and analyzed to improve the entire system of learning and care. Developing a true continuum that embraces performance and growth will be a long-term adaptive challenge across many organizations and jurisdictions and will require coordination from regulatory and national agencies. An Education Passport could also serve as an organizing tool and will require research and high-value communication strategies to maximize public trust in the work.La formation médicale fondée sur les compétences (FMFC) nous fait passer d’une évaluation statique à une évaluation évolutive de l’apprentissage. Cependant, les défis qui accompagnent sa mise en œuvre demeurent un obstacle majeur, en particulier après la formation et dans la pratique. Pour tirer pleinement parti de l’évaluation évolutive de l’apprentissage au fil du temps, il faut une collaboration, une coopération et une confiance entre les apprenants, les organismes de réglementation et le public qui transcendent chaque phase individuelle. Les auteurs présentent le concept de « passeport éducatif » en guise de titre attestant que l’on est prêt à franchir les frontières entre la formation médicale de premier cycle, la formation postdoctorale et l’étendue de la pratique. Dans le passeport éducatif, on utilise l’évaluation programmatique, un processus qui consiste à rassembler de nombreuses évaluations à faible enjeu provenant de sources multiples au fil du temps, dont les données sont évaluées à l’aide de critères de référence et améliorées par un encadrement et un examen par des comités de compétences afin de comprendre, de développer et d’accélérer la croissance de façon continue. Les informations contenues dans le passeport sont hébergées sur un serveur nuagique contrôlé par l’étudiant/médecin au cours de sa formation et de sa pratique. Ces données sont cartographies en fonction de divers cadres éducatifs comme les activités professionnelles confiables ou des jalons pour faciliter le suivi longitudinal des performances. À chaque étape de la formation et de la pratique, l’étudiant/médecin accorde l’accès au passeport à toutes les entités qui peuvent fournir des données sur ses performances. Les gestionnaires de la base de données utilisent l’analyse de l’apprentissage pour recouper et afficher les informations au fil du temps, informations qui sont ensuite utilisées par l’étudiant/médecin, les coachs qu’on lui a désignés ou qu’il a choisis, et les comités d’examen pour maintenir ou améliorer les performances. Des informations globales sont également recueillies et analysées pour améliorer l’ensemble du système d’apprentissage et de soins. L’élaboration d’un véritable continuum qui englobe la performance et la croissance constituera un défi d’adaptation à long terme pour les organisations et les provinces, et nécessitera une coordination entre instances réglementaires à l’échelle du pays. Le passeport éducatif pourrait également servir d’outil d’organisation, mais il impliquera des recherches et des stratégies de communication importantes pour maximiser la confiance du public dans ce travail.

The education passport: Connecting programmatic assessment across learning and practice

Competency-based medical education (CBME) shifts us from static assessment of learning to developmental assessment for learning. However, implementation challenges associated with CBME remain a major hurdle, especially after training and into practice. The full benefit of developmental assessment for learning over time requires collaboration, cooperation, and trust among learners, regulators, and the public that transcends each individual phase. The authors introduce the concept of an “Education Passport” that provides evidence of readiness to travel across the boundaries between undergraduate medical education, graduate medical education, and the expanse of practice.The Education Passport uses programmatic assessment, a process of collecting numerous low stakes assessments from multiple sources over time, judging these data using criterion-referencing, and enhancing this with coaching and competency committees to understand, process, and accelerate growth without end. Information in the Passport is housed on a cloud-based server controlled by the student/physician over the course of training and practice. These data are mapped to various educational frameworks such Entrustable Professional Activities or milestones for ease of longitudinal performance tracking. At each stage of education and practice the student/physician grants Passport access to all entities that can provide data on performance. Database managers use learning analytics to connect and display information over time that are then used by the student/physician, their assigned or chosen coaches, and review committees to maintain or improve performance. Global information is also collected and analyzed to improve the entire system of learning and care.Developing a true continuum that embraces performance and growth will be a long-term adaptive challenge across many organizations and jurisdictions and will require coordination from regulatory and national agencies. An Education Passport could also serve as an organizing tool and will require research and high-value communication strategies to maximize public trust in the work.La formation médicale fondée sur les compétences (FMFC) nous fait passer d’une évaluation statique à une évaluation évolutive de l’apprentissage. Cependant, les défis qui accompagnent sa mise en œuvre demeurent un obstacle majeur, en particulier après la formation et dans la pratique. Pour tirer pleinement parti de l’évaluation évolutive de l’apprentissage au fil du temps, il faut une collaboration, une coopération et une confiance entre les apprenants, les organismes de réglementation et le public qui transcendent chaque phase individuelle. Les auteurs présentent le concept de « passeport éducatif » en guise de titre attestant que l’on est prêt à franchir les frontières entre la formation médicale de premier cycle, la formation postdoctorale et l’étendue de la pratique.Dans le passeport éducatif, on utilise l’évaluation programmatique, un processus qui consiste à rassembler de nombreuses évaluations à faible enjeu provenant de sources multiples au fil du temps, dont les données sont évaluées à l’aide de critères de référence et améliorées par un encadrement et un examen par des comités de compétences afin de comprendre, de développer et d’accélérer la croissance de façon continue. Les informations contenues dans le passeport sont hébergées sur un serveur nuagique contrôlé par l’étudiant/médecin au cours de sa formation et de sa pratique. Ces données sont cartographies en fonction de divers cadres éducatifs comme les activités professionnelles confiables ou des jalons pour faciliter le suivi longitudinal des performances. À chaque étape de la formation et de la pratique, l’étudiant/médecin accorde l’accès au passeport à toutes les entités qui peuvent fournir des données sur ses performances. Les gestionnaires de la base de données utilisent l’analyse de l’apprentissage pour recouper et afficher les informations au fil du temps, informations qui sont ensuite utilisées par l’étudiant/médecin, les coachs qu’on lui a désignés ou qu’il a choisis, et les comités d’examen pour maintenir ou améliorer les performances. Des informations globales sont également recueillies et analysées pour améliorer l’ensemble du système d’apprentissage et de soins.L’élaboration d’un véritable continuum qui englobe la performance et la croissance constituera un défi d’adaptation à long terme pour les organisations et les provinces, et nécessitera une coordination entre instances réglementaires à l’échelle du pays. Le passeport éducatif pourrait également servir d’outil d’organisation, mais il impliquera des recherches et des stratégies de communication importantes pour maximiser la confiance du public dans ce travail