Formal instruction of medical residents in teaching techniques

Introdução: Médicos residentes (MR) representam uma grande força de trabalho na maioria dos hospitais universitários brasileiros. O contato destes com alunos da graduação e do internato acrescenta atividades didáticas ao seu repertório diário de atividades assistenciais. Estudos norte-americanos e canadenses demonstram que até 25% do tempo de trabalho de médicos residentes é exercido como atividade de ensino. Pesquisadores apontaram que alunos de medicina creditam aos MR30-85% de toda a teoria clínica adquirida na graduação. Nos Estados Unidos criaram-se programas de capacitação didática, conhecidos como \"Residents as Teachers\" (RaTs) - residentes como professores, atualmente presentes em 80% daquelas instituições. Em nosso meio, todo esse contato se dá com pouco ou nenhum treinamento formal dos residentes em técnicas de ensino. No presente estudo investigou-se a hipótese de que o treinamento formal de MR em técnicas de ensino poderia aumentar o desempenho em habilidades de ensino clínico. Métodos: Estudo prospectivo, onde escores pré e pós-intervenção foram aferidos por meio de atividades simuladas desenvolvidas, especificamente, para este fim. Quarenta e nove médicos residentes dos programas de clínica médica, cirurgia geral, dermatologia e infectologia da Universidade Federal de Uberlândia participaram do estudo. Foram elaboradas 4 estações simuladas para avaliação de habilidades didáticas em cenários de ambulatório, enfermaria, unidade de emergências e durante a orientação de um procedimento. Todos os MR tiveram seus desempenhos gravados em vídeo para avaliação posterior, por 3 investigadores independentes, que atribuíram escores padronizados para cada cenário. Os MR foram avaliados em 3 etapas, com 1 semana de intervalo entre elas: basal (D1), após primeira intervenção (D2), após segunda intervenção (D3). A intervenção principal baseou-se no método de ensino clínico \"Preceptoria em um Minuto - PEM\" e uma intervenção controle de comunicação de más notícias. Os residentes foram randomizados eletronicamente quanto à ordem de recebimento de cada uma das intervenções após D1. Todos os residentes foram submetidos às intervenções, principal e controle, com uma semana de intervalo, de acordo com a randomização. Resultados: Houve aumento estatisticamente significativo nos escores das avaliações de desempenho dos MR quando comparadas avaliações pré e pós-intervenções nas estações enfermaria e procedimento. As estações emergência e ambulatório produziram baixas confiabilidades entre avaliadores. Na estação enfermaria, foram observadas medianas de escores de 109,5 para a D1; 142,5 para D2 e 137,5 para D3, com diferença significativa entre as etapas de avaliação (p=0,009). Análise pós-hoc para comparação de pares demonstrou diferença significativa entre D1 e D2 (p=0,011). Análise de confiabilidade da estação enfermaria pela teoria da generalização (teoria G) demonstrou coeficientes de 0,545 para D1; 0,702 para D2 e 0,860 para D3. Os coeficientes de consistência interna e confiabilidade entre avaliadores foram respectivamente 0,913 e 0,595. Na estação procedimentos, foram observadas medianas de escores de 99 para D1; 119 D2; e 119,5 D3. Houve diferença significativa entre as etapas de avaliação com p < 0,001. Análise pós-hoc para comparação de pares demonstrou diferença significativa entre D1 e D2 (p=0,001) e entre D1 e D3 (p= 0,004). Coeficientes G para as etapas de avaliação da estação procedimentos foram calculados em 0,683 para D1; 0,681 para D2 e 0,670 para D3. Consistência interna resultou um coeficiente de 0,726 e a confiabilidade entre avaliadores 0,772. Conclusões: O presente estudo demonstrou ganho na aquisição de habilidades de ensino clínico, em MR brasileiros após intervenção específica com método PEM. Observou-se aumento progressivo da confiabilidade geral para a estação enfermaria, com um coeficiente condizente com avaliações de alto padrão obtido em D3. A estação enfermaria também produziu uma alta consistência interna e confiabilidade moderada entre avaliadores. A estação procedimentos produziu coeficientes de confiabilidade bons, porém estáveis através das etapas do estudo. As estações emergência e ambulatório produziram coeficientes de confiabilidade entre observadores ruins, o que prejudicou a análise final dos resultadosIntroduction: Medical residents (MR) represent a powerful work force in most of Brazilian teaching hospitals. Their contact with undergraduate students adds to their daily work teaching activities. Studies from the United States (US) and Canada indicate that 25% of a resident\'s working time is spent in teaching duties. Other researchers point to the fact that medical students attribute to MR 30-85% of all clinical theory acquired during graduation. In the US, programs developed specifically to foster MR\'s teaching skills, known as \"Residents as Teachers\" (RaTs), are now present at nearly 80% of American institutions. In Brazil, the close contact between MR and interns is conceived under little or no formal training in clinical teaching skills. The present study investigated if delivering teaching skills to MR would enhance their ability to teach simulated interns. Methods: We developed a prospective study where scores pre and post intervention were obtained through simulated activities, specifically designed for this purpose. Forty-nine medical residents from internal medicine, general surgery, dermatology and infectious diseases programs in Universidade Federal de Uberlandia took part in the activities. Four simulated stations were developed to assess clinical teaching skills in different scenarios: a clinical ward, in the emergency department, during ambulatory consultation and while teaching a simple procedure. All participants had their performances recorded in video for further evaluation. Three independent raters used a standardized questionnaire to attribute scores for every MR\'s recorded performance. All MRs were evaluated in 3 distinct occasions, one week apart: pre- intervention (D1), after first intervention (D2) and after second intervention (D3). The main intervention was based on a lecture about a teaching skill\'s method, the \"One Minute Preceptor\". Control intervention was based on a lecture about how to deliver bad news. All residents were electronically randomized to receive the main or control interventions after D1. All residents received both interventions, one week apart, according to randomization. Results: There was a statistically significant increase in the performance\'s scores of MRs when we compared pre and post intervention evaluations for stations clinical ward and teaching a procedure. For the clinical ward station, median scores were 109.5 for D1, 142.5 for D2 and 137.5 for D3, with a significant difference between 3 occasions (p= 0.009). Post-hoc analysis was carried out and evidenced significant differences between D1 and D2 (p=0.011). Reliability estimates were calculated using generalizability theory (G theory). The overall coefficient was 0.545 for D1, 0.702 for D2 and 0.860 for D3. Internal consistency resulted in a 0.913 coefficient and interrater reliability 0.595. In teaching a procedure station, we observed median scores of 99 for D1, 119 for D2 and 119.5 for D3. The difference across all occasions was statistically different (p < 0.001). Post-hoc analysis evidenced significant differences between D1 and D2 (p=0.001); D1 and D3 (p=0,004). G coefficients for the occasions were 0.683 for D1, 0.681 for interrater reliability was 0.772. Conclusions: The present study evidenced a gain in clinical teaching skills after specific training session based on the \"One Minute Preceptor\" method, in studied Brazilian MRs. The reliability analysis demonstrated progressive G coefficients across occasions in the clinical ward station, reaching levels expected for high stakes evaluations in E3. The clinical ward station also showed a high internal consistency and moderate interrater reliability. The procedure station resulted in good reliability coefficients across occasions, but they were stable in all of them. Clinical ward and emergency stations produced poor interrater reliability coefficients, which impaired interpretation of final result

Formal instruction of medical residents in teaching techniques

Introdução: Médicos residentes (MR) representam uma grande força de trabalho na maioria dos hospitais universitários brasileiros. O contato destes com alunos da graduação e do internato acrescenta atividades didáticas ao seu repertório diário de atividades assistenciais. Estudos norte-americanos e canadenses demonstram que até 25% do tempo de trabalho de médicos residentes é exercido como atividade de ensino. Pesquisadores apontaram que alunos de medicina creditam aos MR30-85% de toda a teoria clínica adquirida na graduação. Nos Estados Unidos criaram-se programas de capacitação didática, conhecidos como \"Residents as Teachers\" (RaTs) - residentes como professores, atualmente presentes em 80% daquelas instituições. Em nosso meio, todo esse contato se dá com pouco ou nenhum treinamento formal dos residentes em técnicas de ensino. No presente estudo investigou-se a hipótese de que o treinamento formal de MR em técnicas de ensino poderia aumentar o desempenho em habilidades de ensino clínico. Métodos: Estudo prospectivo, onde escores pré e pós-intervenção foram aferidos por meio de atividades simuladas desenvolvidas, especificamente, para este fim. Quarenta e nove médicos residentes dos programas de clínica médica, cirurgia geral, dermatologia e infectologia da Universidade Federal de Uberlândia participaram do estudo. Foram elaboradas 4 estações simuladas para avaliação de habilidades didáticas em cenários de ambulatório, enfermaria, unidade de emergências e durante a orientação de um procedimento. Todos os MR tiveram seus desempenhos gravados em vídeo para avaliação posterior, por 3 investigadores independentes, que atribuíram escores padronizados para cada cenário. Os MR foram avaliados em 3 etapas, com 1 semana de intervalo entre elas: basal (D1), após primeira intervenção (D2), após segunda intervenção (D3). A intervenção principal baseou-se no método de ensino clínico \"Preceptoria em um Minuto - PEM\" e uma intervenção controle de comunicação de más notícias. Os residentes foram randomizados eletronicamente quanto à ordem de recebimento de cada uma das intervenções após D1. Todos os residentes foram submetidos às intervenções, principal e controle, com uma semana de intervalo, de acordo com a randomização. Resultados: Houve aumento estatisticamente significativo nos escores das avaliações de desempenho dos MR quando comparadas avaliações pré e pós-intervenções nas estações enfermaria e procedimento. As estações emergência e ambulatório produziram baixas confiabilidades entre avaliadores. Na estação enfermaria, foram observadas medianas de escores de 109,5 para a D1; 142,5 para D2 e 137,5 para D3, com diferença significativa entre as etapas de avaliação (p=0,009). Análise pós-hoc para comparação de pares demonstrou diferença significativa entre D1 e D2 (p=0,011). Análise de confiabilidade da estação enfermaria pela teoria da generalização (teoria G) demonstrou coeficientes de 0,545 para D1; 0,702 para D2 e 0,860 para D3. Os coeficientes de consistência interna e confiabilidade entre avaliadores foram respectivamente 0,913 e 0,595. Na estação procedimentos, foram observadas medianas de escores de 99 para D1; 119 D2; e 119,5 D3. Houve diferença significativa entre as etapas de avaliação com p < 0,001. Análise pós-hoc para comparação de pares demonstrou diferença significativa entre D1 e D2 (p=0,001) e entre D1 e D3 (p= 0,004). Coeficientes G para as etapas de avaliação da estação procedimentos foram calculados em 0,683 para D1; 0,681 para D2 e 0,670 para D3. Consistência interna resultou um coeficiente de 0,726 e a confiabilidade entre avaliadores 0,772. Conclusões: O presente estudo demonstrou ganho na aquisição de habilidades de ensino clínico, em MR brasileiros após intervenção específica com método PEM. Observou-se aumento progressivo da confiabilidade geral para a estação enfermaria, com um coeficiente condizente com avaliações de alto padrão obtido em D3. A estação enfermaria também produziu uma alta consistência interna e confiabilidade moderada entre avaliadores. A estação procedimentos produziu coeficientes de confiabilidade bons, porém estáveis através das etapas do estudo. As estações emergência e ambulatório produziram coeficientes de confiabilidade entre observadores ruins, o que prejudicou a análise final dos resultadosIntroduction: Medical residents (MR) represent a powerful work force in most of Brazilian teaching hospitals. Their contact with undergraduate students adds to their daily work teaching activities. Studies from the United States (US) and Canada indicate that 25% of a resident\'s working time is spent in teaching duties. Other researchers point to the fact that medical students attribute to MR 30-85% of all clinical theory acquired during graduation. In the US, programs developed specifically to foster MR\'s teaching skills, known as \"Residents as Teachers\" (RaTs), are now present at nearly 80% of American institutions. In Brazil, the close contact between MR and interns is conceived under little or no formal training in clinical teaching skills. The present study investigated if delivering teaching skills to MR would enhance their ability to teach simulated interns. Methods: We developed a prospective study where scores pre and post intervention were obtained through simulated activities, specifically designed for this purpose. Forty-nine medical residents from internal medicine, general surgery, dermatology and infectious diseases programs in Universidade Federal de Uberlandia took part in the activities. Four simulated stations were developed to assess clinical teaching skills in different scenarios: a clinical ward, in the emergency department, during ambulatory consultation and while teaching a simple procedure. All participants had their performances recorded in video for further evaluation. Three independent raters used a standardized questionnaire to attribute scores for every MR\'s recorded performance. All MRs were evaluated in 3 distinct occasions, one week apart: pre- intervention (D1), after first intervention (D2) and after second intervention (D3). The main intervention was based on a lecture about a teaching skill\'s method, the \"One Minute Preceptor\". Control intervention was based on a lecture about how to deliver bad news. All residents were electronically randomized to receive the main or control interventions after D1. All residents received both interventions, one week apart, according to randomization. Results: There was a statistically significant increase in the performance\'s scores of MRs when we compared pre and post intervention evaluations for stations clinical ward and teaching a procedure. For the clinical ward station, median scores were 109.5 for D1, 142.5 for D2 and 137.5 for D3, with a significant difference between 3 occasions (p= 0.009). Post-hoc analysis was carried out and evidenced significant differences between D1 and D2 (p=0.011). Reliability estimates were calculated using generalizability theory (G theory). The overall coefficient was 0.545 for D1, 0.702 for D2 and 0.860 for D3. Internal consistency resulted in a 0.913 coefficient and interrater reliability 0.595. In teaching a procedure station, we observed median scores of 99 for D1, 119 for D2 and 119.5 for D3. The difference across all occasions was statistically different (p < 0.001). Post-hoc analysis evidenced significant differences between D1 and D2 (p=0.001); D1 and D3 (p=0,004). G coefficients for the occasions were 0.683 for D1, 0.681 for interrater reliability was 0.772. Conclusions: The present study evidenced a gain in clinical teaching skills after specific training session based on the \"One Minute Preceptor\" method, in studied Brazilian MRs. The reliability analysis demonstrated progressive G coefficients across occasions in the clinical ward station, reaching levels expected for high stakes evaluations in E3. The clinical ward station also showed a high internal consistency and moderate interrater reliability. The procedure station resulted in good reliability coefficients across occasions, but they were stable in all of them. Clinical ward and emergency stations produced poor interrater reliability coefficients, which impaired interpretation of final result

Residente como Professor: uma Iniciação à Docência

RESUMO A residência médica, instituída legalmente no Brasil em 1977 pelo Decreto nº 80.281, é considerada a melhor estratégia de ensino em cenário de prática, sendo o padrão ouro da especialização médica. A característica mais marcante da residência é o treinamento em serviço, que articula ensino no cenário de prática, além de construir um perfil profissional. Os residentes desenvolvem também a função docente. Pesquisas americanas estimam que exerçam tal função em boa parte de suas atividades, chegando a um quarto do período total de tempo de seus programas de residência. Esse processo de ensino-aprendizagem durante a residência ainda é pouco estudado, principalmente no Brasil. O objetivo deste estudo foi realizar uma ampla revisão narrativa sobre RaT (Resident as Teacher), tema pouco explorado na literatura brasileira, avaliando historicamente o processo de ensino-aprendizagem dos programas de residência médica. Foi realizada uma revisão na literatura acerca do processo de ensino-aprendizagem da residência médica no Brasil e no mundo. Diversos países estão implementando treinamentos formais de ensino denominados programas de Resident as Teacher (RaT). Somente nos EUA, mais de 50% dos programas de residência têm alguma forma de treinamento RaT. Vários programas foram desenvolvidos e se diferenciam no conteúdo, na duração e no formato, porém são baseados em atributos de ensino considerados essenciais ao ensino. No que diz respeito ao conteúdo, os programas RaT enfatizam predominantemente o modelo preceptor minuto (One Minute Preceptor – OMP), a estrutura de ensino clínico do Programa de Desenvolvimento da Faculdade de Stanford ou os domínios mostrados por Irby como essenciais à excelência em ensino clínico. Em conclusão, sugere-se que os programas brasileiros de residência médica invistam em estudos e, consequentemente, em estratégias efetivas para aprimorar as técnicas de ensino para médicos residentes

Teaching skills for medical residents: are these important? A narrative review of the literature

ABSTRACT BACKGROUND: There is extensive evidence, mainly from the United States and Canada, that points towards the need to train medical residents in teaching skills. Much of the “informal curriculum”, including professional values, is taught by residents when consultants are not around. Furthermore, data from the 1960s show the importance of acquiring these skills, not only for residents but also for all doctors. Teaching moments can be identified in simple daily situations, like discussing a clinical situation with patients and their families, planning patients’ care with the healthcare team or teaching peers and medical students. The aim here was to examine the significance of resident teaching courses and estimate the effectiveness of these courses and the state of the art in Brazil. METHODS: We conducted a review of the literature, using the MEDLINE, PubMed, SciELO and LILACS databases to extract relevant articles describing residents-as-teachers (RaT) programs and the importance of teaching skills for medical residents. This review formed part of the development of a doctoral project on medical education. RESULTS: Original articles, reviews and systematic reviews were used to produce this paper as part of a doctoral project. CONCLUSIONS: RaT programs are important in clinical practice and as role models for junior learners. Moreover, these educational programs improve residents’ self-assessed teaching behaviors and teaching confidence. On the other hand, RaT program curricula are limited by both the number of studies and their methodologies. In Brazil, there is no such experience, according to the data gathered here, except for one master’s thesis