RESUMO

Resumo Contextos avaliativos tendem a ser ansiogênicos para a maior parte das pessoas. Assim, compreender os níveis de ansiedade frente a provas é uma possibilidade para auxiliar o estudante individualmente, bem como compreender processos educativos mais amplos. Este estudo teve como objetivo avaliar as evidências de validade de estrutura interna, precisão e invariância na versão reduzida do Inventário de Ansiedade Frente a Provas (IAP). O estudo foi realizado com 1137 estudantes com idades variando de 18 a 63 anos (M = 25,94; DP = 7,37) no estado do Rio de Janeiro. Os resultados indicaram uma estrutura formada por quatro fatores: preocupação, falta de confiança, distração e emoção. Também foram evidenciadas boas estimas de precisão, com alfas variando de 0,86 a 0,93. Foram apresentadas evidências de invariância quanto ao sexo para o IAP, com as mulheres apresentando maiores níveis de ansiedade, podendo ser pensadas ações focais principalmente no público feminino. A versão curta do inventário é um bom recurso para avaliações no contexto educacional e auxílio na compreensão de ansiedade nessas situações. Novos estudos são sugeridos para buscar por evidências de validade de critério e controle de vieses de resposta no IAP.

Abstract Evaluative contexts tend to be anxiogenic for most people. Thus, understanding levels of anxiety in the face of tests is a possibility to help individual students, as well as to understand broader educational processes. This study aimed to evaluate evidence of internal structure validity, accuracy and invariance in the short version of the Test Anxiety Inventory (IAP). The study was carried out with 1137 students aged between 18 and 63 years (M = 25.94; SD = 7.37) in the state of Rio de Janeiro. The results indicated a structure formed by four factors: concern, lack of confidence, distraction and emotion. Good precision estimates were also evidenced, with alphas ranging from 0.86 to 0.93. Evidences of gender invariance were presented for the IAP, with women presenting higher levels of anxiety, and focal actions can be considered, mainly in the female public. The short version of the inventory is a good resource for assessments in the educational context and helps to understand anxiety in these situations. New studies are suggested to look for evidence of criterion validity and control of response biases in the IAP.

Resumen Los entornos de evaluación suelen generar ansiedad en la mayoría de las personas. Por lo tanto, comprender los niveles de ansiedad ante los exámenes puede ayudar al estudiante de manera individual y también comprender procesos educativos más amplios. En este estudio, evaluamos la validez interna, la precisión y la invarianza en la versión reducida del Inventario de Ansiedad Frente a Exámenes (IAE). Se entrevistó a 1137 estudiantes con edades entre 18 y 63 años (M = 25.94; DP = 7.37) en el estado de Río de Janeiro. Los resultados mostraron una estructura de cuatro factores: preocupación, falta de confianza, distracción y emoción. También obtuvimos buenas estimaciones de precisión, con alfas que variaron de 0.86 a 0.93. Se encontró que el IAE es invariante en cuanto al sexo, con las mujeres mostrando niveles más altos de ansiedad. Esto sugiere la necesidad de acciones específicas dirigidas principalmente al público femenino. La versión reducida del inventario es una herramienta útil para evaluaciones en el contexto educativo y para comprender la ansiedad en estas situaciones. Recomendamos realizar estudios futuros para examinar la validez de criterio y controlar posibles sesgos de respuesta en el IAE.

RESUMO

Resumo: O objetivo do estudo é analisar o perfil de egressos e identificar fatores associados ao desempenho positivo relativo à trajetória de formação e de inserção profissional entre aqueles que concluíram cursos presenciais de mestrado e doutorado acadêmico da Fundação Oswaldo Cruz (Brasil). Participaram do estudo 2.462 egressos (1.402 de mestrado e 1.060 de doutorado) que responderam um questionário digital, contendo questões sobre perfil do egresso e inserção profissional antes do ingresso no curso e após a conclusão. Foi criada uma medida sobre "desempenho positivo pós-curso". Os resultados revelam que egressos de mestrado com impacto positivo do curso tendem a ser homens; ter especialização antes de ingressar no curso; ter emprego remunerado após o término do curso nas áreas de pesquisa, educação, assistência e gestão; e ser servidor público. No doutorado o seguinte perfil é evidenciado: egressos com emprego remunerado após o término do curso nas áreas de pesquisa ou educação; contratados por Regime Jurídico Único ou contrato temporário de pessoa jurídica; e com publicação científica ou patente. A avaliação/acompanhamento de egressos deve se instaurar como uma importante política pública educacional, incorporada no processo de autoavaliação institucional, o que possibilita rever rumos e prioridades na agenda educacional e pedagógica da instituição.

Abstract: This study aims to analyze the profile of graduates and identify factors associated with positive performance regarding training and professional insertion among those who have completed face-to-face master's and doctoral courses at the Oswaldo Cruz Foundation (Brazil). A total of 2,462 graduates participated in the study (1,402 master's and 1,060 doctoral graduates), who answered a digital questionnaire containing questions about individual characteristics and professional insertion before entering the course and after completion. A measure on "positive post-course performance" was created. The results show that Master's graduates with a positive impact from the course tend to be men; to have a specialization degree before entering the course; to have paid employment after finishing the course in the areas of research, education, assistance, and management; and to be civil servants. In the Doctorate, the following profile is evident: graduates with paid employment after finishing the course in the areas of research or education; hired under a single legal regime or temporary contract as a legal entity; and with a scientific publication or patent. Evaluating/monitoring graduates must be established as an important public educational policy, incorporated into the institutional self-evaluation process, which makes it possible to review directions and priorities in the institution's educational and pedagogical agenda.

Resumen: El objetivo del estudio es analizar el perfil de egresados e identificar factores asociados al desempeño positivo relacionado a la trayectoria de formación e inserción profesional entre aquellos que concluyeron cursos presenciales de maestría y doctorado académico de la Fundación Oswaldo Cruz (Brasil). Participaron del estudio 2.462 egresados (1.402 de maestría y 1.060 de doctorado) que contestaron el cuestionario de manera digital, con preguntas sobre el perfil del egresado y la inserción profesional antes del ingreso al curso y tras su conclusión. Se creó una medida sobre "desempeño positivo tras el curso". Los resultados muestran que los egresados de la maestría con un impacto positivo del curso tienden a ser hombres; tener especialización antes de ingresar al curso; tener trabajo remunerado tras concluir el curso en las áreas de investigación, educación, asistencia y gestión; y ser funcionario público. Se evidencia el siguiente perfil en el doctorado: egresados con trabajo remunerado tras el término del curso en las áreas de investigación o educación; contratados bajo un régimen jurídico único o un contrato temporal de persona jurídica; y con publicación científica o patente. La evaluación/seguimiento de egresados se debe establecer como una importante política pública educativa, incorporada en el proceso de autoevaluación institucional, lo que permite revisar direcciones y prioridades en la agenda educativa y pedagógica de la institución.

RESUMO

Resumo Introdução: Com a evolução do ensino médico para currículos baseados em competências, fez-se necessária uma readequação dos currículos e dos métodos de avaliação, com maior enfoque sobre o cenário de prática profissional e, portanto, na utilização de ferramentas como o Mini-Clinical Evaluation Exercise (Mini-CEX). Objetivo: Este estudo teve como objetivo avaliar o uso da estratégia Mini-CEX como método de avaliação nos programas de residência médica. Método: Trata-se de uma revisão de escopo, cuja estratégia de busca realizada no PubMed resultou em 578 artigos. Após aplicar a metodologia do Instituto Joanna Briggs para inclusão e exclusão, foram selecionados 24 estudos transversais. Resultado: Selecionaram-se artigos referentes a estudos realizados entre 1995 e 2021, em diversos continentes, diferentes programas de residência, e cenários ambulatorial, internação e de emergência. O Mini-CEX mostrou-se aplicável no contexto da residência médica, pois trata-se de uma avaliação observacional direta do atendimento realizado pelo médico residente nos diversos cenários de atuação, como ambulatórios, internações e emergências. Trata-se de uma avaliação com tempo de observação variando de dez a 40 minutos e que permite a abordagem de vários aspectos do atendimento médico, como anamnese, exame físico, raciocínio clínico e aconselhamento, além de possibilitar a realização de um feedback sobre o desempenho dos residentes. Conclusão: O Mini-CEX constitui uma ferramenta de fácil aplicabilidade e promove alto grau de satisfação dos envolvidos, podendo ser utilizada de forma rotineira nos programas de residência médica.

Abstract Introduction: With the evolution of medical education towards competency-based curriculum, the need has emerged to reconfigure curriculum and assessment methods, with increased focus on the professional practice setting, thus leading to the utilization of tools such as the mini-CEX (mini-Clinical Evaluation Exam). Objective: To evaluate the use of the mini-CEX strategy as an assessment method in medical residency programs. Method: This is a scoping review, and the search performed on PubMed resulted in 578 articles. After applying the Joanna Briggs Institute methodology for inclusion and exclusion, 24 cross-sectional studies were selected. Results: The selected articles were based on studies conducted between 1995 and 2021, in various continents and in both clinical and surgical residency programs, including outpatient, inpatient, and emergency settings. The Mini-CEX was shown to be applicable in the context of medical residency, as it is an observational assessment of the care provided by the resident physician in various practice settings such as outpatient clinics, inpatient wards, and emergency departments. It involves a variable observation time ranging from 10 to 40 minutes and allows for the evaluation of various aspects of medical care, including history taking, physical examination, clinical reasoning, counseling, and provides an opportunity for providing feedback on the residents' performance. Conclusion: The mini-CEX is a tool that is easy to implement and promotes a high degree of satisfaction among stakeholders. It could be used more routinely in medical residency programs.

RESUMO

RESUMO Introdução: Embora na literatura médica existam diversas métricas para avaliar a qualidade dos programas de residência, os instrumentos avaliativos tendem a focar as dimensões dos residentes e preceptores. Isso negligencia uma ampla gama de partes interessadas (stakeholders), cujas perspectivas são fundamentais para uma compreensão holística da qualidade dos programas. Objetivo: Diante desse contexto, esta revisão teve como objetivos mapear os principais stakeholders envolvidos na residência médica, identificar e categorizar as métricas de avaliação da qualidade dos programas mais prevalentes na literatura, e analisar a sua relevância em relação às perspectivas das partes interessadas. Método: Inicialmente, foi realizada uma revisão de escopo da literatura para identificar e categorizar os stakeholders, além de mapear as métricas de qualidade. Posteriormente, um painel Delphi foi conduzido para analisar a relevância dessas métricas em relação às perspectivas das partes interessadas identificadas. Resultado: Foram mapeados 14 stakeholders e identificadas 17 métricas, posteriormente divididas em quatro categorias principais. As métricas "adaptabilidade" e "bem-estar" se destacaram, sendo unanimemente reconhecidas por todos os stakeholders como "favorável" ou "altamente favorável". Por sua vez, "autoavaliação" e "satisfação do paciente" receberam avaliações mais cautelosas ou negativas. Os painelistas enfatizaram que "nenhuma métrica é capaz de fornecer individualmente uma avaliação precisa da qualidade de um programa de residência médica". Conclusão: Ao mapear os stakeholders da residência médica, bem como identificar, categorizar e analisar as métricas de avaliação da qualidade mais prevalentes, este estudo ampliou o debate sobre a complexidade das perspectivas em torno da formação médica. A diversidade de atores envolvidos justifica valorizações distintas das várias dimensões da qualidade, reforçando a conclusão de que métricas isoladas não capturam integralmente a qualidade dos programas. Na prática, os resultados sublinham a importância da implementação de sistemas de avaliação da qualidade que sejam equilibrados e alinhados com as expectativas e necessidades dos principais stakeholders.

ABSTRACT Introduction: Medical literature abounds with metrics to assess the quality of residency programs, yet evaluative tools predominantly focus on the dimensions relevant to residents and preceptors. This overlooks a wide range of stakeholders, whose perspectives are essential for a holistic understanding of program quality. Given this context, this review aimed to map key stakeholders in medical residency, identify and categorize the most prevalent quality assessment metrics found in the literature, and analyze their relevance in relation to the stakeholders' perspectives. Method: Initially, a scoping review of the literature was conducted to identify and categorize stakeholders, as well as to map quality metrics. This was followed by a Delphi panel to assess the relevance of these metrics in relation to the perspectives of the identified stakeholders. Results: Fourteen stakeholders were mapped, and seventeen metrics were identified, subsequently divided into four main categories. The metrics "Adaptability" and "Well-being" stood out, being unanimously recognized by all stakeholders as "Favorable" or "Highly Favorable". Conversely, "Self-assessment" and "Patient Satisfaction" elicited more cautious or negative evaluations. Panelists emphasized that "no single metric can provide an accurate assessment of the quality of a medical residency program on its own". Conclusion: By mapping the stakeholders of medical residency, as well as identifying, categorizing, and analyzing the most prevalent quality assessment metrics, this study broadened the debate on the complexity of perspectives surrounding medical education. The diversity of actors observed justifies distinct evaluations across the various dimensions of quality, reinforcing the conclusion that isolated metrics cannot fully capture the program quality. In practice, the findings underscore the importance of implementing quality assessment frameworks that are balanced and aligned with the expectations and needs of the main stakeholders.

RESUMO

RESUMO Introdução: O curso de Medicina do Centro Universitário de Votuporanga (Unifev), aprovado em 2012, teve a primeira turma graduada em 2018. O Projeto Político Pedagógico do Curso (PPC), baseado nas Diretrizes Curriculares Nacionais (DCN), utiliza de metodologias ativas, entre elas a aprendizagem baseada em problemas. Objetivo: Este estudo teve como objetivo analisar o perfil profissional, a trajetória e a adaptação ao mercado de trabalho do médico formado pelo Unifev, além das fragilidades e fortalezas da matriz pedagógica, a partir das percepções dos egressos. Método: Trata-se de um estudo transversal, descritivo e qualiquantitativo do qual participaram 114 egressos. O estudo foi aprovado pelo Comitê de Ética em Pesquisa do Unifev. Aplicou-se, via Google Forms, um questionário semiestruturado sobre dados pessoais, informações profissionais e acadêmicas, opiniões referentes à formação dos egressos e o PPC. Resultado: Responderam 80 (70,2%) egressos distribuídos no estado de São Paulo, com maior representação feminina (71,2%). No primeiro ano após a formatura, 41,5% atuavam na urgência/emergência e 18,4% na atenção primária, com 282 postos de trabalho ocupados (2,6 ± 1,2 postos por pessoa). Sessenta e sete (83,3%) egressos obtiveram financiamento estudantil, sem relação com a faixa salarial mensal atual (dez ou mais salários mínimos para 55,5%). Poucos (n = 27; 33,8%) estavam inseridos em programa de residência; muitos ainda pretendem cursá-lo. Grande parte (72,5%) realizou curso preparatório para residência. A integração das áreas, a capacidade para o trabalho em equipe, o conhecimento das DCN e do PPC, e a ocorrência de momentos de tensão emocional/estresse foram referidos pela maioria dos respondentes (de 88,0% a 100%). Conclusão: Houve expressiva taxa de respostas com contribuições para um currículo mais próximo das necessidades dos alunos, ênfase na aprendizagem de temas das urgências e da pediatria, e no necessário cuidado com a saúde mental dos estudantes. O curso foi bem avaliado pelos respondentes, e o financiamento estudantil provou ser uma importante política, com resultados consideráveis para a jovem instituição. O estudo representa o primeiro passo para a criação de um elo mais robusto entre a instituição e seus egressos, auxiliando na concepção da cultura de acompanhamento frequente de suas trajetórias e repercutindo na avaliação do programa curricular, na medida em que oferece aos gestores do curso um diagnóstico para manter os acertos e alertar sobre possíveis ajustes.

ABSTRACT Introduction: The course at Centro Universitario de Votuporanga (UNIFEV) was approved in 2012 with the first class graduating in 2018. The Course's Pedagogical Project (PPC, Projeto Pedagógico do Curso), based on the National Curriculum Guidelines (DCN, Diretrizes Curriculares Nacionais), uses active methodologies, and among them, problem-based learning. Objective: To analyze the professional profile, career trajectory, and adaptation to the job market of a doctor graduated from UNIFEV, the strengths and weaknesses of the PPC, based on the perceptions of the alumni. Material and Method: The cross-sectional, descriptive and quanti-qualitative study, approved by the Research Ethics Committee, involved a population of graduates (n=114). A semi-structured questionnaire was applied, to provide personal, professional, and academic information. Results: Eighty graduates, distributed in the state of São Paulo with greater female representation (71.2%), answered (70.2%) the questions. In the first year after graduation, 41.5% worked in Urgency/Emergency Care and 18.4% in Primary Care, considering 282 positions (2.6±1.2 positions per person). Sixty-seven (83.3%) graduates obtained student loans, unrelated to the current monthly salary range (10 or more minimum wages for 55.5%). Few alumni were enrolled in a residency program (n=27; 33.8%); many still intend to do it. Most of them (72.5%) attended a preparatory course for residency. The integration of areas, the ability to work as a team, the knowledge about the DCN and PPC and the occurrence of moments of emotional tension/stress were mentioned by most of the interviewees (88.0 to 100%). Conclusion: There was a significant rate of responses with contributions to a curriculum closer to the students' needs, with emphasis on learning emergency and pediatric topics and on the necessary care for the students' mental health. The course was highly rated by the respondents and student loans showed to be an important policy, considerable results for the young institution. The study represents the first step towards creating a stronger link between the institution and its graduates, helping to design the institutional culture of frequent monitoring of their trajectories and impacting the evaluation of the curriculum, insofar as it offers, to the course managers, a diagnosis to maintain the successes while being alert to possible adjustments.

RESUMO

RESUMO Introdução: A residência médica (RM) é considerada acadêmica e profissionalmente o método padrão ouro no ensino de médicos egressos da universidade. O Programa Integrado de Residência em Medicina de Família e Comunidade (PIRMFC) de Fortaleza, no Ceará, reúne os programas da Universidade Federal do Ceará, da Escola de Saúde Pública do Ceará e da prefeitura, e é o primeiro do gênero em larga escala, contando com cerca de 70 residentes na primeira edição, implantado em uma capital, paralelamente ao processo de implantação da rede de serviços da Estratégia Saúde da Família (ESF) pela prefeitura. Objetivo: Este estudo teve como objetivo avaliar um PIRMFC a partir da ótica dos residentes. Método: Trata-se de uma pesquisa exploratória, com abordagem qualitativa, utilizando o modelo de Kirkpatrick no seu primeiro nível: reação e satisfação dos residentes. A coleta de dados foi realizada com a participação de 18 residentes (R2) em cinco grupos focais, no segundo semestre de 2020. Aplicaram-se também questionários com perguntas fechadas para caracterização da amostra, seguidas de questões de múltipla escolha graduadas em escala Likert. Os dados qualitativos foram examinados pela técnica de análise temática, e os quantitativos, por meio de frequências simples e percentuais. Resultado: Identificaram-se as seguintes categorias principais: estratégias de ensino-aprendizagem, avaliação do processo ensino-aprendizagem, produção de autonomia, transferência da formação para a prática, fragilidades e potencialidades da residência. Os residentes compreendem a responsabilidade que têm no atendimento médico diário, ainda que como aprendizes. Eles demonstram insegurança como sujeitos da formação, sentindo-se mais confortáveis quando são colocados no papel passivo. Contudo, os discentes do programa reconhecem a metodologia ativa de ensino-aprendizagem como adequada para o ensino de adultos, mas precisam que as estratégias estejam voltadas para a resolução de problemas comuns à prática profissional deles. Conclusão: O programa não conseguiu firmar bases para o engajamento dos residentes em algumas estratégias ativas simuladas de ensino-aprendizagem, como grupos tutoriais. É preciso valorizar as experiências e competências adquiridas heterogeneamente pelos residentes para compor momentos de equalização do aprendizado, buscando o protagonismo do aluno em vez da imposição de conhecimentos.

ABSTRACT Introduction: Medical Residency (MR) is considered, both academically and professionally, the gold standard method in teaching university graduates. The Integrated Residency Program in Family and Community Medicine (PIRMFC) in Fortaleza-CE brings together the programs of Universidade Federal do Ceará, the School of Public Health of Ceará and the City Hall of Fortaleza and is the first of its kind on a large scale, with about 70 residents in the first edition, implemented in a capital city, concomitantly with the process of implementation of the Family Health Strategy (ESF) service network by the City Hall. Objective: To evaluate an Integrated Residency Program in Family and Community Medicine, from the perspective of resident doctors. Method: This is an exploratory study, with a qualitative approach, using the Kirkpatrick model in its first level, reaction and satisfaction of residents. Data collection was carried out with the participation of 18 residents (R2) in five Focus Groups, in the second half of 2020. Questionnaires with closed questions were also applied to characterize the sample, followed by multiple-choice questions graded on a Likert scale. The qualitative data were analyzed by the Thematic Analysis technique and quantitative data through simple frequency and percentage. Results: The following main categories were identified: Teaching-learning strategies, Evaluation of the teaching-learning process, Production of autonomy, Transfer of training into practice, Weaknesses and Potentialities of the residency. Residents understand the responsibility they have in daily medical care, even if they are apprentices. They felt insecure as training subjects, feeling more comfortable when they are placed in the passive role. On the other hand, the program students recognize the active teaching-learning methodology as adequate for teaching adults but need strategies to be used to solve common problems in their professional practice. Conclusion: The Program was not able to establish the basis for the engagement of residents in some simulated active teaching-learning strategies, such as Tutorial Groups. It is necessary to value the experiences and competences heterogeneously acquired by the residents to constitute moments of equalization of learning, seeking the student's protagonism instead of the imposition of knowledge.

RESUMO

ABSTRACT Objective: to reflect on the perspectives of adopting the Progress Test in undergraduate nursing education. Methods: this is a reflective study, based on authors' critical thinking and supported by national and international literature on the Progress Test application in undergraduate health courses. Results: the Progress Test is as a valuable teaching-learning strategy, with potential applications and benefits for students, professors, and academic management. Final considerations: systematic nursing education assessment indicates valuable information for different stakeholders. Understanding its potential benefits, the Progress Test is presented as a strategy that can be replicated in undergraduate nursing education, either individually, by institutions, or collaboratively, by the establishment of partnerships or consortiums of institutions.

RESUMEN Objetivo: reflexionar sobre las perspectivas de adopción de la Prueba de Progreso en la formación de pregrado en enfermería. Métodos: se trata de un estudio reflexivo, basado en el pensamiento crítico de las autoras y sustentado en literatura nacional e internacional sobre la aplicación de la Prueba de Progreso en cursos de pregrado en el área de la salud. Resultados: la Prueba de Progreso se presenta como una valiosa estrategia de enseñanza-aprendizaje, con potenciales aplicaciones y benefícios para estudiantes, docentes y gestión académica. Consideraciones finales: la evaluación sistemática de la educación en enfermería indica información valiosa para diferentes actores. Entendiendo sus potenciales beneficios, la Prueba de Progreso se presenta como una estrategia que puede ser replicada en la educación de pregrado en enfermería, sea de manera individual, por instituciones, o de manera colaborativa, a través del establecimiento de alianzas o consorcios de instituciones.

RESUMO Objetivo: refletir acerca das perspectivas da adoção do Teste de Progresso no ensino de graduação em enfermagem. Métodos: trata-se de estudo reflexivo, baseado no pensamento crítico das autoras e sustentado na literatura nacional e internacional sobre a aplicação do teste de progresso em cursos de graduação na área da saúde. Resultados: o teste de progresso se apresenta como uma valiosa estratégia de ensino-aprendizagem, com potenciais aplicações e benefícios para estudantes, docentes e gestão acadêmica. Considerações finais: a avaliação sistemática do ensino de enfermagem indica informações valiosas para diferentes atores. Entendendo seus potenciais benefícios, apresenta-se o Teste de Progresso como estratégia passível de ser replicada no ensino de graduação em enfermagem, seja de forma individual, pelas instituições, ou de maneira colaborativa, por meio do estabelecimento de parcerias ou consórcios de instituições.

RESUMO

ABSTRACT Objective: To report the experience of implementing the São Paulo Nursing Courses Consortium for the Progress Test. Method: This is an experience report of the consortium's work in Progress Test preparation and application for Public Schools of Nursing in São Paulo in 2019, 2021 and 2022, with a descriptive analysis of the work process and the results obtained. Results: The consortium's activities are structured into the following stages: planning; theme review; distributing and requesting questions; professor training; question elaboration; question reception; question selection; question validation; student registration; test application; analysis and dissemination of results. A total of 57.3% of enrolled students participated. There was a predominance of questions of medium difficulty and a gradual progression in the level of discrimination of the questions, with, in 2022, 82.5% being considered adequate. Final considerations: The consortium has allowed the test to be applied interinstitutionally, with greater scope, accuracy, and quality of questions. Through this experience, it is expected to encourage progress testing in undergraduate nursing courses in other contexts.

RESUMEN Objetivo: Relatar la experiencia de implementación del Consorcio de Cursos de Enfermería de São Paulo para la Prueba de Progreso. Método: Se trata de un relato de experiencia del trabajo del consorcio en la elaboración y aplicación de la Prueba de Progreso para las Escuelas Públicas de Enfermería de São Paulo en los años 2019, 2021 y 2022, con un análisis descriptivo del proceso de trabajo y de los resultados obtenidos. Resultados: Las actividades del consorcio se estructuran en las siguientes etapas: planificación; revisión de temas; distribución y solicitud de preguntas; capacitación de docentes; elaboración de preguntas; recepción de preguntas; selección de preguntas; validación de preguntas; registro de estudiantes; aplicación de la prueba; análisis y difusión de resultados. Participaron el 57,3% de los estudiantes matriculados. Hubo un predominio de preguntas de dificultad media y una progresión gradual en el nivel de discriminación de las preguntas, considerándose adecuadas en 2022 un 82,5%. Consideraciones finales: El consorcio ha permitido que la prueba sea aplicada de manera interinstitucional, con mayor alcance, precisión y calidad de preguntas. A través de esta experiencia, se espera fomentar la realización de la prueba de progreso en cursos de pregrado en enfermería en otros contextos.

RESUMO Objetivo: Relatar a experiência da implementação do Consórcio dos Cursos de Enfermagem Paulistas para o Teste de Progresso. Método: Trata-se de relato de experiência da atuação do consórcio na elaboração e aplicação do Teste de Progresso para as Escolas de Enfermagem Públicas Paulistas nos anos de 2019, 2021 e 2022, com análise descritiva do processo de trabalho e dos resultados obtidos. Resultados: As atividades do consórcio estão estruturadas nas seguintes etapas: planejamento; revisão de temas; distribuição e solicitação de questões; capacitação de docentes; elaboração de questões; recepção de questões; seleção de questões; validação de questões; inscrição de estudantes; aplicação do teste; análise e divulgação de resultados. Participaram 57,3% dos estudantes matriculados. Houve predomínio de questões de média dificuldade e progressão gradual do nível de discriminação das questões, sendo que, em 2022, 82,5% foram consideradas adequadas. Considerações finais: O consórcio tem permitido a aplicação do teste de forma interinstitucional, com maior abrangência, acurácia e qualidade das questões. Por meio dessa experiência, espera-se fomentar a realização do teste de progresso em cursos de graduação em enfermagem em outros contextos.

Assuntos

RESUMO

Resumen El objetivo del estudio fue describir el uso de rúbricas para la evaluación formativa de la participación de profesionales en formación en el desarrollo de ateneos. Se realizó un estudio observacional, descriptivo, transversal y retrospectivo sobre la rúbrica de ateneos de programas de formación de posgrado de Bioquímica Clínica y se analizó la confiabilidad (por medio del coeficiente alfa de Cronbach) y su impacto educativo. Se analizaron 51 rúbricas sobre 41 ateneos de 9 profesionales en formación (residentes y becarios) por 19 evaluadores. La estimación de confiabilidad arrojó un alfa de Cronbach de 0,71 (nivel de confianza del 95%, p≤0,05). La rúbrica aquí analizada ha servido para clarificar las metas de aprendizajes de una actividad tradicional en la formación de posgrado en servicio. Se ha logrado generar un instrumento de evaluación confiable que puede ser utilizado en otras profesiones y especialidades del equipo de salud.

Abstract The objective of the study was to describe the use of rubrics for the formative evaluation of the participation of professionals in training in the development of conferences. An observational, descriptive, cross-sectional and retrospective study was carried out on the rubric of athenaeums of postgraduate training programmes in Clinical Biochemistry, analysing its reliability (by means of Cronbach's alpha coefficient) and its educational impact. Fifty-one rubrics difewere analysed on 41 athenaeums of 9 professionals in training (residents and fellows) by 19 evaluators. The reliability estimate yielded a Cronbach's alpha of 0.71 (95% confidence level, p≤0.05). The rubric analysed here has served to clarify the learning goals of a traditional activity in postgraduate training in service. It has been possible to generate a reliable evaluation instrument that can be used in other professions and specialties of the health team.

Resumo O objetivo do estudo foi descrever a utilização de rubricas para avaliação formativa da participação de profissionais em formação no desenvolvimento de ateneus. Foi realizado um estudo observacional, descritivo, transversal e retrospectivo da rubrica de ateneus dos programas de formação pós-graduação em Bioquímica Clínica, analisando a sua fiabilidade (através do coeficiente alpha de Cronbach) e o seu impacto educacional. Cinquenta e uma rubricas de 41 ateneus de 9 profissionais em formação (residentes e bolsistas) foram analisadas por 19 avaliadores. A estimativa de confiabilidade resultou em um alfa de Cronbach de 0,71 (nível de confiança de 95%, p≤0,05). A rubrica aqui analisada serviu para esclarecer os objetivos de aprendizagens de uma atividade tradicional na formação pós-graduação em serviço. Foi possível gerar um instrumento de avaliação confiável que pode ser utilizado em outras profissões e especialidades da equipe de saúde.

RESUMO

Os estudantes de Medicina têm contato com diferentes áreas e cenários durante o internato e devem ter seu desempenho avaliado em cada um deles. Contudo, muitos estudantes não se sentem devidamente avaliados e, diante disso, nosso objetivo foi desenvolver um instrumento de avaliação do desempenho de estudantes de Medicina, no período do internato em pediatria, para uso durante o estágio realizado na Atenção Primária à Saúde. Realizou-se uma pesquisa metodológica com elaboração de um instrumento e contribuição de especialistas com experiência em ensino, por meio de convites eletrônicos. Ao final do estudo, utilizando-se a técnica Delphi, dos vinte itens constantes no instrumento original, dezessete foram aceitos pelos 11 especialistas que participaram das duas rodadas de análise. Dessa forma, a pesquisa alcançou seu objetivo e, por meio deste artigo, divulgamos a proposta de um "Instrumento de avaliação de internos de Medicina no estágio de pediatria na Atenção Primária à Saúde".

Medical students have contact with different areas and scenarios during their internship and must have their performance evaluated in each of them. However, as many students do not feel properly evaluated, our objective was to develop an instrument to evaluate the performance of Medical students, during their internship in pediatrics, to be used during their practice in Primary Health Care. A methodological research was carried out with the elaboration of an instrument and the contribution of specialists with experience in teaching, using electronic invitations. At the end of the study, through the Delphi technique, seventeen of the twenty items contained in the original instrument were accepted by the 11 specialists who participated in the two rounds of analysis. Thus, the research reached its objective and, through this article, we disseminate the proposal of an "Instrument for the evaluation of Medical interns in the pediatric internship in Primary Health Care".

Los estudiantes de Medicina tienen contacto con diferentes áreas y escenarios durante su pasantía y deben evaluar su desempeño en cada uno de ellos. Sin embargo, muchos estudiantes no se sienten debidamente evaluados y, ante eso, nuestro objetivo fue desarrollar un instrumento para evaluar la actuación de los estudiantes de Medicina, durante su pasantía en pediatría, para ser utilizado mientras ejecutan la Atención Primaria de Salud. Se realizó una investigación metodológica con la elaboración de un instrumento y el aporte de especialistas con experiencia en la docencia, a través de invitaciones electrónicas. Al final del estudio, utilizando la técnica Delphi, de los veinte ítems contenidos en el instrumento original, se aceptaron diecisiete por los 11 especialistas que participaron en las dos rondas de análisis. De esta forma, la investigación alcanzó su objetivo y, por medio de este artículo, divulgamos la propuesta de un "Instrumento para la evaluación de Médicos internos en el internado de pediatría en Atención Primaria de Salud".

Assuntos

RESUMO

Introdução: O Exame Clínico Objetivo Estruturado é um dos métodos mais eficazes de avaliação do processo de aprendizagem, pois analisa o desempenho do participante em uma tarefa clínica especifica. Objetivo: Apresentar a vivência do serviço de Ginecologia sobre a elaboração e execução de uma estação do exame desenvolvido por uma universidade, promovendo uma reflexão sobre o processo de ensino aprendizagem dos alunos desta instituição. Relato de Experiência: O planejamento e organização demandaram um período de 4 meses, com definição do local, comissão de apoio técnico, elaboração dos casos clínicos e das competências a serem avaliadas, materiais disponíveis (impressos, canetas, móveis, dentre outros). Os professores elaboradores das estações foram previamente treinados pela comissão organizadora e orientados a formularem uma estação com caso clínico compatível com o momento do aluno no curso de Medicina. Outro instrumento elaborado foi o checklist, com pontos fundamentais que deveriam ser cumpridos pelo estudante avaliado. Após elaboração da estação e do seu checklist, estes foram avaliados pela comissão organizadora, com realização das correções pertinentes. Após aprovação, os professores, tanto elaboradores quanto avaliadores, realizaram a simulação da estação para identificação de possíveis erros, fatores complicadores e para cronometragem do tempo. Conclusão: O método desenvolvido apresentou características de grande importância e destaque, bem como fragilidades que precisam ser resolvidas.

Introduction: The Objective Structured Clinical Examination is one of the most effective methods of evaluating the learning process, as it analyzes the participant's performance in a specific clinical task. Objective: To present the experience of the Gynecology service on the preparation and execution of an exam station developed by a university, promoting a reflection on the teaching-learning process of students at this institution. Experience Report: Planning and organization required a period of 4 months, with definition of the location, technical support committee, preparation of clinical cases and skills to be evaluated, available materials (prints, pens, furniture, among others). The teachers who created the stations were previously trained by the organizing committee and instructed to formulate a station with a clinical case compatible with the student's current time in the Medicine course. Another instrument created was the checklist, with fundamental points that should be fulfilled by the student assessed. After preparing the station and its checklist, they were evaluated by the organizing committee, with relevant corrections made. After approval, the teachers, both developers and evaluators, carried out the station simulation to identify possible errors, complicating factors and to measure time. Conclusion: The developed method presented characteristics of great importance and prominence, as well as weaknesses that need to be.

RESUMO

Objetivo: construir e validar um Quiz de avaliação cognitiva sobre Febre Maculosa, voltado para avaliar o conhecimento de estudantes que moram e/ou frequentam cidades de risco para a doença. Métodos: estudo metodológico desenvolvido em três etapas: construção do Quiz; validação de aparência e conteúdo com nove juízes, com análise realizada através do cálculo de Índice de Validade de Conteúdo, com valor de corte 0,80; e validação semântica, seguindo a metodologia DISABKIDS® com 12 alunos de cursos técnicos profissionalizantes, com avaliação dos dados realizada por estatística descritiva, tendo sido utilizado o programa Statistical Package for the Social Sciences. Resultados: o processo de validação foi subdividido em duas etapas: validação de aparência e conteúdo por profissionais das áreas de biologia e educação e validação semântica por alunos de cursos profissionalizantes. O Quiz foi elaborado e aplicado e os resultados mostraram um índice de validade de conteúdo superior a 0,80 para todas as variáveis analisadas. Na validação semântica, o Quiz foi considerado como de fácil compreensão e não houve dificuldade para o preenchimento. Conclusão: o Quiz construído foi validado quanto à aparência, ao conteúdo e à semântica, tendo alcançado concordância satisfatória, o que garante ser um instrumento adequado para o processo de avaliação sobre a temática investigada. Com isso, espera-se contribuir para a difusão de conhecimento acerca da identificação dos fatores de risco e da prevenção da saúde relacionados à Febre Maculosa.(AU)

Objective: to create and validate a cognitive assessment Quiz about Spotted Fever, targeted at evaluating what students living in and/or traveling to risk cities know about the disease. Methods: a methodological study developed in three stages: creation of the Quiz; face and content validation with nine judges, with analysis performed by calculating the Content Validity Index, with a cutoff value of 0.80; and semantic validation, following the DISABKIDS®methodology with 12 students from professional technical courses, with data evaluation performed by means of descriptive statistics, using the Statistical Package for the Social Sciences program. Results: the validation process was subdivided into two stages: face and content validation by professionals in the Biology and Education areas, and semantic validation by students attending professional courses. The Quiz was prepared and applied and the results showed a Content Validity Index above 0.80 for all the variables analyzed. In the semantic validation, the Quiz was considered as easy to understand and there were no difficulties filling it in. Conclusion: the Quiz created was validated in terms of face, content and semantics, having achieved satisfactory agreement, which guarantees that it is an adequate instrument for the evaluation process on the theme investigated. With this, the expectation is to contribute to disseminating knowledge about the identification of risk and health prevention factors related to Spotted fever.(AU)

Objetivo: construir y validar un Cuestionario de evaluación cognitiva sobre la Fiebre Maculo-sa, destinado a evaluar los conocimientos de los estudiantes que viven y/o asisten a ciudades con riesgo para la enfermedad. Métodos: estudio metodológico desarrollado en tres etapas: construcción del Cuestionario; validación de apariencia y contenido con nueve jueces con aná-lisis realizado mediante el cálculo del Índice de Validez de Contenido, con un valor de corte de 0.80 y validación semántica, siguiendo la metodología DISABKIDS® con 12 estudiantes de carreras técnicas profesionales, con evaluación de datos realizada mediante estadística des-criptiva, donde se utilizó el programa Statistical Package for the Social Sciences. Resultados: el proceso de validación se subdividió en dos etapas: validación de apariencia y contenido por profesionales de las áreas de biología y educación, y validación semántica por estudiantes de carreras profesionales. El Cuestionario fue diseñado y aplicado. Los resultados mostraron un índice de validez de contenido superior a 0,8 para todas las variables analizadas...(AU)

Assuntos

RESUMO

Resumo: Introdução: Com a pandemia de Covid-19, instituições globais de saúde recomendaram a adoção de medidas restritivas, como o fechamento de unidades de ensino. As instituições de ensino tiveram que se adaptar ao ensino remoto emergencial de forma abrupta e com pouco tempo para preparo. Os alunos também tiveram desafios a serem enfrentados, como uso da internet e isolamento dentro de casa. O ensino superior na área de saúde também teve que se adequar a esse novo modelo com adaptação a práticas humanizadas. Objetivo: Este estudo teve como objetivo avaliar a percepção da utilização do ensino remoto emergencial por discentes em uma universidade pública de saúde durante a pandemia da Covid-19. Método: Trata-se de uma pesquisa descritiva e exploratória, com delineamento transversal e abordagem quantitativa, realizada por meio de aplicação de um questionário com perguntas fechadas. O questionário foi dividido em quatro tópicos: caracterização da amostra, condições de uso da internet, condições do local do estudo e percepção do estudante acerca da utilização do ensino remoto. Resultado: Participaram do estudo 480 alunos dos cursos de Enfermagem, Medicina e Odontologia da Universidade do Estado do Amazonas. A maioria desses alunos utilizou wi-fi residencial, com qualidade de sinal regular, e aqueles que residem no interior do estado foram os mais prejudicados por conta da inconstância da internet. Os alunos assistiram predominantemente às aulas no quarto e apontaram a fácil desconcentração como o fator mais prejudicial das aulas remotas. A maioria dos alunos discorda da eficácia das avaliações para esse tipo de ensino, assim como avalia de forma insatisfatória a experiência com o ensino remoto. No entanto, a maioria concordou que é possível aprender o conteúdo teórico com qualidade no ensino remoto. Conclusão: A pandemia de Covid-19 acarretou uma mudança repentina de cenário. O novo modelo educacional, de educação a distância, trouxe novos desafios para o ensino. Os resultados evidenciam que os fatores que prejudicaram os estudantes foram a instabilidade da internet e a dificuldade em se concentrar durante a aprendizagem remota. Houve facilidade para os discentes esclarecerem as dúvidas das aulas com os docentes, o que corrobora o ensino e a aprendizagem da parte teórica por meio desse sistema.

Abstract: Introduction: The onset of the Covid-19 pandemic led global health institutions to recommend the adoption of restrictive measures such as the closure of educational facilities. Educational institutions were forced to suddenly adapt to emergency distance learning methods, with little time for preparation. The students also faced challenges such as relying on the internet and remaining isolated at home. Medical and health science schools also had to adapt to this new model to humanized practices. Objective: To evaluate the perceived use of emergency distance learning by students at a state university health sciences and medical school during the Covid-19 Pandemic. Method: This is a descriptive and exploratory study, with a cross-sectional design and quantitative approach, involving the application of a questionnaire containing closed questions. The questionnaire was divided into four topics: sample characterization, conditions for internet use, study site conditions, and student perception of the use of distance learning. Result: The study included 480 students from the nursing, medicine, and dentistry courses at the Amazonas State University. Most of these students used their home wifi, with regular signal quality. Students from smaller, inner state towns were the most disadvantaged by inconsistent internet connections. Students were mainly in their bedrooms when they attended the and pointed to losing concentration easily as the main detrimental factor of the remote classes. Most students disagreed with the effectiveness of assessments for this type of learning,and rated the experience with remote teaching as unsatisfactory. However, most students agreed that it is possible to learn theoretical content with quality through distance learning. Conclusion: The Covid-19 pandemic brought about a sudden change of scenery. The new educational model, using distance learning, has brought new challenges for teaching. The results show that the factors that hindered the students were the instability of their internet connection and difficulty in maintaining concentration during distance learning classes. Students found it easy to clarify doubts about the classes with the teachers; the system proved adequate for the teaching and learning of the theoretical content.

RESUMO

Resumo: Introdução: O Professionalism Mini-Evaluation Exercise (P-MEX) é instrumento que avalia 21 habilidades de profissionalismo, distribuídas em quatro domínios. Objetivo: Este estudo teve como objetivos traduzir, adaptar e validar um instrumento de avaliação de profissionalismo médico. Método: Após a autorização do autor do P-MEX, realizaram-se a tradução do instrumento para a língua portuguesa, a análise de equivalência linguística e validade de conteúdo por especialistas em educação, e o exame de validade operacional em OSCE virtual entre estudantes do internato médico. Resultado: Houve elevada equivalência dos itens da versão em português do Brasil por especialistas em educação. O índice de validade de conteúdo da escala foi de 0,96. Seis professores validaram o P-MEX em ambiente de simulação para 27 estudantes do internato médico. Conclusão: A versão brasileira do P-MEX demonstrou ser adequada para avaliar o profissionalismo médico no contexto brasileiro, com boa validade operacional em cenário de simulação virtual.

Abstract: Introduction: "Professionalism Mini-Evaluation Exercise" (P-MEX) is an instrument that assesses 21 professionalism skills, distributed in four domains. Objective: To translate, adapt and analyze the validity of the medical professionalism evaluation exercise. Methods: After authorization from the author, the following tasks were performed: translation into Portuguese; linguistic equivalence and content validity analysis by education experts; operational validity analysis in virtual OSCE among medical clerkship students. Results: There was high equivalence of the items in the Brazilian Portuguese version by education specialists. The Scale Content Validity Index was 0.96. Six teachers validated the P-MEX in a simulation environment to 27 medical clerkship students. Conclusion: The Brazilian version of the P-MEX proved to be adequate to assess medical professionalism in the Brazilian context, and showed good operational validity in a virtual simulation scenario.

RESUMO

Resumo: Introdução: Nas últimas décadas, as práticas pedagógicas e as metodologias de ensino têm experimentado mudanças radicais, culminando hoje com o crescimento exponencial de metodologias de ensino ativas. Apesar da crescente utilização dessas metodologias ativas nos cursos de Medicina, as formas de avaliação teórica foram pouco, ou nada, alteradas nas últimas décadas, o que não deveria ocorrer, pois os sistemas de avaliação precisam evoluir concomitantemente para garantir um processo de ensino-aprendizagem coeso e de qualidade. Objetivo: Este estudo evidencia como está inserida a avaliação com consulta em cursos de Medicina. Método: Foi desenvolvida uma revisão integrativa por meio de consulta de publicações indexadas no período dos últimos dez anos nas bases de dados da Biblioteca Nacional de Medicina dos Estados Unidos (PubMed), Scientific Electronic Library Online (SciELO), ScienceDirect e Education Resources Information Center (ERIC), em formato de artigos completos nas línguas portuguesa ou inglesa. Utilizaram-se os descritores a seguir de forma combinada, respectivamente em inglês e português: "medicine", "assessment", "open book examination", "open book exam", "open book test" e "open book assessment"; "medicina", "avaliação", "prova com consulta", "avaliação com consulta" e "teste com consulta". Resultado: Para a composição deste estudo, selecionaram-se 11 publicações que atenderam aos critérios de elegibilidade traçados, e, após a imersão teórica e análise delas, emergiram duas categorias principais: "A avaliação com consulta como recurso educacional para o ensino médico" e "A avaliação com consulta como alternativa pedagógica no cenário pandêmico", as quais foram analisados à luz de uma revisão integrativa. Conclusão: Ainda que haja dúvidas e sejam necessários novos estudos, fica evidente que a avaliação com consulta é muito pertinente ao ensino médico, uma vez que contribui para a formação de profissionais com alta capacidade de questionamento e argumentação, preparados para rotinas de estudo e educação permanentes e que entendam que há constante evolução do conhecimento na área médica.

Abstract: Introduction: In the last decades, pedagogical practices and teaching methodologies have experienced radical changes, culminating today with the exponential growth of active teaching methodologies. Despite the growing use of these active methodologies in medical courses, the theoretical evaluation models changed little, if at all, in the last decades, which should not occur, as the evaluation systems need to evolve concomitantly to ensure a cohesive, quality teaching-learning process. Objective: To demonstrate how open-book examination is inserted in medical courses. Methods: An integrative review was developed by searching for publications indexed in the last 10 years in the databases of the U.S. National Library of Medicine (PubMed), "Scientific Electronic Library Online" (SciELO), Science Direct, and the "Education Resources Information Center" (ERIC), as full articles written in Portuguese or English. The following descriptors were used in combination, respectively in English and Portuguese: "medicine", "assessment", "open book examination", "open book exam", "open book test" and "open book assessment"; "medicina", "avaliação", "prova com consulta", "avaliação com consulta" and "teste com consulta". Results: For this review, a total of eleven publications that met the eligibility criteria were selected, and after their theoretical immersion and analysis, two main categories emerged: "Open-book examination as an educational resource for medical education" and "Open-book examination as a pedagogical alternative in the pandemic scenario", which were analyzed in the light of an integrative review. Conclusion: Although there are still doubts and further studies are required, it is evident that Open-Book examination is very pertinent to medical education, as it contributes to the training of professionals with high capacity for questioning and debating, who are prepared for permanent study and education routines, and who understand that there is constant evolution of knowledge in the medical field.

RESUMO

ABSTRACT Introduction: Contemporary table tennis teaching lacks attention to global abilities; some studies suggest that functional training can supply the demands of the high level of sport competition. Objective: Study the effect of functional training on teaching table tennis to college students. Methods: A controlled random selection was carried out (n=40), in which the experimental group (n=20) chose a functional training program. In contrast, the control group (n=20) participated in the teaching of traditional table tennis skills. The training frequency was one hour daily, three times a week, lasting six weeks. Table tennis-specific fitness was assessed before and after the experiment. Data were cataloged and statistically analyzed. Results: On the manual skills index, the experimental group's score increased from 63,194 to 79,683 points after the experiment, and the control group's score increased from 64,788 to 68,775 points after the experiment. In the regression index, the experimental group score increased from 63.645 to 78.614, and the control group score increased from 64.152 to 70.574. Conclusion: The functional training mode proposed in this paper can rapidly improve the competitive level of table tennis and improve the competitive performance of its practitioners. Level of evidence II; Therapeutic studies - investigation of treatment outcomes.

RESUMO Introdução: O ensino contemporâneo no tênis de mesa carece de atenção em habilidades globais, alguns estudos sugerem que o treinamento funcional possa suprir as demandas requisitadas pelo alto nível de competição esportiva. Objetivo: Estudar o efeito do treinamento funcional sobre o ensino do tênis de mesa nos estudantes universitários. Métodos: Foi realizada uma seleção randômica controlada (n=40), na qual o grupo experimental (n=20) escolheu um programa de treinamento funcional, enquanto o grupo de controle (n=20) participou do ensino das habilidades tradicionais do tênis de mesa. A frequência do treinamento foi de uma hora diária, três vezes por semana, com duração de seis semanas. A aptidão física específica do tênis de mesa foi avaliada antes e depois do experimento. Os dados foram catalogados e analisados estatisticamente. Resultados: No índice de habilidades manuais, a pontuação do grupo experimental aumentou de 63.194 para 79.683 pontos após o experimento, e a pontuação do grupo de controle aumentou de 64.788 para 68.775 pontos após o experimento. No índice de retrocesso, a pontuação do grupo experimental aumentou de 63.645 para 78.614, e a pontuação do grupo de controle aumentou de 64.152 para 70.574. Conclusão: O modo de treinamento funcional proposto neste artigo pode melhorar rapidamente o nível competitivo do tênis de mesa e melhorar o desempenho competitivo de seus praticantes. Nível de evidência II; Estudos terapêuticos - investigação dos resultados do tratamento.

RESUMEN Introducción: La enseñanza contemporánea en tenis de mesa carece de atención en habilidades globales, algunos estudios sugieren que el entrenamiento funcional puede suplir las demandas requeridas por el alto nivel de competición deportiva. Objetivo: Estudiar el efecto del entrenamiento funcional en la enseñanza del tenis de mesa en estudiantes universitarios. Métodos: Se realizó una selección aleatoria controlada (n=40), en la que el grupo experimental (n=20) eligió un programa de entrenamiento funcional, mientras que el grupo de control (n=20) participó en la enseñanza de las habilidades tradicionales del tenis de mesa. La frecuencia del entrenamiento fue de una hora diaria, tres veces por semana, con una duración de seis semanas. Se evaluó la forma física específica del tenis de mesa antes y después del experimento. Los datos se catalogaron y analizaron estadísticamente. Resultados: En el índice de habilidades manuales, la puntuación del grupo experimental aumentó de 63,194 a 79,683 puntos después del experimento, y la del grupo de control aumentó de 64,788 a 68,775 puntos después del experimento. En el índice de regresión, la puntuación del grupo experimental aumentó de 63,645 a 78,614, y la del grupo de control, de 64,152 a 70,574. Conclusión: El modo de entrenamiento funcional propuesto en este artículo puede mejorar rápidamente el nivel competitivo del tenis de mesa y mejorar el rendimiento competitivo de sus practicantes. Nivel de evidencia II; Estudios terapéuticos - investigación de los resultados del tratamiento.

RESUMO

ABSTRACT Introduction: competency-based medical education is well established, but there is a worldwide shortage of instruments capable of assessing these doctors in training. Objective: to validate the instrument The Otolaryngology - Head and Neck Surgery Milestone Project for use in Residency Programs in Otorhinolaryngology in Brazil. Method: The study had 5 stages. In stage I, two independent translations of the Milestones Project in otorhinolaryngology were carried out. In step II, a synthesis of the translations was performed. Subsequently, the competencies required by the Brazilian Association of Otorhinolaryngology for training otorhinolaryngologists in Brazil were added. In step III, a back-translation of the instrument was carried out and sent to the original authors. Then, the instrument was sent to be evaluated by a committee of 8 experts. In stage IV, each expert made comments about each of the items, and after analyzing the suggestions, a new instrument was created. In stage V, this instrument was sent for evaluation by otorhinolaryngologists across the country. Results: after translations and expert evaluation, an instrument with 19 items was created. The instrument was submitted to analysis by Otorhinolaryngologists from all over Brazil. Acceptance percentages were: applicability (99.25%), reliability (99.5%), reproducibility (98.6%), reliability (93.84%), relevance (93.15%). Conclusion: the created instrument was considered applicable, reproducible, relevant, reliable and trustworthy, presenting content validity.

RESUMO Introdução: a formação médica baseada em competências é bem estabelecida, mas há uma escassez mundial de instrumentos capazes de avaliar esses médicos em formação. Objetivo: validar o instrumento The Otolaryngology - Head and Neck Surgery Milestone Project para uso nos Programas de Residência em Otorrinolaringologia no Brasil. Método: o estudo conteve 5 etapas. Na etapa I foram realizadas duas traduções independentes do Projeto Milestones em otorrinolaringologia. Na etapa II, foi realizada uma síntese das traduções. Posteriormente foram acrescentadas as competências que a Associação Brasileira de Otorrinolaringologia exige para formação do otorrinolaringologista no Brasil. Na etapa III foi realizada uma retro tradução do instrumento e enviado para os autores originais. Em seguida, o instrumento foi enviado para ser avaliado por um comitê com 8 experts. Na etapa IV, cada expert fez comentários acerca de cada um dos itens, e após análise das sugestões foi criado um novo instrumento. Na etapa V, este instrumento foi enviado para apreciação de otorrinolaringologistas de todo o país. Resultados: após as traduções e apreciação dos experts foi criado um instrumento com 19 itens. O instrumento foi submetido à análise de Otorrinolaringologistas de todo Brasil. As percentagens de aceitação foram: aplicabilidade (99,25%), fidedignidade (99,5%), reprodutibilidade (98,6%), confiabilidade (93,84%), relevância (93,15%). Conclusão: o instrumento criado foi considerado aplicável, reprodutível, relevante, confiável e fidedigno, apresentando validade de conteúdo.

RESUMO

Resumo: Introdução: O Teste de Progresso (TP) constitui modalidade estabelecida e bem-sucedida de avaliação de conhecimentos do estudante das profissões da saúde, principalmente os de Medicina, com potencial de contribuir substancialmente para as finalidades formativa e informativa (controle de qualidade e indicação de melhoria nos processos de ensino e aprendizagem). Adicionalmente, o TP apresenta características adequadas à sua inclusão em sistemas institucionais de avaliação que privilegiem a finalidade formativa, como a avaliação programática (AP), mas que cumprem também a somativa. Nas escolas que vêm definindo ações visando à introdução da AP em seus cursos de graduação, é necessária a reflexão sobre as fortalezas e limitações da utilização do TP no sistema de avaliação. Desenvolvimento: A partir das considerações de um grupo de trabalho representativo de toda a instituição, incumbido de propor meios de introdução da AP em um novo currículo para o curso de Medicina, contando com assessoria internacional com experiência tanto no TP como na AP, elaborou-se reflexão sobre esse tema, baseada na experiência dos autores e em dados da literatura. Propõe-se que, dentro da perspectiva longitudinal da AP, o TP constitua um dos pilares na avaliação de conhecimentos. O TP pode servir de base para acompanhamento do estudante, no contexto da sua turma (coorte), e seus resultados devem ser discutidos com o mentor que o acompanha e lhe dá suporte. O TP deve ter também papel central na gestão, como fonte de informações para eventual revisão e qualificação do currículo e das suas atividades de ensino e aprendizagem. É previsível que a utilização do TP na AP traga diferentes desafios e barreiras, que serão mais facilmente superados se houver na instituição experiências já consolidadas de aplicação de exames institucionais e de desenvolvimento docente para a elaboração de questões objetivas de boa qualidade. Conclusão: A efetividade do TP dentro do sistema institucional de AP vai depender de medidas que visem aumentar a sua efetividade na avaliação e que estimulem a participação ativa do estudante, refletindo sobre seu desempenho no TP, com o apoio do seu mentor, de modo a se engajar em ações que fomentem a autorregulação da aprendizagem.

Abstract: Introduction: The Progress Test (PT) is a well-established and mostly successful modality of student knowledge assessment in the health professions, mainly those in the medical area, with the potential to contribute substantially to the formative and informative purposes (quality control and indication of improvement in the teaching-learning processes). Additionally, the PT has characteristics that are adequate for its inclusion in institutional evaluation systems that facilitate the formative purpose, such as programmatic assessment (PA), but that also meet the summative purpose. In schools that have defined actions aimed at introducing PA in their undergraduate courses, it is necessary to reflect on the strengths and limitations of using PT in the evaluation system. Development: based on the considerations of a working group representative of the entire institution, tasked with proposing means of introducing PA in a new curriculum for the medical course, with international advice with experience in both PT and PA, we generated a reflection on this topic, based on the authors' experience and data from the literature. It is proposed that, within the longitudinal perspective of the PA, the PT constitutes one of the pillars in the assessment of knowledge. The PT can be used as a basis for monitoring the students, in the context of their class (cohort), and its results should be discussed with the mentors who accompanies and supports them. The PT must also play a central role in management, as a source of information for eventual review and qualification of the curriculum and its teaching-learning activities. It is predictable that the use of the PT in PA will bring different challenges and barriers, which will be more easily overcome if the institution has already consolidated experiences in the application of institutional exams and in faculty development for the production of good quality objective questions. Conclusion: the effectiveness of the PT within the institutional PA system will depend on measures aimed at increasing its effectiveness in the assessment and that encourage the student's active participation, reflecting on their performance in the PT, with the support of their mentor, aiming to engage in actions that encourage learning self-regulation.

RESUMO

Resumen Se analiza la brecha por sexo en matemáticas (razonamiento cuantitativo) en universitarios de Colombia, con base en los resultados de las pruebas estatales de salida de la educación superior Saber Pro, 2018; incluyendo el factor regional. A partir de una modelación cuantílica y una descomposición Juhn-Murphy-Pierce; se identifica la existencia y persistencia de una brecha por sexo en el área evaluada, y diferencias entre las regiones Andina y Caribe. Se destaca: favorabilidad hacia los hombres; importancia de las características educativas e institucionales; importancia de las matemáticas de secundaria (explican cerca del 25% del diferencial); ampliación de la brecha en los cuartiles más altos; v) heterogeneidad regional de la brecha, ampliada por la interacción sexo-región.

Resumo A diferença de gênero em matemática (raciocínio quantitativo) entre estudantes universitários na Colômbia é analisada, com base nos resultados dos exames de saída do ensino superior estadual Saber Pro 2018, incluindo o fator regional. Com base na modelização de quantis e numa decomposição Juhn-Murphy-Pierce, identificamos a existência e persistência de uma diferença de gênero na área avaliada, bem como diferenças entre as regiões andinas e das Caraíbas. Destacam-se: favorabilidade em relação aos homens; importância das características educacionais e institucionais; importância da matemática secundária (explicando cerca de 25% do diferencial); alargamento da lacuna nos quartis mais altos; e heterogeneidade regional da lacuna, amplificada pela interação gênero-região.

Abstract The paper analyzes the gender gap in mathematics (quantitative reasoning) among Colombian university students, based on the results of the State higher education exit tests Saber Pro, 2018; including the regional factor. Based on a quantile modeling and a Juhn-Murphy-Pierce decomposition, the study identifies the existence and persistence of a gender gap in the evaluated area and differences between the Andean and Caribbean regions. The most remarkable points include: favouring men; importance of educational and institutional characteristics; importance of secondary mathematics (accounting for about 25% of the differential); widening of the gap in the highest quartiles; and regional heterogeneity of the gap, widened by gender-region interaction.

Assuntos

RESUMO

Objective: The present study aimed to add new evidence of construct validity of the Teacher's Rating Giftedness Screening Scale. The analysis of its items, in relation to the adjustment indices to the Graduated Response Model, as well as to interpret the sense of the scales formed by the items. Method: The sample was composed of 666 students (64.7% males). The instrument consisted of 42 items that assess five areas (general intellectual abilities, leadership, creativity, specific academic abilities, and artistic talent), being answered by 224 teachers. Results: The results indicated that all items had infit/outfit adjustment indexes within the expected value, between 0.5 and 1.5. The factor accuracy, estimated by the graduated response model, varied between 0.74 to 0.85. Conclusion: The results allowed the elaboration of an interpretation proposal referenced in the item, as well as the identification of the most effective items in discriminating individuals with above average ability level.

Objetivo: O presente estudo visou ampliar as evidências de validade de construto do instrumento Triagem de Indicadores de Altas Habilidades/Superdotação, por meio da análise dos seus itens, em relação aos índices de ajuste ao Modelo de Resposta Graduada, bem como interpretar o sentido das escalas formadas pelos itens. Método: A amostra foi composta por 666 estudantes (64,7% meninos). O instrumento, composto por 42 itens que avaliam cinco dimensões (capacidade intelectual geral, liderança, criatividade, habilidades acadêmicas especificas e talento artístico), foi respondido por 224 professores. Resultados: Os resultados indicaram que todos os itens apresentaram índices de ajuste infit/outfit dentro do valor esperado, entre 0,5 e 1,5. A precisão dos fatores, estimada pelo modelo de resposta graduada, variou entre 0,74 e 0,85. Conclusão: Os resultados permitiram a elaboração de uma proposta de interpretação referenciada no item, bem como a identificação dos itens que se mostram mais eficazes em discriminar indivíduos com habilidade acima da média.

Assuntos