RESUMO
Objetivo: este estudio tiene como propósito diseñar y validar un sistema de evaluación objetivo y práctico de habilidades psicomotrices en laparoscopia que permita discriminar la competencia de los cirujanos. Materiales y métodos: fue llevado a cabo en el Centro de Simulación Clínica de la Universidad Javeriana. Voluntariamente participaron seis cirujanos expertos, seis residentes de cirugía y seis estudiantes de Medicina. Cada participante hizo una evaluación compuesta por ocho actividades en simuladores de caja con instrumental regular de laparoscopia. Los resultados obtenidos en los tres grupos fueron analizados por medio de un Anova y un test de Tukey. Además, se hizo un análisis de validez por fuentes de evidencia y la fiabilidad del sistema de evaluación se valoró con alfa de Cronbach. Resultados: tres actividades evaluativas discriminaron los tres grupos de estudio o grados de competencia (novato, intermedio y experto) y otras dos actividades revisaron dos de los grupos. La validez del sistema de evaluación fue comprobada al considerar el contenido, la respuesta del proceso, la estructura interna y las consecuencias de la evaluación. La fiabilidad del sistema de evaluación fue sobresaliente (alfa de Cronbach=0,90). Conclusión: el sistema de evaluación propuesto es una herramienta viable en procesos de formación de cirujanos que permite complementar el método tradicional de evaluación.
Objective: this study aims at designing and validating an objective and practical assessment of psychomotor skills in laparoscopy. This assessment would allow a classification of the surgeons and residents by their psychomotor competence. Materials and methods: this study evaluated the psychomotor competence of three groups of voluntaries: experts (6 senior surgeons), residents (6 surgery residents), and novices (6 students of medical school). The assessment was performed at the Clinical Simulation Center in the Pontificia Universidad Javeriana. The assessment was designed as a composition of eight different activities to be performed by each of the participants in a box trainer and using minimally invasive surgical instruments. The results were analyzed using an Anova and a Tukey's test. Additionally, a validity test by evidence source and the assessment reliability was evaluated using a Cronbach's alpha analysis. Results: three of the eight assessment's activities correctly discriminated three study groups, and other two activities only discriminate two of the three groups. The validity of the assessment was positively evaluated using a content analysis, the response to the assessment, the internal structure and the possible future consequences of the assessment. The reliability of the assessment was considered excellent (Cronbach's alpha=0,90). Conclusion: the propose assessment is a good alternative in formative processes of surgeons and allows to complement the traditional assessment method in surgery education.
Objetivo: este estudo tem como objetivo desenhar e validar um sistema de avaliação objetiva e prática de habilidade psicomotoras em laparoscopia que permita discriminar o nível de competência dos cirurgiões. Metodologia: O estudo foi levado a cabo no Centro de Simulação Clínica da Universidad Javeriana onde voluntariamente participaram 6 cirurgiões expertos, 6 residentes de cirurgia e 6 estudantes de medicina. Cada participante realizou uma avaliação composta por oito atividades em simuladores de caixa com instrumental regular de laparoscopia. Os resultados obtidos pelos três grupos de participantes foram analisados através de um ANOVA e um teste de Tukey. Adicionalmente, realizou-se uma análise de validez por fontes de evidência e a fiabilidade do sistema de avaliação valorou-se empregando uma análise de Alpha de Cronbach. Resultados: três atividades avaliativas discriminaram os três grupos de estudo ou níveis de competência (novato, intermédio e experto), e outras duas atividades discriminaram dois dos grupos. A validez do sistema de avaliação foi comprovada ao considerar o conteúdo, a resposta do processo, a estrutura interna e as consequências da avaliação. A fiabilidade do sistema de avaliação foi sobressalente (Alpha de Cronbach=0,90). Conclusão: O sistema de avaliação proposto é uma ferramenta viável em processos de formação de cirurgiões que permite complementar o método tradicional de avaliação de médicos cirurgiões.