A major goal of human factors interventions in aviation environments is to increase performance without sacrificing safety. The performance assessment state-of-the-practice within aviation training relies heavily on instructor observations and performance checklists or gradesheets. While these tools quantify trainee performance, they focus on outcomes as opposed to the processes (i.e., behaviors and cognitions) that led to a good or bad performance. Theoretical guidance and technological advances offer opportunities to improve the effectiveness and efficiency of instructor feedback by increasing the availability of diagnostic feedback [1]. Specifically, construct validation research indicates that multiple criteria and methods for measuring performance are necessary to provide and accurate picture of performance [2, 3]. Increasing the focus of observer-based grade sheets to account for process-oriented and higher order cognitive skills encourages feedback discussions to address diagnostic details. Additionally, improvements in system processing and computing power can offset human-in-the-loop data analysis with automated capabilities. These system-based measures standardize outcome assessments that minimize human biases and errors [4, 5]. For these reasons, the use of system-based measures to complement instructor-observed assessments provides a more comprehensive understanding of performance. This approach increases reliability of performance evaluations thereby improving determinations of proficiency by relying on quantitative assessments, vice participation or quantities of exposure. This presentation will discuss ongoing efforts to develop and transition tools to address these gaps in current aviation performance assessment capabilities. The goal is to capture observer gradesheets and automated performance measures that reflect individual and team performance on tactical tasks that can be archived for long range data analyses. In addition to presenting the system architecture, the presentation will include a discussion of future directions such as archival systems leveraging data science and the need for increased standardization in performance measurement implementation.
Performance assessment, Measurement validation, Training effectiveness, Observer-based metrics, Automated system-based metrics.
El desarrollo de este proyecto se llevó a cabo en el Colegio Técnico Simón Bolívar, donde se pudo detectar que existe un desconocimiento de la especialidad de mecánica aeronáutica como opción para elegir una profesión, de parte de los estudiantes de tercero de bachillerato, lo que implica que pierden la oportunidad de seleccionar esta carrera que tiene gran demanda en el mercado laboral. Se utilizó la investigación exploratoria para recabar información acerca de esta problemática, la descriptiva que ayudó a ordenar los datos obtenidos, la bibliográfica que a través de documentos y textos proporcionó información ya existente sobre el tema y la de campo que sirvió para observar la problemática en la institución. Se utilizaron instrumentos como la encuesta y la entrevista, para lo cual se diseñó un cuestionario con preguntas estructuradas, con el que fueron encuestados ciento cuarenta y tres personas entre estudiantes y docentes. Una vez tabulados todos los datos estadísticos, se pudo constatar que los estudiantes no conocen sobre la especialidad de mecánica aeronáutica y a pesar de que los docentes conocen esta carrera, no existe la motivación necesaria hacia esta nueva opción para elegir esta profesión. Es por esto que se presenta como propuesta el diseño de una campaña informativa de los beneficios de la especialidad de mecánica aeronáutica, lo que ayudará a promover la especialidad y motivar a los estudiantes a elegir una opción que redundará en mejores profesionales para el desarrollo del país.
Mecánica aeronáutica, Opciones para elegir profesión, Campaña Informativa.
- Atkinson B.F.W., Tindall M.J., Killilea J.P., Anania E.C. (2019) Advancing Performance Assessment for Aviation Training. In: Nazir S., Teperi AM., Polak-Sopińska A. (eds) Advances in Human Factors in Training, Education, and Learning Sciences. AHFE 2018. Advances in Intelligent Systems and Computing, vol 785. Springer, Cham
- ALVARADO FLORES MIGUEL ÁNGEL, Y. G. (Septiembre de 2017). DSpace. Obtenido de Influencia del conocimiento en la especialidad de mecánica aeronáutica de las opciones para elegir una profesión para los estudiantes de tercero bachillerato del colegio técnico simón bolívar, distrito 5, zona 8 en el periodo lectivo 2016-2017: http://repositorio.ug.edu.ec/bitstream/redug/26520/1/BFILO-PMP-17P76.pdf
