english Icono del idioma   español Icono del idioma  

Please use this identifier to cite or link to this item: https://hdl.handle.net/20.500.12008/50179 How to cite
Title: Evaluación automática de la oralidad en aprendizaje de inglés.
Authors: Nóbile, Ana Clara
Viscardi, Ignacio
Tutor: Cancela, Pablo
Capdehourat, Germán
Chiruzzo, Luis
Góngora, Santiago
Type: Tesis de grado
Keywords: Evaluación automática del habla, Procesamiento de Lenguaje Natural, Task Fulfillment, Evaluación de pronunciación, LLM
Issue Date: 2025
Abstract: Este proyecto aborda el desafío de automatizar la evaluación del habla en inglés como segunda lengua, motivado por el interés del sistema educativo público en evaluar a una mayor cantidad de estudiantes de educación primaria y media en el país e impulsado por el programa educativo Ceibal en Inglés de Ceibal. El trabajo se centra en desarrollar y evaluar herramientas que permitan analizar tanto la forma de producción del habla como el contenido semántico de las respuestas orales. Para la evaluación de características acústicas, se implementaron dos enfoques : una línea base que compara secuencias fonéticas utilizando el modelo Wav2Vec2Phonemes para la extracción de fonemas, y la adaptación del sistema MultiPA (Multi-task Pronunciation Assessment), un modelo preentrenado que evalúa múltiples aspectos de pronunciación. Estos métodos se validaron utilizando dos conjuntos de datos : EpaDB (English Pronunciation by Argentinians Database) y datos reales de estudiantes de Ceibal. En el análisis del contenido semántico, se desarrolló un sistema basado en el modelo de lenguaje de gran escala Llama 3 de 8 mil millones de parámetros. Se diseñaron y evaluaron diversos métodos de instrucción (prompting) para analizar el cumplimiento de tareas en cuatro tipos diferentes de ejercicios de oralidad. Para la transcripción del habla se utilizó WhisperX, seleccionado tras una comparativa con otros sistemas de reconocimiento automático del habla. Los componentes desarrollados se integraron en una plataforma web unificada implementada con React en el frontend y Python FastAPI en el backend. La arquitectura modular del sistema permite la ejecución flexible de diferentes flujos de evaluación mediante un sistema configurable de pipelines, facilitando la incorporación de nuevas herramientas y métodos. Los resultados muestran que MultiPA logra buenas correlaciones con evaluaciones humanas en términos de inteligibilidad y fluidez. En la evaluación semántica, las técnicas de few-shot learning y chain of thought resultaron particularmente efectivas, aunque se identificaron desafíos en la categorización de respuestas intermedias dentro de un esquema de tres niveles de corrección. La plataforma desarrollada muestra la viabilidad de integrar estas herramientas de manera funcional, estableciendo una base para futuras mejoras en la evaluación automatizada del habla en la enseñanza de idiomas.
Description: Títulos obtenidos: Ana Clara Nóbile, Ingeniera electricista e Ignacio Viscardi, Ingeniero en Computación.
Publisher: Udelar.FI
Citation: Nóbile, A. y Viscardi, I. Evaluación automática de la oralidad en aprendizaje de inglés [en línea]. Tesis de grado. Montevideo : Udelar. FI. IIE : INCO, 2025.
Obtained title: Ingeniero Electricista e Ingeniero en Computación
University or service that grants the title: Universidad de la República (Uruguay). Facultad de Ingeniería
License: Licencia Creative Commons Atribución (CC - By 4.0)
Appears in Collections:Tesis de grado - Instituto de Computación
Tesis de grado - Instituto de Ingeniería Eléctrica

Files in This Item:
File Description SizeFormat  
NV25.pdfTesis de grado7,89 MBAdobe PDFView/Open


This item is licensed under a Creative Commons License Creative Commons