Hacia una partición dinámica para el formato de datos MeasurementSet

Identificador:  TFG:9597

Handle: https://hdl.handle.net/20.500.11797/TFG9597

Autores:  Iacoponelli, Octavio

Resumen:
Esta tesis presenta la investigación de viabilidad, el diseño y la implementación de un complemento de procesamiento dinámico para conjuntos de mediciones astronómicas (.ms), que permite una partición eficiente y una ejecución en paralelo. Desarrollado inicialmente de forma independiente, el complemento se integró posteriormente en Dataplug y se aplicó en el proyecto EXTRACT. Permite que los flujos de trabajo nativos de la nube procesen grandes conjuntos de datos de manera eficiente, reduciendo los cuellos de botella en la ingesta y la calibración. Implementado en un backend de ejecución de Kubernetes, logra una alta aceleración y demuestra que el preprocesamiento modular y escalable de datos astronómicos es factible y tiene un gran impacto en los observatorios de próxima generación.