DataOps en acción: orquestando la transformación de datos con dbtCore y Athena

Ponente/Speaker: Álvaro Ponce Cabrera Ponente/Speaker: Ricardo Bravo -- En un entorno cada vez más dinámico y demandante, orquestar la transformación de datos de forma eficiente y confiable es clave para acelerar la innovación y la toma de decisiones. En esta charla, se contará como desde Moeve se aplican los principios de DataOps, combinando herramientas líderes como el framework dbt Core y el servicio de procesamiento AWS Athena para construir pipelines de datos ágiles, escalables y de alta calidad. Se mostrará cómo un enfoque basado en la automatización, mediante un ciclo de CI/CD riguroso, asegura que cada cambio en el código sea validado y probado antes de impactar la producción, reduciendo riesgos y mejorando la confianza en los datos. La capacidad serverless de Athena liberan a los equipos de la gestión de infraestructura, permitiendo enfocarse en lo que realmente importa: transformar los datos para generar valor. Además, gracias a las capacidades avanzadas de dbt y el uso de macros para operaciones de tipo upsert, se podrá manejar transformaciones complejas de manera eficiente y robusta. Esto es fundamental para mantener modelos de datos actualizados y consistentes en entornos que requieren rapidez y precisión -- Python España: https://es.python.org/ BlueSky: https://bsky.app/profile/es.pycon.org Twitter/X: https://x.com/PyConES LinkedIn:   / pycones   Instagram:   / pycon_es