Data Engineer Specialist
ScotiaGBS Colombia del Grupo ScotiaBank
Ene 2022 - Nov 2022 (11 meses)
- Más de 30 pasos a producción implementados.
- Publicación de más de 20 nuevos documentos para proceso y solución de incidentes en EDL y EDW.
- Construir queries en HQL/HFDS, con las mejores práctivas para Big Data.
Mejorar código para obtener el mejor performance para ETL and ELT .
Creación de jobs en Tidal para procesos de ingestión, carga y drop de data.
Crear logs en Shell scripting + python para alertar fallas en los distintos procesos de ingestion, carga y limpieza de datos.
- Mantener EDW .
- Testear y mantener ambientes UAT and IST para EDW y EDL.