Buscamos un/a
Ingeniero/a de Datos Senior
con experiencia en ambientes
Cloud
para participar en la implementación y evolución de una plataforma de datos analíticos sobre
Azure y Databricks
.
- La persona será responsable de construir y mantener los pipelines de ingestión, transformación y procesamiento de datos, garantizando la disponibilidad, calidad y rendimiento de la plataforma.
Requisitos indispensables
- 4+ años de experiencia
en Ingeniería de Datos en ambientes Cloud.
- Experiencia sólida con
Azure Data Factory (ADF)
.
- Experiencia con
Databricks
y
Delta Lake
.
- Experiencia con
Python y PySpark
.
- SQL avanzado
: CTEs, window functions y optimización de consultas.
- Experiencia con
Azure Data Lake Storage Gen2 (ADLS Gen2)
.
- Conocimiento de
Auto Loader, Delta Live Tables (DLT) y Unity Catalog
.
- Experiencia con
Git y control de versiones
.
- Experiencia trabajando con datos en ambientes productivos de gran volumen.
Principales responsabilidades
- Desarrollar y mantener pipelines de datos utilizando
Azure Data Factory (ADF)
.
- Implementar procesos de ingestión y transformación en
Databricks
.
- Construir y mantener capas de datos
Bronze y Silver
utilizando
Delta Lake
.
- Trabajar con
Auto Loader y Delta Live Tables (DLT)
para procesos de ingestión.
- Implementar estrategias de ingestión incremental y procesamiento de grandes volúmenes de datos.
- Desarrollar transformaciones utilizando
Python y PySpark
.
- Optimizar consultas y procesos utilizando
SQL avanzado y Spark
.
- Implementar y gestionar la gobernanza de datos mediante
Unity Catalog
.
- Monitorear y optimizar el rendimiento de pipelines y procesos de datos.
- Aplicar buenas prácticas de versionamiento utilizando
Git
.
- Documentar procesos y arquitectura técnica.
- Trabajar de manera colaborativa con equipos técnicos y funcionales.
Modalidad:
Remota
Contrato:
Obra labor
Salario:
A convenir
Envía tu CV a
[email protected]
indicando en el asunto el nombre de la oferta
📌 Ingeniero/a de Datos Senior | Azure (Colombia)
🏢 Praxis
📍 Colombia