21 oct
|
softgic
|
Medellín
Job Description
Estamos en búsqueda de un Ingeniero de Datos con experiencia en el diseño, desarrollo y optimización de soluciones de datos sobre el ecosistema Microsoft Azure, especializado en arquitecturas Lakehouse, procesamiento distribuido y construcción de pipelines de datos escalables y eficientes.
Requisitos
Requisitos
- Experiencia comprobable como Ingeniero de Datos en entornos Microsoft Azure.
- Dominio de Azure Synapse Analytics, PySpark y Delta Lake.
- Experiencia en arquitecturas Lakehouse y patrón Medallion (Bronze, Silver, Gold).
- Conocimientos sólidos en modelado dimensional de datos y diseño de estructuras analíticas.
- Dominio de Python, programación orientada a objetos y desarrollo modular.
- Experiencia en procesos ETL/ELT, integración y transformación de grandes volúmenes de datos.
- Manejo avanzado de SQL y T-SQL, incluyendo optimización de consultas y rendimiento.
- Experiencia en orquestación de pipelines dinámicos orientados a metadatos.
- Capacidad de análisis, resolución de problemas y aplicación de buenas prácticas de ingeniería de datos.
Buscamos un competente con sólida visión de arquitectura, autonomía técnica y enfoque en la calidad, eficiencia y escalabilidad de las soluciones de datos.
Responsabilidades
- Diseñar, desarrollar y optimizar pipelines de datos utilizando Azure Synapse Analytics y PySpark.
- Implementar y administrar arquitecturas Lakehouse con Delta Lake,
garantizando operaciones transaccionales, integridad y calidad de los datos.
- Diseñar estructuras de datos bajo la arquitectura Medallion (Bronze, Silver y Gold) y modelos dimensionales analíticos.
- Desarrollar procesos ETL/ELT y transformaciones de datos eficientes utilizando Python y PySpark.
- Implementar soluciones modulares y reutilizables mediante programación orientada a objetos (POO) en Python.
- Diseñar, integrar y optimizar bases de datos, consultas y procedimientos mediante T-SQL avanzado.
- Construir y mantener procesos de orquestación dinámica basada en metadatos, asegurando escalabilidad, automatización y trazabilidad.
Requirements
Experiencia comprobable como Ingeniero de Datos en entornos Microsoft Azure. Dominio de Azure Synapse Analytics, PySpark y Delta Lake. Experiencia en arquitecturas Lakehouse y patrón Medallion (Bronze, Silver, Gold). Conocimientos sólidos en modelado dimensional de datos y diseño de estructuras analíticas. Dominio de Python, programación orientada a objetos y desarrollo modular. Experiencia en procesos ETL/ELT, integración y transformación de grandes volúmenes de datos. Manejo avanzado de SQL y T-SQL, incluyendo optimización de consultas y rendimiento. Experiencia en orquestación de pipelines dinámicos orientados a metadatos. Capacidad de análisis, resolución de problemas y aplicación de buenas prácticas de ingeniería de datos.
📌 1957 - Ingeniero de Datos Azure – Lakehouse & PySpark (Medellín)
🏢 softgic
📍 Medellín