Postúlate en Kit Empleo: kitempleo.com.co/empleo/1at76t

Descripción empresa:
El Servicio de Empleo operado por Comfama es la plataforma que conecta a las personas con las empresas que ofrecen oportunidades laborales y buscan atraer el talento que contribuya a su crecimiento y consolidación. Las vacantes publicadas por el Servicio de Empleo Comfama, corresponden a oportunidades de empleo ofrecidas por empresas de diversos sectores, ubicadas en Medellín y Antioquia.
Funciones del cargo:
Significativo empresa ubicada en Medellín, solicita para su equipo de trabajo, personal con experiência mínima de 5 años para desempeñar el cargo de Data engineer.
Formación académica: técnico/a, tecnólogo/a, profesional, especialista o magíster en ingeniería de sistemas, software, datos o áreas afines. Otros perfiles profesionales son válidos siempre que cuenten con experiência comprobada como ingeniero/a de datos.
Funciones específicas:
- Crear y mantener canalizaciones basadas en Spark para procesar grandes volúmenes de datos en formato Parquet almacenados en Amazon S3.
- Diseñar e implementar flujos de trabajo de tokenización,



incluyendo conversión de tokens y lógica de intersección y unión de conjuntos de datos.
- Procesar y entregar conjuntos de datos de reclamaciones sanitarias garantizando la integridad de los datos y una asignación de identidad precisa.
- Orquestar canalizaciones de datos utilizando Airflow y/o herramientas de orquestación nativas de AWS.
- Optimizar el rendimiento y los costos de los trabajos de Spark, el diseño de S3 y los patrones de consulta en Athena.

Conocimientos:
- Amplia experiência con Apache Spark (PySpark o Scala), incluyendo uniones, intersecciones, particiones y optimización de rendimiento.
- Amazon S3.
- Amazon Athena.
- Airflow.
- SQL.

Salario: hasta $20.000.000 + prestaciones de ley.
Horarios: lunes a viernes de 8:00 a.m. a 5:00 p.m.
Tipo de contrato: indefinido.
Lugar de trabajo: modalidad virtual, remoto para todo Colombia.
Requisitos:
personal con experiência mínima de 5 años para desempeñar el c

Postúlate en Kit Empleo: kitempleo.com.co/empleo/1at76t

📌 Data Engineer 1626494698.7 (Medellín)
🏢 Servicio de Empleo Comfama
📍 Medellín