Descripción empresa : El Servicio de Empleo operado por Comfama es la plataforma que conecta a las personas con las empresas que ofrecen oportunidades laborales y buscan atraer el talento que contribuya a su crecimiento y consolidación. Las vacantes publicadas por el Servicio de Empleo Comfama, corresponden a oportunidades de empleo ofrecidas por empresas de diversos sectores, ubicadas en Medellín y Antioquia. Funciones del cargo : Importante empresa ubicada en Medellín, solicita para su equipo de trabajo, personal con experiência mínima de 5 años para desempeñar el cargo de Data engineer. Formación académica : técnico/a, tecnólogo/a, competente, especialista o magíster en ingeniería de sistemas, software, datos o áreas afines. Otros perfiles profesionales son válidos siempre que cuenten con experiência comprobada como ingeniero/a de datos. Funciones específicas :

- Crear y mantener canalizaciones basadas en Spark para procesar grandes volúmenes de datos en formato Parquet almacenados en Amazon S3.
- Diseñar e implementar flujos de trabajo de tokenización,



incluyendo conversión de tokens y lógica de intersección y unión de conjuntos de datos.
- Procesar y entregar conjuntos de datos de reclamaciones sanitarias garantizando la integridad de los datos y una asignación de identidad precisa.
- Orquestar canalizaciones de datos utilizando Airflow y/o herramientas de orquestación nativas de AWS.
- Optimizar el rendimiento y los costos de los trabajos de Spark, el diseño de S3 y los patrones de consulta en Athena.

Conocimientos :

- Amplia experiência con Apache Spark (PySpark o Scala), incluyendo uniones, intersecciones, particiones y optimización de rendimiento.
- Amazon S3.
- Amazon Athena.
- Airflow.
- SQL.

Salario : hasta $20.000.000 + prestaciones de ley. Horarios : lunes a viernes de 8:00 a.m. a 5:00 p.m. Tipo de contrato : indefinido. Lugar de trabajo : modalidad virtual, remoto para todo Colombia. Requisitos : personal con experiência mínima de 5 años para desempeñar el cargo de Data engineer. Condiciones oferta : Sueldo neto mensual : 20000000

📌 Data Engineer ** (Medellín)
🏢 Servicio de Empleo Comfama
📍 Medellín