20 ago
|
Accenture
|
Medellín
20 ago
Accenture
Medellín
Accenture es una compañía integral líder en servicios profesionales, con soluciones en estrategia y consultoría, tecnología, operaciones y capacidades digitales que impulsan a nuestros clientes a alcanzar su máximo potencial. En nuestro equipo de Tecnología, acompañamos a organizaciones de todas las industrias en su transformación digital, ayudándolas a adoptar tecnologías emergentes que habilitan innovación, eficiencia y resultados reales. Actualmente nos encontramos en la búsqueda de un Ingeniero de Datos Senior Big Data & Streaming. La persona seleccionada será responsable de diseñar, construir y optimizar pipelines de datos a gran escala, garantizando el procesamiento optimizado de información tanto en entornos batch como en tiempo real. Trabajará en una célula ágil orientada a datos, construyendo soluciones robustas, escalables y de alto desempeño en la nube.
Responsabilidades del rol
Diseñar, desarrollar y optimizar pipelines de datos de gran escala utilizando Apache Spark.
Implementar procesos de transformación y procesamiento de datos en batch y tiempo real.
Construir soluciones de streaming mediante Apache Kafka, Spark Structured Streaming o Apache Flink.
Integrar plataformas de datos con servicios AWS y arquitecturas cloud escalables.
Desarrollar y mantener flujos de procesamiento sobre Data Lakes utilizando formatos actuales como Parquet, Avro y Delta Lake.
Implementar buenas prácticas de rendimiento, monitoreo y optimización de jobs distribuidos.
Orquestar workflows de datos mediante herramientas como Airflow o AWS Step Functions.
Participar activamente en ceremonias ágiles y colaborar con equipos multidisciplinarios de desarrollo, DevOps, QA y negocio.
Garantizar la calidad, seguridad y confiabilidad de los datos en ambientes productivos de alta demanda.
Requerimientos del puesto
Experiencia avanzada en Apache Spark, especialmente con PySpark y Spark SQL.
Conocimiento sólido en optimización de jobs, DataFrames, Datasets y RDDs.
Exp
📌 Ingeniero De Datos Senior Big Data And Streaming Medellín
🏢 Accenture
📍 Medellín