09 ago
|
Accenture Colombia
|
Medellín
09 ago
Accenture Colombia
Medellín
Accenture es una compañía global líder en servicios profesionales, con soluciones en estrategia y consultoría, tecnología, operaciones y capacidades digitales que impulsan a nuestros clientes a alcanzar su máximo potencial.
En nuestro equipo de #Tecnología , acompañamos a organizaciones de todas las industrias en su transformación digital, ayudándolas a adoptar tecnologías emergentes que habilitan innovación, eficiencia y resultados reales.
Actualmente nos encontramos en la búsqueda de un Ingeniero de Datos Senior – Big Data & Streaming .
La persona seleccionada será responsable de diseñar, construir y optimizar pipelines de datos a gran escala, garantizando el procesamiento eficiente de información tanto en entornos batch como en tiempo real. Trabajará en una célula ágil orientada a datos, construyendo soluciones robustas, escalables y de alto desempeño en la nube.
? Responsabilidades del rol:- Diseñar, desarrollar y optimizar pipelines de datos de gran escala utilizando Apache Spark.
- Implementar procesos de transformación y procesamiento de datos en batch y tiempo real.
- Construir soluciones de streaming mediante Apache Kafka, Spark Structured Streaming o Apache Flink.
- Integrar plataformas de datos con servicios AWS y arquitecturas cloud escalables.
- Desarrollar y mantener flujos de procesamiento sobre Data Lakes utilizando formatos modernos como Parquet, Avro y Delta Lake.
- Implementar buenas prácticas de rendimiento, monitoreo y optimización de jobs distribuidos.
- Orquestar workflows de datos mediante herramientas como Airflow o AWS Step Functions.
- Participar activamente en ceremonias ágiles y colaborar con equipos multidisciplinarios de desarrollo, DevOps, QA y negocio.
- Garantizar la calidad,
seguridad y confiabilidad de los datos en ambientes productivos de alta demanda. ✔️ Requerimientos del puesto:- Experiencia avanzada en Apache Spark, especialmente con PySpark y Spark SQL.
- Conocimiento sólido en optimización de jobs, DataFrames, Datasets y RDDs.
- Experiencia práctica en Apache Kafka y procesamiento de datos en tiempo real con Spark Structured Streaming o Apache Flink.
- Experiencia trabajando con servicios AWS como Glue, S3, EMR, Kinesis o MSK y Lambda.
- Conocimientos en IAM, VPC y buenas prácticas de seguridad en entornos cloud.
- Experiencia en orquestación de flujos de datos con Apache Airflow o AWS Step Functions.
- Manejo de Git y conocimientos en procesos CI/CD para pipelines de datos.
- Conocimientos deseables en Terraform o AWS CDK.
- Nivel avanzado de Python y SQL.
- Experiencia utilizando formatos de datos como Parquet, Avro, JSON y Delta Lake.
- Mínimo 3 años de experiencia en Ingeniería de Datos.
- Experiencia comprobable trabajando con Apache Spark en entornos productivos de alto volumen.
- Experiencia en proyectos de streaming de datos en tiempo real.
- Deseable experiencia en sector financiero, fintech o banca digital.
- Experiencia trabajando bajo metodologías ágiles como Scrum o SAFe. ? Significativo: Los conocimientos en Apache Spark, Streaming (Kafka/Flink) y AWS son excluyentes .
Buscamos profesionales apasionados por la tecnología, los datos y la innovación, con mentalidad analítica, flexibles y con ganas de aportar al crecimiento continuo de nuestros equipos. ? Todas las decisiones de Accenture se tomarán sin discriminar por motivos de raza, religión, color, sexo, edad, discapacidad, nacionalidad, orientación sexual, identidad o expresión de género, ni por ninguna otra razón cubierta por la legislación local.
📌 Ingeniero de Datos Senior | Big Data & Streaming (Medellín)
🏢 Accenture Colombia
📍 Medellín