Data Engineer

Beschreibung:

En Rappi buscamos un Senior Data Engineer para liderar el diseño, construcción y optimización de nuestras plataformas de datos a gran escala en un entorno 100% cloud. Esta persona será clave en la creación de pipelines de procesamiento en tiempo real (streaming) y batch, la evolución de nuestra arquitectura de Data Lake/Data Lakehouse y la optimización de costos de infraestructura, asegurando la disponibilidad y calidad del dato para toda la organización.
Trabajarás de forma autónoma en un equipo distribuido globalmente, con un impacto directo en la toma de decisiones estratégicas y en productos críticos de negocio impulsados por datos e inteligencia artificial.

Responsabilidades

* Liderar el diseño, desarrollo e implementación de pipelines de datos (ETL/ELT) robustos, altamente escalables y tolerantes a fallos (batch y streaming).
* Garantizar la confiabilidad, consistencia, gobernanza y observabilidad de los datos en producción a lo largo de toda la organización.
* Optimizar de forma proactiva el rendimiento de consultas y los costos de procesamiento y almacenamiento en la nube (AWS/GCP), generando un impacto financiero directo.
* Colaborar de cerca con equipos de Data Science, Analytics y Producto para estructurar datos complejos y habilitar casos de uso analíticos y modelos de Machine Learning/IA.
* Implementar prácticas de DataOps, incluyendo la automatización de pruebas de calidad de datos, monitoreo de pipelines y despliegues mediante CI/CD.
* Evolucionar la arquitectura de datos de Rappi hacia paradigmas modernos de gestión y almacenamiento (como Data Mesh o Lakehouse).
* Documentar arquitecturas, flujos de datos y mejores prácticas para elevar el estándar técnico del equipo de ingeniería.
* Mentorear a ingenieros de datos del equipo y participar en la resolución de problemas críticos de rendimiento y producción.

Requisitos técnicos

* 5+ años de experiencia en ingeniería de datos, desarrollo de software o posiciones enfocadas en procesamiento de datos a gran escala.
* Dominio sólido de lenguajes de programación orientados a datos, con una base muy fuerte en Python, Scala o Java.
* Experiencia avanzada con frameworks de procesamiento distribuido (como Apache Spark, Flink o Beam).
* Experiencia comprobable en el diseño y optimización de plataformas de datos modernas (Databricks, Snowflake, BigQuery o Delta Lake).
* Excelente dominio de SQL avanzado y principios de modelado de datos (dimensional, Data Vault o similares).
* Manejo de orquestadores de flujos de trabajo de datos como Airflow, Dagster o Prefect.
* Familiaridad con bases de datos relacionales, NoSQL y almacenamiento de objetos en la nube (AWS S3 o GCP Cloud Storage).

Valoramos adicionalmente (Nice to have)

* Experiencia real implementando arquitecturas de streaming y mensajería en tiempo real (Apache Kafka, Kinesis o Pulsar).
* Conocimiento de Infraestructura como Código (IaC) utilizando Terraform.
* Experiencia implementando dbt (data build tool) para transformación y pruebas de calidad de datos.
* Familiaridad con la integración de bases de datos vectoriales (Pinecone, pgvector, Weaviate) para dar soporte a sistemas de IA y RAG.
* Certificaciones cloud (AWS, GCP) o certificaciones específicas de tecnologías de datos (Databricks, Snowflake).

Lo que buscamos en la persona

* Capacidad para resolver problemas técnicos complejos de escalabilidad y rendimiento bajo presión en entornos de alta transaccionalidad.
* Comunicación clara y efectiva con audiencias tanto técnicas como de negocio, en formato síncrono y asíncrono (escrito).
* Foco obsesivo en la eficiencia, optimización de costos de infraestructura y en garantizar la calidad del dato.
* Autonomía y responsabilidad para liderar iniciativas de inicio a fin en entornos de trabajo 100% remotos y distribuidos.

Tipo Empleador: Regular

Empleador: Rappi Technology Colombia
Para más información consulta nuestra pagina web https://about.rappi.com/es y revisa nuestras reseñas en Glassdoor https://acortar.link/Eqm07Q

¡Te esperamos con mucha ansiedad y brillo en los ojos para entregar magia juntos! #Rappi 🧡