Senior Data Engineer - Mexico City
hace 8 minutos
Descripción del trabajo
About Arkham
Arkham is a Data & AI Platform—a suite of powerful tools designed to help you unify your data and use the best Machine Learning and Generative AI models to solve your most complex operational challenges.
Today, industry leaders like Circle K, Mexico Infrastructure Partners, and Televisa Editorial rely on our platform to simplify access to data and insights, automate complex processes, and optimize operations. With our platform and implementation service, our customers save time, reduce costs, and build a strong foundation for lasting Data and AI transformation.
About the Role
We are looking for a Senior Data Engineer to own our high-performance Data Platform based on the Lakehouse architecture. In this role, you will work with cutting-edge technologies such as Apache Spark, Trino, and Delta Lake, ensuring data governance and interoperability across platforms. You'll play a key role in shaping our data infrastructure, working across the entire data lifecycle—from ingestion to transformation and activation.
Requirements
Key Responsibilities
- Lead the next phase of our Data Platform – Develop and enhance Arkham's Data Platform, following Lakehouse architecture principles and ensuring data governance.
- Data Ingestion Pipelines – Design and implement pipelines to extract data from structured, semi-structured, and unstructured sources.
- Data Pipeline Orchestration – Create, monitor, and optimize multiple data extraction and transformation pipelines.
- Data Catalog Integration – Ensure interoperability between data catalogs and various query engines.
- Cluster Management & Observability – Oversee cluster performance and implement observability solutions to maintain optimal execution of data pipelines.
End-to-End Data Lifecycle Management – Maintain high data quality and usability across integration, transformation, and activation stages.
Qualifications
- Experience: 5+ years in data engineering, data architecture, or a related field.
- Technical Expertise: Proficiency in Apache Spark, Delta Lake, and Trino.
- Programming Skills: Strong experience with Python for scripting and automation.
- Cloud Knowledge: Hands-on experience with AWS services, including Glue, S3, and EMR.
- Big Data: Understanding of distributed data systems and query engines.
Problem-Solving: Excellent analytical and debugging skills.
Trabajos similares
Kapital Bank busca a un/a Data Engineer para diseñar e implementar infraestructuras de datos escalables y seguras que apoyen analítica avanzada. · Experiencia en Data Engineering con bases de datos y herramientas de procesamiento. · Conocimientos en Python, SQL, ETL y Big Data (H ...
hace 1 semana
Estamos buscando un Data Engineer para construir sistemas robustos y pipelines escalables. · ...
hace 1 día
Buscamos un/a Data Engineer para diseñar, construir y mantener infraestructuras de datos escalables, seguros y eficientes. · ','Experiencia como Data Engineer o en un rol similar. · ' 'Cocimientos en Python SQL ETL Big Data (Hadoop Spark etc.) plataformas en la nube (AWS GCP Azur ...
hace 1 semana
En Directo estamos fortaleciendo nuestro equipo Data & Analytics para seguir impulsando soluciones de alto impacto en las telecomunicaciones. Buscamos un/a Data Engineer con enfoque en automatización, calidad de datos y analítica avanzada que quiera trabajar con grandes volúmenes ...
hace 2 semanas
AZKAIT busca un Data Engineer para conectar talento IT con empresas Latinoamericanas. · Experiencia como Data Engineer. · ...
hace 3 semanas
En Directo estamos fortaleciendo nuestro equipo de Data & Analytics para seguir impulsando soluciones de alto impacto en el mundo de las telecomunicaciones. Buscamos un/a Data Engineer con enfoque en automatización, calidad de datos y analítica avanzada. · ...
hace 3 semanas
Se busca Ingeniero/a Data para diseñar e implementar soluciones de datos en Snowflake Data Cloud. · Dominio avanzado de Desarrollo con Python (avanzado), SQL (avanzado), PySpark. · Experiencia en desarrollo ETL con Python. · Experiencia con Snowpark y Shell scripting. · ...
hace 2 semanas
Estamos buscando un Data Engineer para unirse a nuestro equipo en esta increíble Fintech de rápido crecimiento. · ...
hace 2 días
Experiencia en Ingeniería de Datos y conocimiento en tecnologías como Python (avanzado), SQL (avanzado) y Snowpark. · Diseñar e implementar soluciones de datos. · Implementar arquitecturas y procesos en Datalake, Lakehouse y Data Warehouse. · ...
hace 2 semanas
AZKAIT busca Data Engineer con experiencia en Ingeniería de datos.Diseño e implementación de tuberías de ingesta de datos (pipelines) y alta competitividad. · ...
hace 1 semana
Estamos buscando perfiles ETL Developer / Data Engineer / Data Warehouse (Junior a Medio Senior) con enfoque en desarrollo de pipelines, calidad de datos y automatización de procesos con tecnologías Python y SQL. · ...
hace 2 semanas
AZKAIT es una empresa Mexicana que busca y conecta el mejor talento IT con empresas Latinoamericanas y de Estados Unidos. ...
hace 4 semanas
Buscamos un/a Data Engineer con enfoque en automatización, calidad de datos y analítica avanzada para diseñar operar y optimizar pipelines ETL para integrar información clave. · ...
hace 3 semanas
Sé parte de Stefanini con un salario competitivo. · Diseñar, desarrollar y mantener procesos de integración y transformación de datos (ETL) utilizando Python. · Implementar y optimizar pipelines de datos en plataformas como Cloudera y Snowflake para asegurar el flujo eficiente de ...
hace 1 mes
Diseñar construir y mantener infraestructuras de datos. · ...
hace 1 semana
Ejecutar y mantener actualizadas las actividades clave de Gobierno de Datos, asegurando el cumplimiento normativo y operativo. · ...
hace 3 semanas
Ejecutar y mantener actualizadas las actividades clave de Gobierno de Datos. · Identificar, documentar y clasificar datos personales y sensibles en los flujos de información. · Elaborar y mantener actualizados los mapas de datos (data mapping). · Coordinar con Seguridad de la Inf ...
hace 3 semanas
Babel es una consultora tecnológica multinacional especializada en aplicar sus servicios y conocimiento tecnológico en los procesos de aceleración digital de sus clientes. · Lenguajes de programación: JAVA /JavaScript / Python · Manejador de Base de Datos: Oracle con conocimiento ...
hace 1 semana
Ser parte activa del equipo en el desarrollo y ejecución de proyectos colaborando en todo el proceso: definición técnico-funcional, ETL, modelado de datos, visualización y formaciones asegurando el éxito en cada fase hasta el despliegue final. · ...
hace 20 horas
Experiencia en ingeniería de datos para construcción de canalizaciones en GCP. · Competente con BigQuery, Dataflow, Pub/Sub o Cloud Composer. · ...
hace 4 días
Buscamos un(a) Ingeniero(a) de Datos con experiencia en modelado de datos, arquitectura de bases de datos y migraciones en entornos multicloud (Azure, AWS). Este rol es ideal para profesionales con un enfoque práctico (hands-on), capaces de diseñar e implementar soluciones escala ...
hace 1 mes